不同于以往的泡面配火腿，熬夜黑眼圈。7月20日下午6點(diǎn)半，當(dāng)杭城夏日斜陽穿過磨砂玻璃撫弄一排排被指肚兒拋光的按鍵時(shí)，鍵盤的主人已經(jīng)坐上古墩路駛往未來城的公交，盤算起了啤酒配烤串兒的暢爽夏夜。跟以前的系統(tǒng)上線完全不同，這次涉及C(個(gè)人市場)、H(家庭市場)、B(政企市場)三大市場二十余個(gè)需求的上線發(fā)布并沒有將戰(zhàn)事拉長到后半夜，甚至沒有等到西湖升起的新月掛上三墩的樹梢。

對于電信運(yùn)營商這樣復(fù)雜、龐大的企業(yè)IT系統(tǒng)來說，每次規(guī)模化的版本上線都猶如一場戰(zhàn)斗!而這次戰(zhàn)斗，應(yīng)該稱為“大捷”。支撐大捷的秘密武器，就是亞信科技項(xiàng)目團(tuán)隊(duì)與浙江移動打造的全鏈路引流“灰度發(fā)布”。

全鏈路引流灰度發(fā)布 為CHBN協(xié)同發(fā)展筑牢系統(tǒng)迭代的穩(wěn)固之基

“灰度發(fā)布”是一種軟件系統(tǒng)平滑升級的發(fā)布方式，通過小步快跑、快速試錯(cuò)降低業(yè)務(wù)變更風(fēng)險(xiǎn)。

試想，以電信運(yùn)營商IT架構(gòu)之龐大、復(fù)雜，每個(gè)小的改變都可謂牽一發(fā)動全身，動輒牽涉成百上千萬用戶的體驗(yàn)感知，更何況是涉及個(gè)人、家庭、政企三大市場的端到端發(fā)布!這對企業(yè)IT系統(tǒng)提出了嚴(yán)苛要求：用戶與觸點(diǎn)之間，前臺系統(tǒng)與中臺系統(tǒng)，中臺系統(tǒng)與外圍系統(tǒng)都要實(shí)現(xiàn)策略一致的引流。在未引入灰度發(fā)布之前，為不影響用戶體驗(yàn)，每次版本發(fā)布都要避開用戶使用高峰時(shí)段，選擇夜間發(fā)布。此外，當(dāng)前的發(fā)布模式存在發(fā)布窗口小、回退時(shí)間長、影響范圍不可控等問題，制約著整體交付效率，故障搶修時(shí)的重新打包、發(fā)版，耗費(fèi)時(shí)間還影響系統(tǒng)穩(wěn)定性，極易損害消費(fèi)者業(yè)務(wù)體驗(yàn)。

而且，隨著互聯(lián)網(wǎng)尤其是5G業(yè)務(wù)的開展，VR/AR、游戲、直播，甚至遠(yuǎn)程醫(yī)療、無人駕駛等應(yīng)用層出不窮，業(yè)務(wù)需求和變化之繁多將大大超出以往。目前每周一次的更新上線已無法滿足市場需求，但如果只是簡單增加傳統(tǒng)的上線窗口則會拉高研發(fā)、測試、運(yùn)維成本，這不符合IT系統(tǒng)降本增效的整體目標(biāo)。浙江移動因應(yīng)全新業(yè)務(wù)環(huán)境，把握企業(yè)IT架構(gòu)云化、微服務(wù)化的發(fā)展趨勢，走在了行業(yè)先行先試的前列。

針對本次發(fā)布，亞信科技項(xiàng)目團(tuán)隊(duì)借鑒了業(yè)界常用的藍(lán)綠發(fā)布模式，與客戶協(xié)同，自研出適合浙江移動業(yè)務(wù)模式的主動、精準(zhǔn)引流式藍(lán)綠發(fā)布，即“全鏈路引流發(fā)布”。全鏈路引流發(fā)布充分利用了容器云、微服務(wù)中間件、DevOps技術(shù)，讓資源能夠充分復(fù)用，極大降低了開發(fā)管控成本。在技術(shù)上，實(shí)現(xiàn)了低成本、雙平面、全鏈路的平滑過渡發(fā)布模式，交付過程用戶無感知，不影響業(yè)務(wù)體驗(yàn);管理上，實(shí)現(xiàn)了灰度發(fā)布需求的自動化分揀和按需上線排版，交付窗口更靈活;整體上，需求交付頻率提升50%，能夠?qū)崿F(xiàn)前臺類需求的按需發(fā)布，因交付引起的故障有望減少50%。

【全鏈路引流發(fā)布】

此外，通過白天發(fā)布和引流，讓每逢系統(tǒng)上線就要加班熬夜成為了歷史，極大解放了人力資源。同時(shí)，以需求為單位的開發(fā)交付，進(jìn)一步提升了交付效能;持續(xù)的運(yùn)維支撐有效保證了生產(chǎn)環(huán)境下軟件系統(tǒng)的穩(wěn)定性，為前臺業(yè)務(wù)平穩(wěn)運(yùn)行創(chuàng)造了良好條件，讓用戶在無感知的情況下獲得了更為優(yōu)質(zhì)的服務(wù)體驗(yàn)，為踐行中國移動“C(個(gè)人市場)、H(家庭市場)、B(政企市場)、N(新興市場)四輪驅(qū)動”市場戰(zhàn)略打下了堅(jiān)實(shí)基礎(chǔ)。

“金絲雀”銜來云原生 平臺化提升交付力

早在2015年，浙江移動就通過搭建藍(lán)綠兩套環(huán)境實(shí)現(xiàn)了單一系統(tǒng)的白天上線，但這種方式難以支撐CRM等“巨無霸”系統(tǒng)的更迭。本次發(fā)布就涉及了CHB市場的全量系統(tǒng)、全部需求，這在體量、控制點(diǎn)、發(fā)布難度等方面較以往單一系統(tǒng)上線可謂大相徑庭。

基于“云原生”理念，亞信科技攜手浙江移動著力填補(bǔ)關(guān)鍵技術(shù)點(diǎn)，在微服務(wù)框架、持續(xù)交付、容器化等方面不斷演進(jìn)。2018年底，亞信科技助力浙江移動完成了系統(tǒng)架構(gòu)的全面升級，將上一代架構(gòu)系統(tǒng)拆解成一個(gè)個(gè)功能高內(nèi)聚、數(shù)據(jù)高自治、系統(tǒng)低耦合的“微服務(wù)”，保障了系統(tǒng)在開發(fā)態(tài)和運(yùn)行態(tài)的穩(wěn)定性、兼容性、靈活性。也正是在容器化、微服務(wù)化、平臺化這些架構(gòu)能力的支持下，才能實(shí)現(xiàn)本次規(guī)模化的業(yè)務(wù)系統(tǒng)灰度發(fā)布。對于浙江移動而言，灰度發(fā)布這只“金絲雀”將云原生架構(gòu)3級成熟度中最后一項(xiàng)關(guān)鍵技術(shù)銜入囊中。

這一過程中，灰度發(fā)布能力的平臺化是至為關(guān)鍵的一環(huán)。首先，通過將發(fā)布能力固化到平臺上，實(shí)現(xiàn)了業(yè)務(wù)之于技術(shù)的深度解耦。其次，通過新建灰度發(fā)布控制臺組件，實(shí)現(xiàn)了雙平面無縫切換，支持工號、組織、區(qū)域、渠道、IP等多維度引流策略。再次，通過改造現(xiàn)有微服務(wù)平臺組件能力，實(shí)現(xiàn)了分布式服務(wù)調(diào)用、緩存、調(diào)用鏈分析、配置中心、分布式任務(wù)調(diào)度等組件的多版本管理能力。

最后，新建灰度發(fā)布持續(xù)交付流水線，完善了涉及代碼、腳本、服務(wù)、配置等交付物的一站式管理。所有交付物均在灰度發(fā)布流水線中管理，對現(xiàn)有流程進(jìn)行相關(guān)改造，進(jìn)一步形成了灰度發(fā)布所需能力。成果并非一蹴而就，正是浙江移動長期以來的IT系統(tǒng)架構(gòu)演進(jìn)、上云研發(fā)、持續(xù)交付以及平臺化能力的打造，有效支撐了當(dāng)前的規(guī)模化灰度發(fā)布。

從每每燈火通明的集中發(fā)布到現(xiàn)在自然順暢的白天發(fā)布(灰度發(fā)布)，背后是浙江移動云原生持續(xù)交付能力以終為始的演進(jìn)歷程，也是亞信科技作為全天候合作伙伴與客戶并肩作戰(zhàn)推動云原生能力不斷攀升的過程。此后，我們將會持續(xù)擴(kuò)大灰度發(fā)布覆蓋的需求范圍和系統(tǒng)范圍，推進(jìn)浙江移動乃至全行業(yè)的數(shù)字化水平躍升。20年了，這個(gè)行業(yè)膽戰(zhàn)心驚熬夜發(fā)布的歷程終于進(jìn)入了尾聲!

fqj