2023年8月22日山東移動Cloud CRM首個灰度+滾動發(fā)布版本成功上線，實現(xiàn)支撐系統(tǒng)版本發(fā)布“客戶無感知、業(yè)務(wù)零中斷、風(fēng)險更可控”，為后續(xù)快速迭代、按需發(fā)布奠定堅實基礎(chǔ)。

架構(gòu)復(fù)雜度呈指數(shù)級跳變、用戶規(guī)模龐大、業(yè)務(wù)邏輯復(fù)雜，傳統(tǒng)發(fā)布方式面臨巨大挑戰(zhàn)：

軟件開發(fā)過程的不確定性使得軟件升級存在問題在所難免，高頻次的上線導(dǎo)致出問題的概率也隨之增高，急需尋求一種有效的技術(shù)手段，更早的發(fā)現(xiàn)和解決問題、控制問題影響范圍。

(相關(guān)資料圖)

業(yè)務(wù)支撐系統(tǒng)逐步云化、微服務(wù)化后，規(guī)模更加龐大、復(fù)雜度更高，頻繁的系統(tǒng)升級時常造成服務(wù)中斷，新舊版本難以平滑演進。

新業(yè)務(wù)需求日益增多、推出周期越來越短，對業(yè)務(wù)支撐系統(tǒng)的支撐效率提出了更高的要求，同時新業(yè)務(wù)發(fā)展的快速支撐對版本質(zhì)量帶來極大沖擊。

面對挑戰(zhàn)，山東移動攜手華為公司構(gòu)建灰度+滾動發(fā)布能力，實現(xiàn)業(yè)務(wù)發(fā)布零中斷、無感知、更可控:

灰度+滾動演進路線

灰度+滾動方案

版本發(fā)布步驟

山東移動在灰度+滾動發(fā)布試點過程中，通過多項實踐總結(jié)歸納出“一個標(biāo)準(zhǔn)、兩個工具”的滾動發(fā)布模式，為電信行業(yè)支撐系統(tǒng)滾動發(fā)布提供標(biāo)準(zhǔn)化經(jīng)驗：

一個標(biāo)準(zhǔn)：制定產(chǎn)品灰度標(biāo)準(zhǔn)，從數(shù)據(jù)層、文件層、接口交互層、架構(gòu)層四個維度制定可灰標(biāo)準(zhǔn)。

方案設(shè)計階段：

根據(jù)灰度標(biāo)準(zhǔn)輸出需求設(shè)計方案，對于不可灰需求進行嚴(yán)格評審。

避免熱表進行DDL操作。

開發(fā)階段：

對于不可灰的需求，代碼邏輯需有開關(guān)控制，不影響灰度發(fā)布。

非灰度參數(shù)表和灰度參數(shù)表禁止關(guān)聯(lián)操作。

兩個工具

一鍵發(fā)布：支持云原生鏡像包的一鍵發(fā)布能力，業(yè)務(wù)部署過程全流程動態(tài)展示；業(yè)務(wù)流量秒級切換，用戶無感知。

流量實時監(jiān)控工具：山東移動公司結(jié)合調(diào)用鏈和大數(shù)據(jù)技術(shù)，開發(fā)系統(tǒng)流量實時監(jiān)控工具，實時監(jiān)控各個地市流量分布情況，動態(tài)評估滾動發(fā)布地市或中心流量，智能調(diào)配流量峰值，將繁忙地市流量分配至空閑地市。

山東移動通過灰度+滾動發(fā)布能力建設(shè)，在滿足客戶、渠道和業(yè)務(wù)全融合快速發(fā)展的同時，實現(xiàn)了三項突破：

開發(fā)、交付模式突破：打破傳統(tǒng)火車版本交付模式，按業(yè)務(wù)場景開發(fā)、上線。在線升級，縮短需求交付周期。

版本發(fā)布時間突破：打破業(yè)界版本只能夜間發(fā)布的規(guī)則，實現(xiàn)白天亦可發(fā)布版本，確保24小時業(yè)務(wù)不中斷。版本發(fā)布“零中斷”、“無感知”，提升客戶體驗滿意度。

業(yè)務(wù)流量切換控制突破：由操作員->營業(yè)廳->區(qū)縣->地市等維度控制灰度流量，改變?yōu)榘戳髁堪俜直瓤刂苹叶攘髁?，灰度試點業(yè)務(wù)范圍更接近生產(chǎn)，及時發(fā)現(xiàn)問題、控制影響范圍。

關(guān)鍵詞：