01.應(yīng)用發(fā)布中心產(chǎn)品背景

隨著軟件架構(gòu)的持續(xù)演進(jìn)，應(yīng)用數(shù)量急劇增加，迭代速度不斷加快。運維團(tuán)隊面臨的挑戰(zhàn)不僅是確保系統(tǒng)的高效穩(wěn)定運行，還包括快速響應(yīng)研發(fā)和業(yè)務(wù)需求，實現(xiàn)版本更新和新功能上線。同時，他們還須向業(yè)務(wù)、運營和測試等團(tuán)隊提供必要的數(shù)據(jù)和服務(wù)，以支持業(yè)務(wù)價值的實現(xiàn)。

然而，在實現(xiàn)業(yè)務(wù)價值交付的“最后一公里”，質(zhì)量問題和效率問題尤為顯著。Gartner的研究指出，超過70%的生產(chǎn)環(huán)境故障和中斷源自不當(dāng)?shù)膽?yīng)用變更和更新。這些中斷不僅影響業(yè)務(wù)運營和經(jīng)濟(jì)收益，還可能損害品牌信譽(yù)，增加運營成本，并帶來法律和合規(guī)風(fēng)險。

基于深入的市場調(diào)研和分析，我們認(rèn)為，企業(yè)迫切需要構(gòu)建一個以應(yīng)用為中心的應(yīng)用發(fā)布平臺。該平臺應(yīng)與持續(xù)集成（CI）工具、審批流程控制和觀測工具等環(huán)節(jié)緊密銜接，制定全面的管理規(guī)范，以實現(xiàn)自動化、高效的變更管理，確保業(yè)務(wù)連續(xù)性和風(fēng)險控制。

02.企業(yè)建設(shè)應(yīng)用發(fā)布平臺面臨的挑戰(zhàn)

在企業(yè)實際 IT 環(huán)境中，建設(shè)應(yīng)用發(fā)布平臺往往是一套系統(tǒng)性工程，往往會給研發(fā)團(tuán)隊、運維團(tuán)隊帶來不小的挑戰(zhàn)：

03.應(yīng)用發(fā)布中心產(chǎn)品定位

嘉為藍(lán)鯨應(yīng)用發(fā)布中心專注于為企業(yè)提供標(biāo)準(zhǔn)化的應(yīng)用變更解決方案，實現(xiàn)應(yīng)用發(fā)布的統(tǒng)一管理和自動化執(zhí)行。平臺覆蓋單體、微服務(wù)和分布式應(yīng)用的發(fā)布場景，支持傳統(tǒng)主機(jī)和容器化應(yīng)用的發(fā)布方式，包括藍(lán)綠發(fā)布和金絲雀發(fā)布等策略。我們的目標(biāo)是通過平臺化管理，實現(xiàn)應(yīng)用發(fā)布全生命周期的高效、穩(wěn)定變更，助力企業(yè)提升運營效率和穩(wěn)定性。從軟件交付生命周期看：

04.應(yīng)用發(fā)布平臺秋季發(fā)布會亮點

1）容器發(fā)布鏡像預(yù)熱

① 概念理解

鏡像預(yù)熱：在應(yīng)用部署之前提前將應(yīng)用鏡像拉取到具體的Node節(jié)點上面，進(jìn)而達(dá)到鏡像預(yù)熱的目的，能夠極大的提升應(yīng)用的部署效率。

② 使用場景

③ 解決方案

嘉為藍(lán)鯨應(yīng)用發(fā)布中心通過自研的CRD-imageloader，智能解析工作負(fù)載的YAML文件中的調(diào)度規(guī)則，自動在K8S集群中指定節(jié)點進(jìn)行鏡像預(yù)熱，從而顯著減少分發(fā)和拉取時間，提升發(fā)布效率和系統(tǒng)響應(yīng)速度。
針對應(yīng)用級投產(chǎn)場景（即一次投產(chǎn)涉及多個微服務(wù)/鏡像發(fā)布的場景），嘉為藍(lán)鯨應(yīng)用發(fā)布中心提供了以下鏡像預(yù)熱策略：

• 并行預(yù)熱：同時預(yù)熱多個鏡像，最大化利用網(wǎng)絡(luò)帶寬和節(jié)點資源。
• 串行預(yù)熱：按順序逐個預(yù)熱鏡像，適用于網(wǎng)絡(luò)帶寬受限的情況。
• 定時預(yù)熱：在指定時間段進(jìn)行鏡像預(yù)熱，避免高峰期網(wǎng)絡(luò)擁堵。

在投產(chǎn)變更窗口期前，完成鏡像預(yù)熱，應(yīng)用投產(chǎn)耗時能優(yōu)化 70% 以上，可以大幅提升整體發(fā)布效率和系統(tǒng)響應(yīng)速度。

2）容器發(fā)布介質(zhì)管理全面優(yōu)化

① 使用場景

云原生轉(zhuǎn)型難：隨著業(yè)務(wù)向云原生遷移，業(yè)務(wù)的開發(fā)、運維團(tuán)隊在K8s基礎(chǔ)知識仍較為缺失。

YAML文件管理挑戰(zhàn)：YAML文件管理不僅工作量大，錯誤風(fēng)險也高。現(xiàn)有的部署工具難以實時同步K8s運行時配置，導(dǎo)致投產(chǎn)變更復(fù)雜且易出錯。

應(yīng)急回滾需求：配置錯誤可能導(dǎo)致業(yè)務(wù)中斷，急需有效的應(yīng)急回滾措施來保障業(yè)務(wù)連續(xù)性。

② 解決方案

通過這些優(yōu)化措施，容器發(fā)布將變得更加高效、可靠，顯著降低了發(fā)布過程中可能出現(xiàn)的風(fēng)險和復(fù)雜度。

3）真正的端到端交付

① 使用場景

② 解決方案

4）應(yīng)用變更保障

① 使用場景

金融、運營商等行業(yè)對變更管理有嚴(yán)格的合規(guī)要求，需要確保所有變更都有適當(dāng)?shù)膶徟陀涗洝?/span>

② 解決方案

業(yè)務(wù)保障策略：在業(yè)務(wù)高峰期或重大事件期間，平臺管理員可設(shè)置業(yè)務(wù)保障期，限制變更操作，確保關(guān)鍵時期的業(yè)務(wù)連續(xù)性。

工單審批：通過流程審批與自動化發(fā)布融合，優(yōu)化軟件交付流程，確保變更操作的合規(guī)性和安全性。從最佳實踐上看，所有生產(chǎn)環(huán)境的應(yīng)用變更需經(jīng)過企業(yè)內(nèi)部的變更流程審批，并且應(yīng)用變更范圍與變更工單填寫內(nèi)容一致。工單審批機(jī)制確保變更操作與企業(yè)的變更管理流程緊密結(jié)合，提升變更的可控性和可追溯性。

變更中雙人復(fù)核：執(zhí)行生產(chǎn)環(huán)境變更時，實施A/B角復(fù)核機(jī)制，雙人復(fù)核機(jī)制確保變更操作的透明度和準(zhǔn)確性，減少人為錯誤的可能性。

05.如何建設(shè)應(yīng)用發(fā)布平臺

嘉為藍(lán)鯨應(yīng)用發(fā)布中心已成功服務(wù)超過100+客戶，累計支撐變更數(shù)達(dá)到數(shù)十萬次，已成為生產(chǎn)變更最重要的平臺。自2019年產(chǎn)品面世以來，嘉為藍(lán)鯨應(yīng)用發(fā)布中心在超大型客戶的實際應(yīng)用中不斷打磨和優(yōu)化。我們的產(chǎn)品團(tuán)隊深入研究客戶的應(yīng)用變更場景，打通上下游工具鏈，提供兼容性強(qiáng)且極簡易用的應(yīng)用發(fā)布平臺，并提供最佳實踐和應(yīng)用變更管理規(guī)范。嘉為藍(lán)鯨應(yīng)用發(fā)布中心主要包含六大能力：

1）應(yīng)用管理

通過應(yīng)用架構(gòu)映射業(yè)務(wù)架構(gòu)，梳理部署地域和最小交付單元，保障應(yīng)用運維的有效落地。

2）配置管理

遵循DevOps“一包到底”的最佳實踐，以應(yīng)用配置分離原則為目標(biāo)，將應(yīng)用配置與程序的解耦，集中管理配置，確保在不同部署環(huán)境中發(fā)布介質(zhì)保持一致，提升發(fā)布質(zhì)量和效率。

3）制品管理

通過集中管理傳統(tǒng)虛擬機(jī)和云原生應(yīng)用的發(fā)布介質(zhì)，如程序包、YAML文件、SQL等，解決了制品分散和維護(hù)復(fù)雜的問題。

針對應(yīng)用配置分離場景，支持與企業(yè)級配置中心對接，動態(tài)獲取配置項渲染至配置文件，確保發(fā)布過程的高效性和一致性，提升整體發(fā)布效率和質(zhì)量。

4）對象管理

集中管理云下和云上的部署對象，支持多種主機(jī)和云廠商K8s的管理，解決跨環(huán)境部署的復(fù)雜性，提升部署效率和一致性。

5）發(fā)布管理

提供靈活的發(fā)布流水線編排引擎，支持多應(yīng)用、多環(huán)境、多地域的自動化發(fā)布，并支持多種發(fā)布策略，如滾動發(fā)布、藍(lán)綠發(fā)布、灰度發(fā)布，提升應(yīng)用自動化、一體化交付能力。

6）發(fā)布體系建設(shè)

通過客戶實踐，已抽象出構(gòu)建應(yīng)用發(fā)布平臺的最佳實踐和變更管理規(guī)范，幫助企業(yè)建立標(biāo)準(zhǔn)化的發(fā)布流程和變更管理體系。

嘉為鯨舟應(yīng)用發(fā)布中心通過端到端的集成和自動化管理，實現(xiàn)從變更前的CI持續(xù)集成、變更中的審批和發(fā)布，到變更后的監(jiān)控和分析的全流程覆蓋。平臺不僅提高了發(fā)布效率，減少了人為操作風(fēng)險，還通過一鍵執(zhí)行和全過程透明管理，確保發(fā)布過程的高效性和穩(wěn)定性。詳細(xì)的變更記錄和運營分析功能，滿足企業(yè)的合規(guī)需求，并提供持續(xù)優(yōu)化的反饋機(jī)制，助力企業(yè)實現(xiàn)高效、穩(wěn)定的應(yīng)用變更管理。