01. 運維挑戰(zhàn)日益凸顯，轉(zhuǎn)型迫在眉睫

隨著業(yè)務(wù)的高速發(fā)展，微服務(wù)、容器等新技術(shù)已在悄然之中快速應(yīng)用創(chuàng)新。某省級運營商內(nèi)部新老系統(tǒng)并行，架構(gòu)和交易調(diào)用過程復(fù)雜，現(xiàn)存的監(jiān)控手段分散，無法實現(xiàn)端到端交易全透明。

而智慧中臺雖不斷持續(xù)建設(shè)，但過程中IT新舊架構(gòu)并存，IT范圍從B域向大數(shù)據(jù)域、M域、O域擴張，加上IT對象多元化等變化，讓運維面臨的挑戰(zhàn)日益凸顯：

• 運維邊界明顯擴大，運維人員沒有增加，如何保障業(yè)務(wù)持續(xù)穩(wěn)定運行？
• 系統(tǒng)復(fù)雜度持續(xù)增加，如何快速定位故障？
• BOM域上中臺，如何保障B\O\M域的運維需求？
• DevOps模式下，如何快速構(gòu)建運維能力，賦能開發(fā)、運營等團隊，創(chuàng)造價值？

面對巨大挑戰(zhàn)，該運營商迫切需要全新的IT運營管理支撐體系，通過自動化+智能化+敏捷化運維支撐，以及開放共享的平臺化能力，推動傳統(tǒng)運維向“主動服務(wù)、主動運營、主動賦能”云化運維模式轉(zhuǎn)型，確保IT運維、業(yè)務(wù)支撐等工作的高效協(xié)同開展。

經(jīng)過不斷比對與論證，該運營商最終攜手嘉為藍(lán)鯨，引入藍(lán)鯨平臺作為技術(shù)底座，沉淀集中監(jiān)控、集中運維、集中操作、集中流程、集中調(diào)度運維基礎(chǔ)能力，打造能力領(lǐng)先的“敏捷化、集中化、智能化”的IT運營監(jiān)控平臺，助力運維團隊實現(xiàn)敏捷化、運維研發(fā)化（OpsDev）、運營數(shù)字化、運維智慧化。

同時，基于平臺賦能，各專業(yè)、各域運維團隊可以以更低成本、更高效率打造運維能力，攜手共建運維應(yīng)用場景和運維生態(tài)，推動人運維系統(tǒng)到人控制工具運維系統(tǒng)轉(zhuǎn)型。

02“能力+應(yīng)用”構(gòu)建松耦合IT運營監(jiān)控支撐體系

該運營商按照“能力+應(yīng)用”的思路，打破煙囪式建設(shè)模式，構(gòu)建一個可快速迭代的松耦合的IT運營監(jiān)控支撐體系，實現(xiàn)運維數(shù)據(jù)共享、能力開發(fā)、敏捷迭代、智能運維、快速支撐。

同時基于平臺能力，可快速構(gòu)建專業(yè)應(yīng)用及場景，滿足各專業(yè)、各團隊運維運營需求。

03“提智聚能”鋒芒展露，團隊SRE轉(zhuǎn)型初見成果

運維邊界擴大、人員卻沒有增加的情況下，如何賦能運維人員，提升運維價值？基于平臺進(jìn)行SRE轉(zhuǎn)型，是該運營商交出的答卷。

PaaS化的技術(shù)體系，完善的前后端開發(fā)框架、調(diào)度引擎、公共組件等模塊，讓該運營商能夠基于平臺進(jìn)行崗位創(chuàng)新，打造SRE團隊，沉淀和擴展運維能力，共建運維價值生態(tài)。

例如該運營商自主研發(fā)的應(yīng)急管理平臺，對各業(yè)務(wù)的應(yīng)急能力進(jìn)行了封裝，OnCall人員可以通過平臺看到當(dāng)前服務(wù)的狀態(tài)，并且快速對服務(wù)進(jìn)行上下線、應(yīng)急通道切換等操作，整個過程可視、可管、可控，解決了OnCall人員切換應(yīng)急效率低、易出錯等問題。

目前應(yīng)急管理平臺已經(jīng)穩(wěn)定運營一年以上，故障的平均恢復(fù)時長從小時級別減少至分鐘級別，應(yīng)急預(yù)案覆蓋率從0%提升至42%，故障處理率從0%提升至40%，同時實現(xiàn)了故障數(shù)量和處理時長的雙壓降！

在集團“提智聚能”活動中，應(yīng)急管理平臺等多款SaaS獲評運維能力標(biāo)桿，并進(jìn)行全國巡展、賦能智慧中臺；AIOps自動駕駛應(yīng)急保障L4探索項目也成功入選集團創(chuàng)新試點，這標(biāo)志著該運營商業(yè)務(wù)支撐創(chuàng)新能力進(jìn)入全國前列！

04. 打通關(guān)鍵環(huán)節(jié)，實現(xiàn)運維的數(shù)字化轉(zhuǎn)型

除了團隊生態(tài)化能力提升，數(shù)據(jù)消費、敏捷聯(lián)動、感知分析、自動執(zhí)行等能力的落地，也是實現(xiàn)智能化運維支撐的重要前提。

通過本次IT運營監(jiān)控支撐體系的構(gòu)建，該運營商打通運維關(guān)鍵環(huán)節(jié)，落地了可供消費的統(tǒng)一CMDB資產(chǎn)管理、整合運維信息與資源的ITSM敏捷引擎、數(shù)據(jù)全面的業(yè)務(wù)可觀測管理、能力齊全編排靈活的自動化執(zhí)行體系，實現(xiàn)了運維的數(shù)字化轉(zhuǎn)型，為AIOps探索轉(zhuǎn)型打下夯實基礎(chǔ)。

1）可供消費的統(tǒng)一CMDB資產(chǎn)管理

處于運維工作核心的CMDB是自動化、智能化運維的基石。該運營商構(gòu)建了消費型統(tǒng)一CMDB資產(chǎn)管理，實現(xiàn)100%業(yè)務(wù)配置接入、自動數(shù)據(jù)采集和數(shù)據(jù)消費。

• 接入業(yè)務(wù)：
  已接入業(yè)務(wù)數(shù)80+個，主機數(shù)6000+臺，創(chuàng)建通用模型100+個，配置項實例近80000，已完成100%。
• 數(shù)據(jù)采集：
  發(fā)現(xiàn)插件數(shù)20+個，發(fā)現(xiàn)任務(wù)數(shù)近20個，采集插件數(shù)近20個，采集任務(wù)數(shù)10+個，3月份執(zhí)行任務(wù)數(shù)100+個。
• 數(shù)據(jù)消費：
  對外開放API 100+個，提供給10+運維工具進(jìn)行數(shù)據(jù)消費。

2）整合運維信息與資源的ITSM敏捷引擎

通過統(tǒng)一的自服務(wù)門戶、流程引擎、知識庫、自動化調(diào)度，全面整合信息流、管理流和執(zhí)行流，成功構(gòu)建敏捷的ITSM流程管理。

① 流程建設(shè)：已建敏捷流程近20個，包括SLA、日常運維、演練管理、巡檢管理等；

② 工單運轉(zhuǎn)：總工單數(shù)為1000+，其中SLA流程近300個，日常運維操作流程200+個，演練管理流程200+個，巡檢管理流程100+個；

③ 能力對接：對外開放API 10+個，對接運維工具10+（包含自動化能力、智能化能力）。

3）數(shù)據(jù)全面的業(yè)務(wù)可觀測性管理

通過全景集中監(jiān)控，該運營商可觀測性能力覆蓋CRM前端系統(tǒng)、CRM后端系統(tǒng)、BOSS系統(tǒng)等，全面整合數(shù)據(jù)，實現(xiàn)業(yè)務(wù)可觀測性管理。

① 監(jiān)控成效：Metric：已接入監(jiān)控的資源總數(shù)有近40000個，共20+個資源類型，采集插件40+個，監(jiān)控策略配置模板10+條；Trace：部署Web端監(jiān)控、App端監(jiān)控、服務(wù)端監(jiān)控等10+個數(shù)字化運營場景。

② 告警成效：告警總數(shù)157760，處理告警數(shù)157732，近一月的歷史告警數(shù)33901；落地告警收斂策略、告警轉(zhuǎn)工單策略及告警自愈策略。

4）能力齊全，編排靈活的自動化執(zhí)行體系

基于強大的流程編排引擎、自動化引擎、豐富的API接口，該運營商構(gòu)建了統(tǒng)一服務(wù)管理平臺，實現(xiàn)巡檢自動化、應(yīng)用啟停、應(yīng)急切換等自動化執(zhí)行體系。

① 基礎(chǔ)自動化：巡檢腳本數(shù)近90個，巡檢模板數(shù)70+，近10類巡檢對象，任務(wù)總數(shù)70+個；
已構(gòu)建10+個應(yīng)用系統(tǒng)的應(yīng)用啟停任務(wù)；災(zāi)切自動化，對接50+個應(yīng)用，共有災(zāi)備切換任務(wù)20+條。

② 應(yīng)急預(yù)案體系：應(yīng)急預(yù)案覆蓋近10類場景，包括BOSS、云平臺、CRM、BOMC、BASS、動環(huán)、安全、其中自動化預(yù)案10+。

05. 結(jié)語

運維團隊有能力，運維環(huán)節(jié)有數(shù)據(jù)，該運營商已經(jīng)初步實現(xiàn)“運維”向“運營”轉(zhuǎn)型。未來，該運營商可以在此基礎(chǔ)上進(jìn)行工作度量，實現(xiàn)PDCA循環(huán)演進(jìn)；還可以基于數(shù)據(jù)和算法實現(xiàn)AI in ALL，將AI嵌入運維場景，實現(xiàn)運維效能的進(jìn)一步優(yōu)化，更加有效支撐業(yè)務(wù)高質(zhì)量發(fā)展！