企業(yè)通過成熟的技術(shù)實施和實施IT運維管理。IT運維技術(shù)可以分四個階段逐步落地：人工運維能力、平臺化運維能力、數(shù)據(jù)化運維能力、智能化運維能力。相反，實現(xiàn)智能運維能力的前提是具備人工化、平臺化、數(shù)據(jù)化的能力。企業(yè)應(yīng)根據(jù)自身運維發(fā)展階段和實際運維需求，分階段實施相關(guān)技術(shù)能力。

一、IT運維業(yè)務(wù)面臨挑戰(zhàn)

隨著中國聯(lián)通“大聯(lián)通”戰(zhàn)略的深入實施，業(yè)務(wù)規(guī)模快速下滑，內(nèi)外部競爭日趨激烈復(fù)雜，IT技術(shù)快速演進(jìn)，聯(lián)通內(nèi)外部客戶提升IT運營水平和維護(hù)公司信息系統(tǒng)部門的管理執(zhí)行效率。精細(xì)化運營管理能力提出了更高的要求和挑戰(zhàn)：

1.為適應(yīng)新業(yè)務(wù)日新月異、日新月異的市場形勢，中國聯(lián)通提出“行節(jié)約、降本、增效”活動，引入人工智能技術(shù)，建立低成本和高效率的運營體系，推動“以信息代人”戰(zhàn)略的實現(xiàn)，以在日益激烈的同質(zhì)化競爭中贏得主動。

2.在2019年IT工作思路中，中國聯(lián)通提出“以積極賦能和發(fā)展IT為主線，大力推進(jìn)IT支撐向IT運營轉(zhuǎn)變”、“著力提升智能化能力運維支撐、創(chuàng)新發(fā)展”等“能力”要求，明確了IT運維能力重點發(fā)展目標(biāo)的方向。

3.隨著信息部門系統(tǒng)的云化、容器化、中心化、微服務(wù)等架構(gòu)調(diào)整，“系統(tǒng)架構(gòu)與業(yè)務(wù)調(diào)用關(guān)系復(fù)雜，運維管理難度降低”的痛點"是針對這個運維系統(tǒng)的。還要實時跟進(jìn)，不斷調(diào)整自身發(fā)展規(guī)劃，向“大運維、一體化運營、專業(yè)化業(yè)務(wù)、實踐敏捷化、運營智能化、體驗卓越”的理念演進(jìn)，為生產(chǎn)系統(tǒng)提供更好的運維支持服務(wù)。

二、【痛點與難點】

· IT運維痛點：

運維系統(tǒng)重復(fù)建設(shè)；各域運維隔離，響應(yīng)不及時；云化后的IT運維智能化程度不高，還在不斷演進(jìn)。

·5G時代ICT融合運維面臨的挑戰(zhàn)：

5G網(wǎng)元的控制平面和傳輸前饋，傳統(tǒng)（2G/3G/4G）運維平臺難以支撐5G網(wǎng)絡(luò)資源的集中統(tǒng)一配置管理和運維；5G網(wǎng)絡(luò)實現(xiàn)SDN提供的行業(yè)切片服務(wù)，現(xiàn)有運維平臺無法實現(xiàn)端到端的部署、運維、交付；5G網(wǎng)絡(luò)的多層編排協(xié)同，目前還沒有可視化的運維管理；以及網(wǎng)絡(luò)端到端的客戶體驗和智能運維；5G大量商用，缺乏實現(xiàn)網(wǎng)絡(luò)故障預(yù)警、業(yè)務(wù)切換和故障恢復(fù)的AI手段。

三、【實踐路徑】

·智能運維系統(tǒng)

基于能力梳理和方向規(guī)劃，提出1個愿景、3個核心、5個階段、3個基石的“1+3+5+3”智慧運維能力體系。

（1）1愿景：IT運營創(chuàng)造價值是構(gòu)建智能運維系統(tǒng)的根本愿景。

（2）穩(wěn)定性與準(zhǔn)確性、用戶滿意度和風(fēng)險防范三個核心是智慧運維體系建設(shè)的三個核心價值取向。

（3）5個階段：“初始階段-標(biāo)準(zhǔn)化階段-手動化/可視化階段-中級智能階段-中級智能階段”是智慧運維體系建設(shè)中各項能力的演進(jìn)路線。

（4）三大基石：崗位規(guī)劃、文化修養(yǎng)、能力提升是智慧運維體系建設(shè)的三大基石。

·技術(shù)運營中臺技術(shù)架構(gòu)

（1）數(shù)據(jù)采集層：對于應(yīng)用監(jiān)控層面的采集，可以通過UDP合約傳輸、、Java等方式獲取運維指標(biāo)，對業(yè)務(wù)系統(tǒng)影響較弱，可以也可以通過自定義Agent、業(yè)務(wù)指標(biāo)等形式建立和收集。

(2）數(shù)據(jù)處理層：Flink流處理作為數(shù)據(jù)處理引擎，首創(chuàng)提供低延遲、高吞吐、實時處理能力，為監(jiān)控、智能分析等系統(tǒng)提供各種應(yīng)用場景完善同時，對于常用的數(shù)據(jù)預(yù)處理、清洗、過濾等需求，F(xiàn)link 還支持批處理等方式。

(3）數(shù)據(jù)存儲層：各種數(shù)據(jù)根據(jù)需要和分工存儲在不同的介質(zhì)上，以達(dá)到最佳的效率和最佳的匹配效果。(4）數(shù)據(jù)通道層：基于Due針對運維工作和運維數(shù)據(jù)的特點，選用分布式發(fā)布-訂閱消息中間件Kakfa作為通用數(shù)據(jù)通道，以其易于擴展、高吞吐的特點，實現(xiàn)各組件間數(shù)據(jù)共享和分發(fā)，可以實現(xiàn)微服務(wù)，是通過Kafka來實現(xiàn)的。

(5）微服務(wù)層：后臺功能的微服務(wù)，根據(jù)業(yè)務(wù)監(jiān)控、人工運維、應(yīng)用配置管理、智能分析、日志管理等定義微服務(wù)的范圍和邊界，對外開放世界通過API 網(wǎng)段能力。

(6）API網(wǎng)段層：API網(wǎng)段采用框架，API網(wǎng)段負(fù)責(zé)對外提供統(tǒng)一的訪問入口，對內(nèi)提供合約聚合、路由分發(fā)、負(fù)載均衡、服務(wù)配置，以及為前端服務(wù)提供總線消息等功能，從而實現(xiàn)微服務(wù)的服務(wù)隔離、線性擴展和有效監(jiān)控。（7）后端應(yīng)用層：選擇輕量級、高性能、組件化的框架后端，適用于這些基于數(shù)據(jù)的驅(qū)動WEB界面的運維。

四、【實際療效】

·在人工和智能運維能力和運維場景的決策過程中，基于對風(fēng)暴管理流程的回顧，構(gòu)建了矩陣評價模型決策體系，同時對運營分析開發(fā)、上線、運維、優(yōu)化環(huán)節(jié)的維護(hù)痛點。對相關(guān)指標(biāo)進(jìn)行跟蹤管理，形成閉環(huán)績效評價體系。上述系統(tǒng)實現(xiàn)了有限資源的科學(xué)合理利用，最大化運維能力it運維技術(shù)，場景建設(shè)效益。

·“微服務(wù)+能力開放”的Paas級平臺，快速建立全球支撐能力。

·一站式自助配置的場景搭建，極大地解放了人工成本。

·實現(xiàn)運維場景“百花齊放”，成為降低運營成本、提高效率的催化劑，實現(xiàn)核心業(yè)務(wù)系統(tǒng)運維管理100%覆蓋。

·團(tuán)隊軟實力筑基，組織文化發(fā)展與科技創(chuàng)新形成協(xié)同效應(yīng)

五、【實現(xiàn)IT智能化運維能力】

1.手動運維能力

日常IT運維工作中存在大量重復(fù)性任務(wù)。這些任務(wù)有的復(fù)雜冗長，有的嚴(yán)重依賴執(zhí)行順序，有的需要等待各種條件滿足才能執(zhí)行。雖然IT運維管理技術(shù)在不斷提高，但實際上IT運維人員并沒有真正得到解放。目前，很多企業(yè)的系統(tǒng)啟動和關(guān)閉、系統(tǒng)更新升級、應(yīng)急操作等大部分工作都是手動完成的。雖然簡單的系統(tǒng)變更或軟件復(fù)制粘貼升級，往往需要運維人員逐一登錄各個設(shè)備進(jìn)行手動更改。尤其是在云平臺、大數(shù)據(jù)、海量設(shè)備的情況下，工作量可想而知。此類變更和檢測操作在IT運維中每天都會發(fā)生，占用了大量的運維資源。通過手動操作工具，將運維人員從簡單重復(fù)的工作中解放出來，降低誤操作風(fēng)險，帶來系統(tǒng)穩(wěn)定性、安全性和效率的提升。應(yīng)用場景如下：

(1）日檢手動化：日檢內(nèi)容簡單但占用IT運維人員大量時間。日檢人工巡檢可以改變硬件狀態(tài)、設(shè)備負(fù)載、系統(tǒng)時間、C手動檢查磁盤空間、線路流量、數(shù)據(jù)庫表空間使用情況、網(wǎng)絡(luò)設(shè)備端口狀態(tài)、流量等，生成符合用戶要求的檢查報告。

(2）手動配置管理：手動從生產(chǎn)環(huán)境中提取配置庫信息，手動更新到配置庫，保持配置庫和生產(chǎn)環(huán)境的一致性。實現(xiàn)手動更新和同步配置庫，需要對應(yīng)用系統(tǒng)進(jìn)行標(biāo)準(zhǔn)化，比如標(biāo)準(zhǔn)化的安裝路徑、統(tǒng)一的版本等，有利于工具提取應(yīng)用配置項的基本信息，最終實現(xiàn)配置項和屬性的手動更新.

(3）手動應(yīng)用部署：使用手動平臺圖形化流程編輯器創(chuàng)建組件流程。根據(jù)平臺提供的插件，可實現(xiàn)與流行工具的集成，快速部署邏輯無需任何編程即可定義 是 使用相同的流程將相同的應(yīng)用程序部署到多個環(huán)境中。這進(jìn)一步有助于節(jié)省時間和提高效率，以及早期驗證應(yīng)用程序和部署過程。手動平臺的分布式代理模型可以擴展到數(shù)千個部署過程在每臺機器上同時運行。

(4）容災(zāi)切換操作手動化：通過容災(zāi)操作流程手動批量實現(xiàn)容災(zāi)切換流程。通過雙活數(shù)據(jù)中心為業(yè)務(wù)系統(tǒng)構(gòu)建雙活模式實現(xiàn)手動切換，盡可能減少停機時間。

2.平臺運維能力

運維工作相當(dāng)復(fù)雜，包括網(wǎng)絡(luò)、服務(wù)器、操作系統(tǒng)、數(shù)據(jù)庫、發(fā)布、變更、監(jiān)控、故障處理、運行環(huán)境信息維護(hù)等。同時，面對日益復(fù)雜龐大的企業(yè)IT架構(gòu)，IT運維需要在不同架構(gòu)、不同平臺之間實現(xiàn)IT資源的優(yōu)化配置和高效管理，從而實現(xiàn)企業(yè)的穩(wěn)定運行。整個系統(tǒng)，滿足相應(yīng)的企業(yè)業(yè)務(wù)場景。當(dāng)需求出現(xiàn)時，可以應(yīng)對用戶量和數(shù)據(jù)量的快速膨脹。

因此，平臺化運維的目標(biāo)是針對不同的業(yè)務(wù)形態(tài)，對企業(yè)IT架構(gòu)進(jìn)行針對性的管控和一體化管理，利用大數(shù)據(jù)和基于PaaS的平臺能力封裝運維技術(shù)和業(yè)務(wù)。底部的能力。重量級運維技術(shù)工具體系輕量化，應(yīng)用于運維APP場景，運維工具逐步融合。應(yīng)用場景如下：

（1）日志采集平臺：采集各個應(yīng)用形成的本地日志數(shù)據(jù)并匯總。一方面方便查看和定位問題。另一方面，平臺可以挖掘潛在價值數(shù)據(jù)和重要指標(biāo)趨勢分析提供證據(jù)，有效規(guī)避風(fēng)險失敗，指導(dǎo)決策。

（2）應(yīng)用性能監(jiān)控平臺：包括多級應(yīng)用性能監(jiān)控、快速應(yīng)用性能故障定位、綜合應(yīng)用性能優(yōu)化三個模塊。可采用事務(wù)處理過程監(jiān)控、模擬等手段實現(xiàn)點對點應(yīng)用檢測，檢測應(yīng)用系統(tǒng)的各個組件，快速定位系統(tǒng)故障，并進(jìn)行維修或提出維修建議，準(zhǔn)確分析各個組件占用的系統(tǒng)資源，及時了解庫存和產(chǎn)品生產(chǎn)進(jìn)度，最大限度地提高好處。

（3）統(tǒng)一資源配置管理平臺：只有這樣才能集中管理不同環(huán)境、不同集群應(yīng)用的配置，實時推送配置變更，通過統(tǒng)一的方式保證底層數(shù)據(jù)配置項準(zhǔn)確無誤資源和配置管理。

(4）應(yīng)用部署平臺：可部署容器和物理機，支持線上線下服務(wù)、定時任務(wù)和靜態(tài)文件的部署，提供部署資源管理、運行環(huán)境搭建、部署流程定義和部署。執(zhí)行跟蹤實現(xiàn)金絲雀發(fā)布和藍(lán)綠部署it運維技術(shù)，應(yīng)用部署平臺可以提升業(yè)務(wù)迭代速度，避免失敗，提高產(chǎn)品發(fā)布節(jié)奏。

3.數(shù)據(jù)化運維能力

由于用戶數(shù)和業(yè)務(wù)量的下降，數(shù)據(jù)量也處于爆發(fā)式發(fā)展階段。IT運維數(shù)據(jù)化能力由此成為企業(yè)能力發(fā)展的重要方向。IT運維數(shù)字化是利用數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)處理、可視化等全數(shù)據(jù)系統(tǒng)對運維過程進(jìn)行評估，以確認(rèn)IT運維目標(biāo)的實現(xiàn)和程度。日常運維場景很多，看起來很復(fù)雜。畢竟與對穩(wěn)定、安全、高效這三個基本價值的更高追求是分不開的。通過基于數(shù)據(jù)的運維能力，IT運維可為企業(yè)決策提供有力支持，實現(xiàn)穩(wěn)定、安全、效率提升、成本合理控制。應(yīng)用場景如下：

（1）知識圖譜：使用統(tǒng)一語言定義運維數(shù)據(jù)，通過實體與實體之間的關(guān)系表達(dá)運維對象，整合運維領(lǐng)域的實體關(guān)系生成知識圖譜。運維領(lǐng)域的關(guān)系 包括但不限于產(chǎn)品、服務(wù)、集群、服務(wù)器、網(wǎng)絡(luò)、IDC等。

（2）數(shù)據(jù)庫室：是一個面向主題的、集成的、相對穩(wěn)定的、反映歷史變化的、用于支持管理決策的數(shù)據(jù)集合。數(shù)據(jù)庫室為用戶提供當(dāng)前和歷史數(shù)據(jù)用于決策支持，這種數(shù)據(jù)在傳統(tǒng)運營數(shù)據(jù)庫中難以獲取或無法獲取。機房技術(shù)是各種技術(shù)和模塊的總稱，將運營數(shù)據(jù)有效地整合到一個統(tǒng)一的環(huán)境中，提供決策數(shù)據(jù)訪問。目的是讓用戶能夠查詢更快、更方便地獲取所需信息，并提供決策支持。

(3）數(shù)據(jù)中臺：建設(shè)面向運維領(lǐng)域的數(shù)據(jù)中臺，統(tǒng)一管理資源數(shù)據(jù)、告警數(shù)據(jù)、性能數(shù)據(jù)、業(yè)務(wù)數(shù)據(jù)、日志數(shù)據(jù)、工單數(shù)據(jù)、指標(biāo)數(shù)據(jù)、表盤測試數(shù)據(jù)等，為下層運維分析場景提供統(tǒng)一的數(shù)據(jù)訪問路由、數(shù)據(jù)服務(wù)目錄、數(shù)據(jù)訪問管理、數(shù)據(jù)可視化等功能，以打破“數(shù)據(jù)孤島”，深度挖掘價值運營數(shù)據(jù)通過整合關(guān)聯(lián)和對外開放 前端數(shù)據(jù)需求，整合后端數(shù)據(jù)，處理輸出數(shù)據(jù)，搭建數(shù)據(jù)中心級數(shù)據(jù)服務(wù)共享平臺。和數(shù)據(jù)流集成，對現(xiàn)有數(shù)據(jù)進(jìn)行處理和整合，實現(xiàn)數(shù)據(jù)服務(wù)的方法，實現(xiàn)數(shù)據(jù)監(jiān)控和資源利用分析。

（4）數(shù)據(jù)可視化：通過數(shù)據(jù)的可視化，幫助運維人員直觀、方便、快速地分析問題，同時也提供了一系列工具組件供運維人員根據(jù)自身需求分析海量數(shù)據(jù)。快速進(jìn)行視圖編輯、多層鉆取分析、多維度關(guān)聯(lián)分析、報表布局、縱橫數(shù)據(jù)對比等，對傳統(tǒng)運維體驗進(jìn)行數(shù)字化改造，極大提升問題排查、風(fēng)險檢測和知識積累。

4.智能運維能力

由于IT運維支持的業(yè)務(wù)規(guī)模不斷下降，越來越多的運維場景和問題難以用傳統(tǒng)的運維方式解決。同時，IT運維效率也逐漸無法滿足系統(tǒng)要求。為此，如何解放運維自身的效率，解決傳統(tǒng)運維方式難以解決的問題，成為企業(yè)發(fā)展轉(zhuǎn)型的一大挑戰(zhàn)。運維智能化能力是指將人類知識和運維經(jīng)驗與大數(shù)據(jù)和機器學(xué)習(xí)技術(shù)相結(jié)合，制定出一系列智能化策略，

目前，運維的智能化應(yīng)用場景主要有以下幾種：

(1）故障預(yù)測：主動容錯技術(shù)可以根據(jù)對系統(tǒng)歷史狀態(tài)和當(dāng)前行為的分析，生成告警預(yù)測的結(jié)果模型，判斷系統(tǒng)是否正式形成故障，輔助系統(tǒng)避免故障或盡快采取故障恢復(fù)措施。故障預(yù)測可以使運維人員在日常工作中變被動為主動，提高系統(tǒng)整體運行質(zhì)量。

(2）故障自愈：故障自愈過程包括感知、止損決策、止損三個階段。感知階段取決于監(jiān)控系統(tǒng)的故障檢測能力，補水階段取決于在交通調(diào)度系統(tǒng)的調(diào)度能力上，更能提高企業(yè)的服務(wù)可用性，減少故障處理的人為投入，實現(xiàn)從人工處理到故障無人值守的轉(zhuǎn)變。

(3）手動擴縮容：可以根據(jù)應(yīng)用負(fù)載手動調(diào)整集群容量，滿足需求。當(dāng)集群有Pods因資源不足而難以調(diào)度時，手動觸發(fā)擴容，從而降低人工成本。空閑等伸縮條件是手動觸發(fā)縮容，節(jié)省資源成本。

(4）智能問答知識庫：是知識庫的最新形式，具有知識挖掘、知識管理、知識關(guān)聯(lián)、知識推理與建模、智能檢索、自學(xué)習(xí)訓(xùn)練等功能。智能知識基地改變了故障的處理方式，不僅提高了故障上報的準(zhǔn)確性，而且簡化了信息交換的中間環(huán)節(jié)，有效縮短了故障處理時間，提高了工作效率。

降低了使用門檻，提高了復(fù)用性，減少了人為錯誤。速度。

六、[未來洞察]

· 未來面向5G的IT解決方案

(1）端到端業(yè)務(wù)體驗：主要涉及客戶體驗、應(yīng)用體驗、網(wǎng)絡(luò)體驗、接入設(shè)備體驗的工具和平臺。

（2）智能運維：針對B域和O域，提供微服務(wù)修復(fù)、編排修復(fù)、分段修復(fù)、智能預(yù)警、智能優(yōu)化、故障自愈、持續(xù)集成、持續(xù)部署、持續(xù)測試；

·整個技術(shù)運營中心的管理能力

（1）運維層：三橫一豎，B域運維，O域運維，邊緣估計運維，端到端運維。

（2）能力分層：業(yè)務(wù)運維、技術(shù)運維、管理運維。