路沙

Gartner的報告宣稱，到2020年，將近50%的企業(yè)將會在業(yè)務(wù)和IT運維方面采用AIOps（基于算法的IT運維）。盡管AIOps對于廣大運維人員來說，仍然是一個新詞，但在各企業(yè)已經(jīng)嘗試通過技術(shù)手段重新挖掘和創(chuàng)造數(shù)據(jù)價值，在實踐中正在邁出智能運維的第一步。

為什么需要AIOps

簡單來講，一方面由于業(yè)務(wù)的發(fā)展，企業(yè)的系統(tǒng)變得越來越龐大和復(fù)雜，給運維帶來了巨大的壓力，通過智能工具代替人力是必經(jīng)之路；另一方面，則需要通過新技術(shù)與智能算法的導(dǎo)入創(chuàng)造數(shù)據(jù)價值，助力決策，重塑價值。作為企業(yè)數(shù)據(jù)的載體，IT系統(tǒng)的變革無疑是智能化的前提。

拿保險行業(yè)來說，互聯(lián)網(wǎng)創(chuàng)造了新的營銷模式和機遇，如電商退運保險、航班延誤險等使得傳統(tǒng)的保險行業(yè)逐漸邁向互聯(lián)網(wǎng)領(lǐng)域。然而這些業(yè)務(wù)模式導(dǎo)致保單數(shù)量在特定場景下的爆發(fā)式涌入，巨量碎片化的交易給系統(tǒng)建設(shè)帶來了巨大的挑戰(zhàn)，傳統(tǒng)系統(tǒng)建設(shè)模式不再能夠滿足性能安全穩(wěn)定性等方面的需求，因此企業(yè)內(nèi)部需要新的架構(gòu)來適應(yīng)。

渤海財險面對當(dāng)前系統(tǒng)的運維瓶頸和未來的發(fā)展需求，從2017年起對企業(yè)的數(shù)據(jù)進(jìn)行了標(biāo)準(zhǔn)化、場景化和在線化的改造，并基于分布式系統(tǒng)搭建了一體化的經(jīng)營決策平臺，從根本上解決了管理層看不到數(shù)、分析層取不到數(shù)、業(yè)務(wù)層拿不到數(shù)的現(xiàn)狀。為公司各級決策者提供了實時高效的數(shù)據(jù)支持，也在智能運維的方向上邁出了重要的一步。

本次系統(tǒng)改造主要解決了以下問題：實現(xiàn)了數(shù)據(jù)的標(biāo)準(zhǔn)化和規(guī)范化、解決了系統(tǒng)間數(shù)據(jù)不通的障礙、創(chuàng)建了直觀的系統(tǒng)狀況展示層，為決策者提供有力支持，系統(tǒng)的分布式變革為業(yè)務(wù)的發(fā)展奠定了基礎(chǔ)。

系統(tǒng)改造背景

在渤海財險原有的IT架構(gòu)下，支撐著新核心、財務(wù)及BI等多套業(yè)務(wù)系統(tǒng)。根據(jù)業(yè)務(wù)的需要，各業(yè)務(wù)系統(tǒng)間采用了DB-LINK技術(shù)實現(xiàn)業(yè)務(wù)系統(tǒng)間的數(shù)據(jù)互訪需求，為業(yè)務(wù)的請求提供跨系統(tǒng)的數(shù)據(jù)支撐。同時，BI系統(tǒng)每天晚上定時從各關(guān)鍵的業(yè)務(wù)系統(tǒng)內(nèi)抽取數(shù)據(jù)，作為BI數(shù)據(jù)分析的源數(shù)據(jù)，而BI抽取數(shù)據(jù)采用的是傳統(tǒng)的ETL+1的形式，效率比較低，很難滿足實時性的需求。

從數(shù)據(jù)應(yīng)用的角度來講，最前端的承保系統(tǒng)產(chǎn)生保單信息，之后傳入到客服理賠、財務(wù)等系統(tǒng)進(jìn)行處理，完成保單的處理。由于當(dāng)前的系統(tǒng)是由不同的開發(fā)商開發(fā)的，在管理上有各自的要求，因此不同的系統(tǒng)之間數(shù)據(jù)并不能完全互通，使得跨條線的統(tǒng)一管理很難實現(xiàn)。

在當(dāng)前的業(yè)務(wù)現(xiàn)狀下，每天所常用的各類報表和提數(shù)腳本高達(dá)400多個，由于數(shù)據(jù)不能互通，在很大程度上影響了業(yè)務(wù)的進(jìn)行。

整體來說，原有的IT系統(tǒng)架構(gòu)面臨以下幾個問題：一是效率。BI系統(tǒng)采用ETL傳統(tǒng)抽取數(shù)據(jù)的方式，不能滿足實時性的需求。二是性能。傳統(tǒng)的架構(gòu)采用小型機+存儲的模式，IO處理能力低下?？缦到y(tǒng)的DBlink抽數(shù)也會帶來一定的性能影響。三是擴展性。傳統(tǒng)的高端存儲不能靈活擴展，不能滿足業(yè)務(wù)靈活變動的需求。

因此，為了保證業(yè)務(wù)的高效穩(wěn)定運行及靈活擴展，必須要對原有的IT系統(tǒng)進(jìn)行改造。針對當(dāng)前管理層看不到數(shù)、分析層取不到數(shù)、業(yè)務(wù)層拿不到數(shù)的情況，集團(tuán)內(nèi)部決定做以下改造：針對業(yè)務(wù)場景對數(shù)據(jù)進(jìn)行場景化改造，根據(jù)行業(yè)標(biāo)準(zhǔn)對數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化改造。同時為了滿足實時需求，對數(shù)據(jù)進(jìn)行在線化。經(jīng)過這樣的改造，最終實現(xiàn)快速開發(fā)數(shù)據(jù)產(chǎn)品、標(biāo)準(zhǔn)化的數(shù)據(jù)組織方式和實時高效的數(shù)據(jù)提供。

創(chuàng)造數(shù)據(jù)價值

數(shù)據(jù)是企業(yè)的核心資產(chǎn)，而IT系統(tǒng)作為數(shù)據(jù)的載體，在企業(yè)的價值鏈中居于越來越重要的地位，通過IT系統(tǒng)的變革來創(chuàng)造數(shù)據(jù)價值，驅(qū)動業(yè)務(wù)變革，成為企業(yè)系統(tǒng)運維的目標(biāo)與戰(zhàn)略方向。對于企業(yè)來說，數(shù)據(jù)能創(chuàng)造的價值包括：促進(jìn)業(yè)務(wù)發(fā)展、控制經(jīng)營成本、防范各類風(fēng)險等，通過數(shù)據(jù)分析為企業(yè)提供決策依據(jù)，實時的數(shù)據(jù)查詢可以降低理賠客服系統(tǒng)的經(jīng)營成本，并通過數(shù)據(jù)質(zhì)量的提升而防范來自注入、稅務(wù)等的風(fēng)險。這也是此次渤海財險系統(tǒng)改造的目標(biāo)。

針對數(shù)據(jù)應(yīng)用現(xiàn)狀，首先進(jìn)行數(shù)據(jù)的標(biāo)準(zhǔn)化改造，對于原有系統(tǒng)，采用標(biāo)準(zhǔn)化校驗，滿足要求的數(shù)據(jù)可以導(dǎo)入到數(shù)據(jù)倉庫，不符合的數(shù)據(jù)按照一定標(biāo)準(zhǔn)進(jìn)行改造處理之后再導(dǎo)入。而新的系統(tǒng)的建設(shè)必須遵循標(biāo)準(zhǔn)和規(guī)范要求。

針對系統(tǒng)之間數(shù)據(jù)不通的現(xiàn)狀，在經(jīng)營決策平臺上，通過實時的數(shù)據(jù)分析和傳入，在運營系統(tǒng)和管理系統(tǒng)之間創(chuàng)建完整閉環(huán)。在生產(chǎn)系統(tǒng)產(chǎn)生經(jīng)營數(shù)據(jù)、管理數(shù)據(jù)、財務(wù)數(shù)據(jù)等，并實時地傳遞到ODS系統(tǒng)，在ODS上提供簡單的系統(tǒng)查詢和清單下載。ODS層的數(shù)據(jù)集中之后，經(jīng)過清洗、歸納和整理，形成場景類的數(shù)據(jù)，生成對應(yīng)的多位表和統(tǒng)計表，再經(jīng)過聚類、提煉形成各種快報圖標(biāo)等，為經(jīng)營管理者的決策提供依據(jù)。

高性能低成本易擴展的架構(gòu)方案

在以上的需求基礎(chǔ)上，對于整個平臺的改造方案如下：通過經(jīng)營決策平臺統(tǒng)一抽取各個應(yīng)用系統(tǒng)的數(shù)據(jù)，作為統(tǒng)一的交互平臺，避免了系統(tǒng)之間的數(shù)據(jù)交互帶來的性能等問題。

為了滿足上述需求，需要強大的硬件能力，尤其是IO能力的支撐，經(jīng)過大量選型，最終選擇了zData分布式存儲管理軟件構(gòu)建分布式架構(gòu)。

分布式存儲具有以下優(yōu)勢：多維動態(tài)擴展，計算節(jié)點和存儲節(jié)點可以按需動態(tài)擴展，容量和性能線性增長。資源池化&云化，計算資源和存儲資源池化，統(tǒng)一管理，按需分配擴展。高性能，x86服務(wù)器為基礎(chǔ)、使用閃存卡、InfiniBand交換機實現(xiàn)高處理能力和IO吞吐量。安全&冗余，所有組件均有冗余，存儲自動鏡像及故障自動重構(gòu)，無需人工干預(yù)和不影響在線業(yè)務(wù)。高性能低成本易擴展的zData分布式存儲管理軟件，成為渤海財險系統(tǒng)改造的首選方案。因此分布式存儲架構(gòu)，不僅是解決當(dāng)前渤海財險系統(tǒng)困境的最佳方案，更是企業(yè)進(jìn)行云化、智能化改造的必經(jīng)之路，而專業(yè)的數(shù)據(jù)服務(wù)團(tuán)隊與產(chǎn)品，則幫助企業(yè)在這條路上走得更好。

通過經(jīng)營決策平臺的建立，將各個系統(tǒng)的數(shù)據(jù)集中到一起，經(jīng)過處理后以可視化的方式直觀地展現(xiàn)給用戶，為企業(yè)管理經(jīng)營提供決策依據(jù)。

自從決策平臺上線后，系統(tǒng)上下載報表的耗時大幅降低。并且在建立數(shù)據(jù)質(zhì)量檢測機制后，由于數(shù)據(jù)實時傳送，還可根據(jù)預(yù)先建立的數(shù)據(jù)檢驗規(guī)則制定自動化的周期性檢驗，并通過郵件、短信主動推送。各個業(yè)務(wù)線的人員反饋，系統(tǒng)體驗良好，極大地提升了效率和使用體驗。

渤海財險系統(tǒng)處處長盧彬彬表示，渤海財險未來的IT的演進(jìn)方向基本上會在現(xiàn)有基礎(chǔ)穩(wěn)定的情況下，逐步過渡到以分布式為核心的互聯(lián)網(wǎng)架構(gòu)上來。下一步，渤海財險將逐步實現(xiàn)基于公有云平臺的災(zāi)備，更好地保障數(shù)據(jù)的安全可靠。

盧彬彬提到，在保證安全及監(jiān)管風(fēng)險的前提下，全行業(yè)都在朝著互聯(lián)網(wǎng)思維方向轉(zhuǎn)變，現(xiàn)在及將來是互聯(lián)的天下，任何事物都是在線的，不只是保險行業(yè)，全行業(yè)、我們的衣食住行都在這個巨大的網(wǎng)中。不做在線化變革，終將被時代所拋棄。

數(shù)據(jù)為橋，渤海財險通過本次IT系統(tǒng)的改造，一方面通過系統(tǒng)分布式變革解決了運維的瓶頸，也為后續(xù)的業(yè)務(wù)擴展奠定了基礎(chǔ)；另一方面實現(xiàn)了數(shù)據(jù)的標(biāo)準(zhǔn)化、場景化和在線化，極大地挖掘了數(shù)據(jù)的價值，為決策者提供有力依據(jù)，驅(qū)動業(yè)務(wù)創(chuàng)新。

思維創(chuàng)新引導(dǎo)技術(shù)變革，技術(shù)發(fā)展創(chuàng)造數(shù)據(jù)價值。隨著數(shù)據(jù)在企業(yè)中的地位日益凸顯，運維也將從最初的被動管理維護(hù)數(shù)據(jù)，到通過數(shù)據(jù)分析來指導(dǎo)業(yè)務(wù)決策，各行業(yè)企業(yè)正在從傳統(tǒng)運維逐漸走向自動化運維，隨著技術(shù)的進(jìn)一步發(fā)展，智能運維將成為不可逆轉(zhuǎn)的趨勢。