張雪超，張力偉

（中國(guó)移動(dòng)通信集團(tuán)河北有限公司，石家莊 050021）

1 背景

話務(wù)網(wǎng)管作為支撐網(wǎng)絡(luò)運(yùn)行分析的重要系統(tǒng)，主要包含了告警監(jiān)控、配置管理、性能分析、智能巡檢、主動(dòng)監(jiān)控等功能，大大提升了網(wǎng)絡(luò)運(yùn)行維護(hù)效率、網(wǎng)絡(luò)分析水平和管理能力，在日常網(wǎng)絡(luò)運(yùn)維中發(fā)揮著越來越重要的作用。性能分析作為話務(wù)網(wǎng)管的重要模塊，其數(shù)據(jù)的準(zhǔn)確性、及時(shí)性、完整性是進(jìn)行網(wǎng)絡(luò)質(zhì)量分析的重要依據(jù)，現(xiàn)有話務(wù)網(wǎng)管系統(tǒng)由于各種原因經(jīng)常出現(xiàn)網(wǎng)元性能統(tǒng)計(jì)缺失現(xiàn)象，并通過WED應(yīng)用的KPI完整率進(jìn)行缺失統(tǒng)計(jì)，以及系統(tǒng)使用過程中發(fā)現(xiàn)缺失問題，才通知維護(hù)人員進(jìn)行核查，這種以“問題驅(qū)動(dòng)”、“出現(xiàn)問題后再解決”的被動(dòng)工作方法，很難適應(yīng)日常業(yè)務(wù)分析要求，導(dǎo)致問題發(fā)現(xiàn)不及時(shí)，處理滯后，數(shù)據(jù)無法補(bǔ)采，無法為網(wǎng)絡(luò)運(yùn)行分析提供完整的數(shù)據(jù)。

如何將網(wǎng)絡(luò)管理工作變被動(dòng)為主動(dòng)，及時(shí)監(jiān)控，實(shí)時(shí)發(fā)現(xiàn)問題，加速問題解決進(jìn)度，迅速恢復(fù)業(yè)務(wù)，成為系統(tǒng)亟待解決的問題，以滿足網(wǎng)絡(luò)分析、網(wǎng)絡(luò)優(yōu)化、網(wǎng)絡(luò)規(guī)劃和決策的需要。

2 現(xiàn)狀分析

話務(wù)網(wǎng)管采用了3層架構(gòu)模式，分為采集層、處理層、應(yīng)用層，每一層出現(xiàn)問題都將影響數(shù)據(jù)質(zhì)量。如何定位問題預(yù)警點(diǎn)，可從話務(wù)網(wǎng)的整體結(jié)構(gòu)入手進(jìn)行分析。通過分析每層數(shù)據(jù)流向，發(fā)現(xiàn)影響性能統(tǒng)計(jì)的因素如下：

2.1 設(shè)備側(cè)接口數(shù)據(jù)的及時(shí)性、完整性、準(zhǔn)確性

設(shè)備側(cè)數(shù)據(jù)質(zhì)量直接影響話務(wù)網(wǎng)管對(duì)外提供的數(shù)據(jù)服務(wù)質(zhì)量。設(shè)備上北向接口數(shù)據(jù)時(shí)延過長(zhǎng)、超過采集關(guān)鍵性能指標(biāo)（KPI，Key Performance Indicator）的時(shí)間要求，都將影響網(wǎng)管數(shù)據(jù)的及時(shí)性；北向接口若存在統(tǒng)計(jì)數(shù)據(jù)缺失，將影響網(wǎng)管數(shù)據(jù)的完整性；北向接口數(shù)據(jù)異常，將影響上級(jí)網(wǎng)管數(shù)據(jù)的準(zhǔn)確性。

2.2 采集程序異常

采集程序異常導(dǎo)致數(shù)據(jù)未能及時(shí)采集，如何及時(shí)發(fā)現(xiàn)成為解決問題的關(guān)鍵。

2.3 數(shù)據(jù)同步程序出現(xiàn)異常

同步程序異常導(dǎo)致臨時(shí)數(shù)據(jù)庫(kù)中數(shù)據(jù)不能入到性能庫(kù)，直接影響性能監(jiān)控和統(tǒng)計(jì)分析可用性。

2.4 數(shù)據(jù)匯總過程出現(xiàn)異常

數(shù)據(jù)匯總異常影響各關(guān)聯(lián)網(wǎng)元數(shù)據(jù)的正確生成。

在以上因素中，任何一個(gè)環(huán)節(jié)出現(xiàn)問題都會(huì)影響網(wǎng)管的數(shù)據(jù)質(zhì)量。當(dāng)用戶使用系統(tǒng)數(shù)據(jù)以及檢測(cè)應(yīng)用KPI完整率時(shí)，若發(fā)現(xiàn)數(shù)據(jù)缺失，通知維護(hù)人員解決問題時(shí)，維護(hù)人員需要逐點(diǎn)核查日志，逐步檢測(cè)采集、同步、匯總過程中存在的問題。這種處理問題的方式周期較長(zhǎng)，不利于問題快速定位和及時(shí)處理，致使客戶感知較差。

3 解決方案

為了解決話務(wù)網(wǎng)管性能統(tǒng)計(jì)完整性問題，可采用智能問題預(yù)警方式代替問題驅(qū)動(dòng)的被動(dòng)工作方式，通過采用話務(wù)網(wǎng)管端到端的監(jiān)控工具，以提升維護(hù)效率。

在本方案中，根據(jù)系統(tǒng)中數(shù)據(jù)流向，進(jìn)行逐層分析，通過數(shù)據(jù)輸入輸出判斷監(jiān)控點(diǎn)，整理數(shù)據(jù)監(jiān)控流程，做到端到端的監(jiān)控，使維護(hù)人員通過可視界面實(shí)時(shí)了解數(shù)據(jù)質(zhì)量，及時(shí)掌握數(shù)據(jù)在哪一個(gè)環(huán)節(jié)出現(xiàn)了異常，并能夠快速定位問題影響范圍和原因。通過分析數(shù)據(jù)輸入輸出點(diǎn)，得到4個(gè)重點(diǎn)監(jiān)控點(diǎn)：

（1） 廠家側(cè)數(shù)據(jù)完整性檢測(cè)，廠家數(shù)據(jù)作為數(shù)據(jù)源，是保障KPI的關(guān)鍵；

（2） 臨時(shí)庫(kù)數(shù)據(jù)完整性檢測(cè)，臨時(shí)庫(kù)作為網(wǎng)管中數(shù)據(jù)存儲(chǔ)的第一步，其數(shù)據(jù)的完整是保障性能庫(kù)完整的基礎(chǔ)；

（3） 性能庫(kù)底層表完整性檢測(cè)，是觸發(fā)匯總的關(guān)鍵；

（4） 數(shù)據(jù)匯總檢測(cè)。

通過以上分析，得到數(shù)據(jù)監(jiān)控流程如圖1所示。

圖1 數(shù)據(jù)監(jiān)控流程圖

4 實(shí)現(xiàn)原理

針對(duì)以上分析的檢測(cè)點(diǎn)，逐點(diǎn)實(shí)現(xiàn)監(jiān)控，達(dá)到快速定位問題、及時(shí)解決問題的目的，以下逐點(diǎn)介紹實(shí)現(xiàn)原理。

4.1 廠家數(shù)據(jù)完整性檢測(cè)

由于網(wǎng)絡(luò)設(shè)備復(fù)雜多樣，各個(gè)廠家向上級(jí)網(wǎng)管提供數(shù)據(jù)的方式不同，通過梳理廠家側(cè)接口方式，根據(jù)不同接口實(shí)現(xiàn)廠家側(cè)數(shù)據(jù)完整性檢測(cè)。

4.1.1 文件接口檢測(cè)

通過對(duì)文件接口的分析，定義文件接口數(shù)據(jù)檢測(cè)機(jī)制：

（1） 以小時(shí)為粒度，通過定制任務(wù)定時(shí)檢測(cè)接口文件;

（2）與網(wǎng)管服務(wù)器上的資源信息進(jìn)行關(guān)聯(lián)，記錄在網(wǎng)的網(wǎng)元配置信息；

（3）根據(jù)配置信息，提取設(shè)備網(wǎng)管上的文件列表；

（4）進(jìn)行分析對(duì)比，記錄對(duì)比結(jié)果；

（5）生成接口文件，進(jìn)行自動(dòng)派單。

通過對(duì)廠家文件完整性檢查，及時(shí)發(fā)現(xiàn)廠家問題，并通過自動(dòng)派單的主動(dòng)方式通知維護(hù)人員及時(shí)解決廠家數(shù)據(jù)問題，縮短了由于廠家數(shù)據(jù)不完整導(dǎo)致的KPI缺失時(shí)長(zhǎng)，提升了客戶感知。

圖2 文件接口檢測(cè)流程圖

4.1.2 數(shù)據(jù)庫(kù)接口檢測(cè)

通過對(duì)數(shù)據(jù)庫(kù)接口的分析，定義數(shù)據(jù)庫(kù)接口檢測(cè)機(jī)制：

（1）以小時(shí)為粒度，通過定制任務(wù)定時(shí)檢測(cè)數(shù)據(jù)庫(kù)接口數(shù)據(jù)完整性；

（2）與資源信息進(jìn)行關(guān)聯(lián)，對(duì)在網(wǎng)的網(wǎng)元進(jìn)行檢測(cè)；（3）根據(jù)檢測(cè)條件，關(guān)聯(lián)配置信息，對(duì)廠家側(cè)數(shù)據(jù)庫(kù)進(jìn)行完整性檢測(cè)；

作為區(qū)域性開發(fā)與建設(shè)的政府融資平臺(tái)，承擔(dān)著融資及建設(shè)的重要職能，雖有部分經(jīng)營(yíng)項(xiàng)目，但投資的基本是公益性項(xiàng)目，了無收益，獲利風(fēng)險(xiǎn)大。

（4）將廠家數(shù)據(jù)庫(kù)返回結(jié)果與在網(wǎng)的網(wǎng)元進(jìn)行分析對(duì)比，記錄結(jié)果；

（5）生成接口文件，進(jìn)行自動(dòng)派單。

4.2 臨時(shí)庫(kù)數(shù)據(jù)完整性檢測(cè)

為了提高數(shù)據(jù)采集的效率，并且保障數(shù)據(jù)采集的及時(shí)性，話務(wù)網(wǎng)管數(shù)據(jù)采集可部署在多臺(tái)采集服務(wù)器上，且每臺(tái)采集服務(wù)器有一個(gè)臨時(shí)庫(kù)，具體如圖4所示。

每個(gè)采集服務(wù)器通過采集任務(wù)管理將不同廠家不同設(shè)備的網(wǎng)元性能指標(biāo)采集解析后存儲(chǔ)到各個(gè)臨時(shí)數(shù)據(jù)庫(kù)中，臨時(shí)數(shù)據(jù)庫(kù)數(shù)據(jù)為數(shù)據(jù)流向的第二個(gè)檢查點(diǎn)，為了能夠準(zhǔn)確的掌握每一臺(tái)采集機(jī)上任務(wù)的執(zhí)行情況，梳理臨時(shí)庫(kù)的數(shù)據(jù)檢查原理如下：

（1）由于各網(wǎng)元的指標(biāo)繁多，各廠家支持情況不同，在數(shù)據(jù)庫(kù)中做細(xì)化到指標(biāo)粒度監(jiān)控不可行，故選取對(duì)每個(gè)采集任務(wù)的網(wǎng)元個(gè)數(shù)進(jìn)行監(jiān)控，以網(wǎng)元配置數(shù)量為依據(jù)，與臨時(shí)庫(kù)中入庫(kù)數(shù)量進(jìn)行對(duì)比分析，數(shù)量一致即證明數(shù)據(jù)完整，不一致則呈現(xiàn)告警；

（2）由于一個(gè)采集機(jī)上臨時(shí)數(shù)據(jù)庫(kù)中數(shù)據(jù)表很多，需要被監(jiān)控的表，原則上只監(jiān)控重要業(yè)務(wù)表；

（3）針對(duì)臨時(shí)庫(kù)統(tǒng)計(jì)的情況，在每一個(gè)采集機(jī)上部署相應(yīng)數(shù)據(jù)監(jiān)控程序，該程序定時(shí)去掃描MDDB中入庫(kù)的網(wǎng)元數(shù)量，并和被采網(wǎng)元的資源數(shù)量進(jìn)行對(duì)比，如果入庫(kù)量和資源數(shù)據(jù)量一致則說明采集完整，否則認(rèn)為性能采集不完整，將對(duì)比結(jié)果存儲(chǔ)到監(jiān)控表中，供監(jiān)控界面調(diào)用。

4.3 性能庫(kù)底表完整性檢測(cè)

圖3 數(shù)據(jù)庫(kù)接口檢測(cè)流程圖

圖4 臨時(shí)庫(kù)圖

4.4 數(shù)據(jù)匯總檢測(cè)

性能庫(kù)底層數(shù)據(jù)完整之后，將觸發(fā)數(shù)據(jù)匯總，將數(shù)據(jù)按時(shí)間粒度、空間粒度、網(wǎng)元粒度進(jìn)行匯總，最終檢測(cè)點(diǎn)為應(yīng)用表數(shù)據(jù)完整性，將檢測(cè)結(jié)果存放在監(jiān)控表中，供監(jiān)控界面調(diào)用。

5 實(shí)施效果

通過以上數(shù)據(jù)檢測(cè)，將檢測(cè)結(jié)果以矩陣圖形式展現(xiàn)，并分為一級(jí)視圖、二級(jí)視圖、三級(jí)視圖，達(dá)到數(shù)據(jù)質(zhì)量可溯源、可分析、可視、可控的目標(biāo)，實(shí)現(xiàn)了端到端的監(jiān)控。

一級(jí)試圖實(shí)現(xiàn)總體上功能展現(xiàn)，提供不同數(shù)據(jù)輸入輸出點(diǎn)的選擇，如圖5所示。

圖5 矩陣監(jiān)控一級(jí)視圖

選擇數(shù)據(jù)檢測(cè)點(diǎn)，可以下鉆到不同類型不同廠家，如選擇臨時(shí)庫(kù)檢測(cè)，如圖6所示。

選擇華為無線，可以下鉆檢測(cè)每個(gè)OMC的數(shù)據(jù)完整情況，如圖7所示。

系統(tǒng)采用矩陣圖形式呈現(xiàn)了每一個(gè)檢測(cè)點(diǎn)各個(gè)廠家網(wǎng)管的數(shù)據(jù)完整情況，對(duì)數(shù)據(jù)異?，F(xiàn)象以紅色預(yù)警呈現(xiàn)，通過可視化視圖使網(wǎng)管維護(hù)人員清晰地發(fā)現(xiàn)和定位問題出現(xiàn)點(diǎn)，改變了以往逐層進(jìn)行問題排查的盲目工作方式，主動(dòng)地發(fā)現(xiàn)解決問題，并采用自動(dòng)派單及時(shí)通知相關(guān)維護(hù)人員處理，縮短了問題解決時(shí)間，提升了網(wǎng)管數(shù)據(jù)質(zhì)量。

圖6 矩陣監(jiān)控二級(jí)視圖

圖7 矩陣監(jiān)控三級(jí)視圖

6 總結(jié)

話務(wù)網(wǎng)管作為網(wǎng)絡(luò)運(yùn)維支撐的重要手段，在日常維護(hù)、網(wǎng)絡(luò)規(guī)劃中發(fā)揮著重要作用，而原有通過KPI完整性和用戶使用發(fā)現(xiàn)問題的被動(dòng)方式已經(jīng)不能滿足解決問題及時(shí)性的需要。本文提出了一種話務(wù)網(wǎng)管端到端的數(shù)據(jù)質(zhì)量監(jiān)控方法，在原有網(wǎng)管架構(gòu)的基礎(chǔ)上，通過對(duì)數(shù)據(jù)流向的分析，進(jìn)行數(shù)據(jù)輸入輸出點(diǎn)的監(jiān)控，并通過自動(dòng)派單、矩陣圖告警展現(xiàn)等主動(dòng)發(fā)現(xiàn)問題方式提升問題解決的及時(shí)性，縮短了各種原因?qū)е碌臄?shù)據(jù)不完整的影響時(shí)間、影響范圍，提升了客戶感知，同時(shí)使維護(hù)工作由被動(dòng)轉(zhuǎn)化為主動(dòng)，提升了維護(hù)效率，大大減輕了維護(hù)工作量，每月網(wǎng)管問題數(shù)量明顯下降，有力支撐了網(wǎng)絡(luò)運(yùn)營(yíng)分析工作。