?

基于大數(shù)據(jù)平臺的企業(yè)級經(jīng)營分析系統(tǒng)建設探討

孫淳曄

（中國移動通信集團設計院有限公司河北分公司, 石家莊 050021）

摘 要針對現(xiàn)有經(jīng)營分析系統(tǒng)（BASS）存在的短板，整合企業(yè)各域數(shù)據(jù)，優(yōu)化系統(tǒng)架構，采用大數(shù)據(jù)技術構建企業(yè)級經(jīng)分系統(tǒng)，提高資源利用率，并通過逐步解耦數(shù)據(jù)及應用，逐步開放能力平臺，充分發(fā)揮數(shù)據(jù)價值，支撐公司全面發(fā)展運營。

關鍵詞經(jīng)營分析；大數(shù)據(jù)；系統(tǒng)架構；數(shù)據(jù)價值

1　概述

隨著云時代的來臨，大數(shù)據(jù)（big data）吸引了越來越多的關注，數(shù)據(jù)已成為一種資源，企業(yè)內(nèi)部的經(jīng)營交易信息、互聯(lián)網(wǎng)世界中的商品物流信息、人人交互信息、位置信息、物聯(lián)網(wǎng)、車聯(lián)網(wǎng)等產(chǎn)生的信息無時無刻不在產(chǎn)生著大量數(shù)據(jù)，其數(shù)量將遠遠超越現(xiàn)有企業(yè)IT架構的承載能力。尤其對于運營商來說，其系統(tǒng)中存在海量的數(shù)據(jù)，且無時無刻不在產(chǎn)生著新的數(shù)據(jù)，如何盤活這些數(shù)據(jù)資產(chǎn)，充分體現(xiàn)價值優(yōu)勢，將是運營商未來發(fā)展的關鍵，也將決定運營商在信息舞臺上的地位。

大數(shù)據(jù)(big data)具有5V特點[1]：Volume（海量的數(shù)據(jù)規(guī)模）、Velocity（快速的數(shù)據(jù)流轉(zhuǎn)）、Variety（多樣的數(shù)據(jù)類型）、Value（巨大的數(shù)據(jù)價值）、Vitality（動態(tài)的數(shù)據(jù)體系）?！皵?shù)據(jù)，已經(jīng)滲透到當今每一個行業(yè)和業(yè)務職能領域，成為重要的生產(chǎn)因素。人們對于海量數(shù)據(jù)的挖掘和運用，預示著新一波生產(chǎn)率增長和消費者盈余浪潮的到來[2]”。無論運營商“云、管、端”如何全面發(fā)展，最終將轉(zhuǎn)化為數(shù)據(jù)流量，大數(shù)據(jù)的累積效應正給整個IT業(yè)帶來變革。特別是云概念和4G的深入發(fā)展，日均數(shù)十TB級的數(shù)據(jù)量對運營商數(shù)據(jù)壓力與日俱增，而IDC的大規(guī)模建設更是加劇了這一趨勢。所以，運營商擁有了其他行業(yè)無可比擬的資源優(yōu)勢——數(shù)據(jù)資源，可以說運營商已經(jīng)具備了大數(shù)據(jù)的基礎，把握住大數(shù)據(jù)的發(fā)展將會是運營商的一次重大機遇。而淘寶、Google[3]等互聯(lián)網(wǎng)企業(yè)對于大數(shù)據(jù)應用的成功案例也給予了我們啟發(fā)。

2　需求分析

經(jīng)營分析系統(tǒng)作為中國移動IT支撐系統(tǒng)的決策支持系統(tǒng)，幫助企業(yè)決策層了解企業(yè)經(jīng)營現(xiàn)狀，發(fā)現(xiàn)企業(yè)運營的優(yōu)劣勢，預測未來趨勢；幫助細分市場和客戶，指導營銷、客服部門進行有針對性的營銷和高效的客戶關系管理。然而傳統(tǒng)的經(jīng)分系統(tǒng)局限于業(yè)務支撐域，數(shù)據(jù)維度并不完整，質(zhì)量有待提高，仍處于運營驅(qū)動數(shù)據(jù)的被動服務模式。

拿某省運營商經(jīng)營分析（BASS）系統(tǒng)為例，該系統(tǒng)多為小型機+傳統(tǒng)盤陣+關系型數(shù)據(jù)庫的IOE架構：

（2）維護費用偏高：不能滿足大數(shù)據(jù)時代的低成本要求，傳統(tǒng)的小型機盤陣架構所占用的機房空間，耗電量，散熱量及每年高額的維保費用較高，與綠色節(jié)能減排的宗旨相違背。

（3）架構層面不夠靈活：擴展性不足，設備性能的提升依賴于設備硬件的擴容及軟件的升級，小型機的單機擴展能力有限，當應用資源需求超越小型機的極限時，小型機就變得無能為力。另外小型機的部件都是專有部件，價格比較昂貴，導致小型機的性價比較差，多套主機共用一套存儲的集中處理模式對于系統(tǒng)的運行、I/O口讀寫速率都造成極大的負荷。

數(shù)據(jù)庫技術：經(jīng)分系統(tǒng)目前已能提取網(wǎng)管側(cè)如Gb、Gn等接口的部分信令數(shù)據(jù)，通過爬蟲系統(tǒng)提取互聯(lián)網(wǎng)URL數(shù)據(jù)，這些數(shù)據(jù)中存在大量非結構化數(shù)據(jù)，而目前存在的數(shù)據(jù)庫大多為如Oracle，DB2類的關系型數(shù)據(jù)庫，非關系型數(shù)據(jù)庫技術并未被得到深化應用。

（4）應用層缺乏實時性：目前上層應用多為事后處理或準實時，影響用戶感知，支撐服務對象較少。

從以上分析可看出，現(xiàn)有的經(jīng)分系統(tǒng)的發(fā)展并不能與未來企業(yè)信息化發(fā)展的腳步同步，而經(jīng)分系統(tǒng)的大數(shù)據(jù)特點決定其與大數(shù)據(jù)技術的完美契合。因此逐步完善經(jīng)分系統(tǒng)，構建全網(wǎng)數(shù)據(jù)融合的企業(yè)級經(jīng)分成為今后發(fā)展的趨勢。

3　基于大數(shù)據(jù)技術的企業(yè)級經(jīng)分系統(tǒng)

基于大數(shù)據(jù)構建企業(yè)級經(jīng)分系統(tǒng)是在現(xiàn)有經(jīng)分系統(tǒng)上進行補充完善，滿足系統(tǒng)建設的平滑過渡，包括架構的調(diào)整，數(shù)據(jù)源的擴充、整合、統(tǒng)一及平臺的對外開放等。

傳統(tǒng)經(jīng)營分析與基于大數(shù)據(jù)的經(jīng)分系統(tǒng)的差異性如表1、表2所示。

基于大數(shù)據(jù)平臺的經(jīng)分系統(tǒng)（如圖1）建設并不是對原有經(jīng)分的否定，而是對現(xiàn)存系統(tǒng)的補充，使之更多的面向市場、面向管理、面向生產(chǎn)乃至面向開放。

模板支設完成在外框架四角吊錘，每次混凝土澆筑前，應先測量吊錘下放后錘線距離墩身混凝土面的距離和上方垂線距離內(nèi)襯模的距離，以檢測整個輥模架體的偏移及扭轉(zhuǎn)，并做及時調(diào)整。

針對現(xiàn)網(wǎng)經(jīng)分系統(tǒng)各層逐步演進如圖2所示。

（1）擴充數(shù)據(jù)源，沉淀企業(yè)數(shù)據(jù)資產(chǎn)。逐步打通B、M、O三域壁壘，構建IT共享資源池，具體可采用大二層技術來擴展二層網(wǎng)絡，逐步將三域納入同一個大二層范圍內(nèi)，一方面擴大經(jīng)分數(shù)據(jù)源，另一方面更有利于同一個大二層下的云化實施；此外為用戶增加基礎屬性數(shù)據(jù)，實現(xiàn)運營商多維全量的用戶數(shù)據(jù)，包括：基礎屬性、位置信息、用戶喜好等標簽，實施精準營銷，提高用戶黏性，延長用戶生命周期。

表1　兩類經(jīng)分系統(tǒng)異性分析表

（2）采用云ETL替代原ETL，構建企業(yè)級的采集平臺。ETL指對數(shù)據(jù)源進行提取（Extract）、轉(zhuǎn)置（Transform）、加載（Load）。在經(jīng)分系統(tǒng)中原有ETL只能實現(xiàn)對業(yè)務支撐單域數(shù)據(jù)的采集處理，為實現(xiàn)對全域數(shù)據(jù)的采集，構建企業(yè)級的ETL采集層。

（3）加大經(jīng)分系統(tǒng)的x86占比，逐步實現(xiàn)由小型機向x86服務器的遷移。為經(jīng)分系統(tǒng)的不同部分定義不同的重要級別，例如可按照等級由高到低的順序?qū)?shù)據(jù)庫、采集、重要應用、一般應用等來逐步實施。由于數(shù)據(jù)庫體量龐大，對設備性能要求較高且業(yè)界并無針對數(shù)據(jù)庫x86化的專有成熟技術，需謹慎考慮數(shù)據(jù)庫的x86化。目前階段建議采用混搭、多架構并存的模式：對于不同的數(shù)據(jù)類型部署不同架構，除傳統(tǒng)基礎數(shù)據(jù)倉庫外，搭建適配各類數(shù)據(jù)的專有數(shù)據(jù)倉庫。針對關系型數(shù)據(jù)庫盡量部署MPP架構，以優(yōu)化架構，針對非結構化數(shù)據(jù)實施Hadoop技術，短期內(nèi)實現(xiàn)多架構的并存，具體如圖3所示。

事務處理類數(shù)據(jù)：數(shù)據(jù)類型為關系型數(shù)據(jù)，為保持系統(tǒng)的平滑過渡，可維持原有關系型數(shù)據(jù)庫，保持原有架構。

互聯(lián)網(wǎng)，信令類數(shù)據(jù)：由于其隨機性較大，關聯(lián)性較小，采用非結構化數(shù)據(jù)庫技術，如Hadoop技術。

分析挖掘類數(shù)據(jù)：如經(jīng)分歷史庫，為非實時性數(shù)據(jù)，需充分進行數(shù)據(jù)挖掘，關聯(lián)匯總，需調(diào)整原有架構，盡量部署MPP架構。

圖1　基于大數(shù)據(jù)的企業(yè)級經(jīng)分系統(tǒng)

圖2　針對現(xiàn)網(wǎng)經(jīng)分系統(tǒng)各層逐步演進圖

（1）開放數(shù)據(jù)總線能力，按需進行組件分裝，創(chuàng)造商業(yè)價值。

（2）實現(xiàn)事后分析向?qū)崟r分析的轉(zhuǎn)變，以支撐業(yè)務運營，達到向數(shù)據(jù)驅(qū)動運營的最終目的。

基于大數(shù)據(jù)技術的企業(yè)級經(jīng)分系統(tǒng)建設涉及范圍廣，影響意義深遠，并非短期可以實現(xiàn)。結合公司IT現(xiàn)狀來看，還有很長的路要走，需要合理規(guī)劃，逐步演進最終達到目的。

4　結束語

大數(shù)據(jù)時代已經(jīng)到來，正促進著信息技術與各行業(yè)的深度融合，運營商擁有管道中的龐大數(shù)據(jù)這一優(yōu)勢，決定其將是未來大數(shù)據(jù)時代最強勢的競爭者。文章首先分析了現(xiàn)網(wǎng)經(jīng)分系統(tǒng)的局限性，針對現(xiàn)有的短板提出對應的解決措施以及今后的建設思路。對運營商來說，構建基于大數(shù)據(jù)技術的企業(yè)級經(jīng)分系統(tǒng)，利用和深挖自己的潛在優(yōu)勢，把握機遇，迎接挑戰(zhàn)，釋放出數(shù)據(jù)的巨大能量，將是運營商未來經(jīng)營的重中之重，無疑將會成為未來大數(shù)據(jù)時代的主角。

參考文獻

[1]張超. 云計算和大數(shù)據(jù)給運營商帶來的機遇和挑戰(zhàn)[J]. 電信技術, 2013(9).

[2]武延軍. 大數(shù)據(jù)時代已經(jīng)來臨——人機物融合的大數(shù)據(jù)時代[J]. 高科技與產(chǎn)業(yè)化, 2013(5).

[3]孫健，賈曉菁. Google云計算平臺的技術架構及對其成本的影響研究[J]. 電信科學, 2010(1).，

表2　兩類經(jīng)分系統(tǒng)共性分析表

圖3　數(shù)據(jù)處理架構變革

Discussion of enterprise-level business analysis support system building based on big data platform

SUN Chun-ye

(China Mobile Group Design Institute Co., Ltd. Hebei Branch, Shijiazhuang 050021, China)

AbstractFor short board exists in business analysis support system, the paper proposed a method that to build the enterprise-level business analysis support system based on big data skill through integrating the data from all the areas and optimizing the system architecture, then it can improve the resource utilization and lastly to reach the goal of taking advantage of the role of data value and supporting the company's overall development operations by decoupling the data and applications and opening the capability of the system platform progressively.

Keywordsbusiness analysis support; big data; system architecture; data value

收稿日期：2014-07-18

文章編號1008-5599（2015）01-0078-04

文獻標識碼A

中圖分類號TN915