史興亞

摘 要：從ICP角度來講，網(wǎng)絡(luò)用戶的興趣愛好、消費習(xí)慣、關(guān)系網(wǎng)絡(luò)及互聯(lián)網(wǎng)的潮流和走向都非常有價值，而這些信息都將在IDC處保存和交互，因此如何挖掘潛藏在這些信息數(shù)據(jù)中的商業(yè)價值變得十分迫切。為此，本文筆者結(jié)合相關(guān)知識，淺析面向IDC互聯(lián)網(wǎng)行為分析的大數(shù)據(jù)平臺設(shè)計與應(yīng)用。

關(guān)鍵詞：IDC；互聯(lián)網(wǎng)行為分析；大數(shù)據(jù)平臺

IDC是一種通過向用戶提供帶寬和機房環(huán)境的租用服務(wù)來為ICP、企業(yè)、媒體和網(wǎng)站提供安全、可靠、高質(zhì)量、大規(guī)模的服務(wù)器托管及增值服務(wù)的互聯(lián)網(wǎng)數(shù)據(jù)中心，其具有可靠性高、靈活性好的優(yōu)點，因此極大地方便了用戶。針對保存在IDC中的信息數(shù)據(jù)，急需建立起數(shù)據(jù)分析平臺來整合和深挖其中潛在的商業(yè)價值，從而增強對IDC客戶營銷決策的服務(wù)能力。據(jù)此，筆者簡要闡述這一數(shù)據(jù)分析平臺的設(shè)計及其應(yīng)用。

1 互聯(lián)網(wǎng)行為分析平臺的架構(gòu)

圖1為面向IDC的互聯(lián)網(wǎng)行為分析平臺的業(yè)務(wù)模式。

根據(jù)圖1所示的業(yè)務(wù)模式，開發(fā)了一種面向服務(wù)的分布式系統(tǒng)架構(gòu)，其采用了一種基于J2EE的B/S軟件架構(gòu)，并應(yīng)用到了基于微信/易信平臺開發(fā)、互聯(lián)網(wǎng)行為可視化呈現(xiàn)、大數(shù)據(jù)存儲與分析、海量數(shù)據(jù)傳輸與分發(fā)、IP包采集與策略控制及流量分析等核心技術(shù)。在互聯(lián)網(wǎng)行為分析平臺中，前端網(wǎng)頁的開發(fā)采用了STRUTS2+JAAX+FLEX；接口層是一種基于ESB平臺的接口服務(wù)管控，其具有規(guī)范化和統(tǒng)一化的特征；應(yīng)用層采用的是JBOSS Web服務(wù)器；數(shù)據(jù)服務(wù)層用到了傳統(tǒng)關(guān)系型數(shù)據(jù)庫Oracle和Hadoop分布式文件系統(tǒng)，具體將DPI、網(wǎng)絡(luò)流量等海量數(shù)據(jù)存入Hadoop中及由Oracle來處理其他普通結(jié)構(gòu)化的數(shù)據(jù)。在互聯(lián)網(wǎng)行為分析平臺中，其需分別通過與IDC機房的DPI設(shè)備、IDC業(yè)務(wù)網(wǎng)管系統(tǒng)、IDC資源系統(tǒng)、CRM與計費系統(tǒng)、AAA系統(tǒng)等對接來獲取網(wǎng)絡(luò)監(jiān)控數(shù)據(jù)、IDC資源信息及業(yè)務(wù)數(shù)據(jù)等。另外，平臺通過接口適配實現(xiàn)了數(shù)據(jù)的采集與監(jiān)控，同時通過運用Hadoop集群與NoSQL技術(shù)、分布式計算與存儲技術(shù)來采集、存儲和分析海量的DPI數(shù)據(jù)及網(wǎng)管流量數(shù)據(jù)。因此，互聯(lián)網(wǎng)行為分析平臺的建立可為IDC客戶提供信息服務(wù)、客戶報告及業(yè)務(wù)營銷服務(wù)。

2 互聯(lián)網(wǎng)行為分析平臺的應(yīng)用

在本章節(jié)，筆者簡要從如下方面淺析互聯(lián)網(wǎng)行為分析平臺的應(yīng)用：

2.1 互聯(lián)網(wǎng)行業(yè)分析

即：（1）網(wǎng)站排行分析，用戶通過輸入網(wǎng)站域名，便可查詢到網(wǎng)站的訪問量，同時可按如下步驟維護網(wǎng)站的行業(yè)分類：首先劃分主流網(wǎng)站→允許用戶自定義及添加網(wǎng)站、類型→經(jīng)管理員審核通過→操作成功；（2）流量流向區(qū)域分析，具體分析省/市區(qū)域的流量流向情況，用以指導(dǎo)IDC客戶擴容及調(diào)整市場方向；（3）應(yīng)用流量分析，具體從應(yīng)用方面分析IDC流量的分布狀況。

2.2 網(wǎng)站訪客分析

即通過深挖IDC中的DPI數(shù)據(jù)來深入分析訪問平臺的網(wǎng)絡(luò)流量及訪客行為，具體如下：（1）訪問趨勢分析，具體分析網(wǎng)站訪問量在一段時間內(nèi)的變化走勢，從而直觀地對比呈現(xiàn)出多天在相同時段中的訪問量；（2）訪問地域分析，具體分析用戶所在的省份；（3）搜索引擎分析，具體分析用戶進入平臺所用的搜索引擎；（4）搜索詞分析，具體分析用戶所用搜索詞的排名，用以支持客戶網(wǎng)站的SEO；（5）外部鏈接分析，具體分析訪客平臺的搜索引擎URL等外部鏈接URL；（6）運營商分析，具體分析訪客進入平臺所選擇的運營商；（7）實時訪客分析，具體查看近0.5h進入網(wǎng)站的訪客情況，其中包括訪問地域與時間、訪客來源與類型、訪問時長與頁數(shù)、入口頁面及最后停留頁面等內(nèi)容；（8）客戶端信息分析，具體分析訪客平臺用戶所用的瀏覽器類型；（9）新老訪客分析，具體通過對比分析新老訪客的特征來指導(dǎo)IDC客戶對自身服務(wù)進行優(yōu)化，從而實現(xiàn)留住老客戶及吸引新用戶的目的；（10）忠誠度分析，深入分析用戶訪問的網(wǎng)站頁面；（11）用戶興趣分析，具體分析訪客的興趣，用以指導(dǎo)IDC客戶針對性地改造系統(tǒng)，從而提高用戶的黏性。

2.3 運營監(jiān)控

在互聯(lián)網(wǎng)行為分析平臺中，運營監(jiān)控的實現(xiàn)主要表現(xiàn)在如下方面：（1）顯示客戶的名稱、地址、密碼、移動電話及電子郵箱等基本信息；（2）顯示自帶交換機、服務(wù)器等資產(chǎn)信息，其中IP資源顯示客戶的IP信息及交換機端口顯示客戶的交換機端口信息；（3）網(wǎng)絡(luò)拓?fù)渲庇^地將客戶的網(wǎng)絡(luò)設(shè)備、主機資源顯示在拓?fù)渖霞巴ㄟ^監(jiān)控拓?fù)鋪慝@取設(shè)備的流量、性能、告警等信息；（4）流量分析，即通過分析實際產(chǎn)生的流量與客戶購買的實際流量來進行預(yù)警或告警，具體展現(xiàn)方式包括流量值列表和流量波動圖，其中流量波動圖包括年、月、周、日流量圖等類型；（5）性能分析，即CPU等主機性能、路由器等網(wǎng)絡(luò)設(shè)備性能及Web與中間件服務(wù)等應(yīng)用性能，其中平臺的應(yīng)用系統(tǒng)支持通過擴建來滿足系統(tǒng)未來的應(yīng)用需要；（6）告警分析，即對客戶的主機、端口、電路和網(wǎng)絡(luò)設(shè)備等進行統(tǒng)一化的告警管理，并以郵件或短信等形式將最終的故障信息告知客戶，同時平臺通過集中存儲告警事件來實現(xiàn)對歷史告警的查詢和統(tǒng)計。

3 結(jié)語

針對本案所建立的互聯(lián)網(wǎng)行為分析平臺，其在技術(shù)上支持整合全網(wǎng)數(shù)據(jù)及綜合深挖跨地域與行業(yè)的數(shù)據(jù)；在應(yīng)用上主要面向IDC進行互聯(lián)網(wǎng)行為分析，因此這種基于大規(guī)模的IDC流量數(shù)據(jù)可實現(xiàn)對全網(wǎng)進行行為檢測和應(yīng)用分析。

參考文獻

[1]劉化召.面向IDC互聯(lián)網(wǎng)行為分析的大數(shù)據(jù)平臺設(shè)計與應(yīng)用[J].電信技術(shù)，2016，（1）：68-74.

[2]蔣昌俊，丁志軍，王俊麗，等.面向互聯(lián)網(wǎng)金融行業(yè)的大數(shù)據(jù)資源服務(wù)平臺[J].科學(xué)通報，2014，（36）：3547-3554.

[3]馬俊佳.中國移動“36宮格”互聯(lián)網(wǎng)內(nèi)容資源評估優(yōu)化體系研究[J].電信技術(shù)，2015，（10）：88-92.

（作者單位：深圳市都信建設(shè)監(jiān)理有限公司）