郭濤

大數(shù)據(jù)不是少數(shù)專業(yè)技術(shù)人員的專利，而是一個(gè)大眾化的工具，大數(shù)據(jù)越向前發(fā)展，這種趨勢(shì)會(huì)越明顯。以曙光方舟大數(shù)據(jù)融合分析平臺(tái)為開端，曙光也在順潮流而行。

12月9日，曙光正式推出方舟大數(shù)據(jù)融合分析平臺(tái)，“方舟”這個(gè)名字讓記者首先聯(lián)想到的是“水能載舟亦能覆舟”這句名言。在這里，“舟”當(dāng)然是指方舟大數(shù)據(jù)融合分析平臺(tái)，而“水”則是指用戶。用戶的海量數(shù)據(jù)采集、分析和展現(xiàn)需要一個(gè)成熟、高效、簡(jiǎn)單易用的大數(shù)據(jù)平臺(tái)；反過來，一個(gè)端到端的大數(shù)據(jù)分析平臺(tái)可以更有效地幫助用戶從數(shù)據(jù)里“淘金”，實(shí)現(xiàn)價(jià)值創(chuàng)新。

像許多新興的技術(shù)一樣，大數(shù)據(jù)一開始也是由概念驅(qū)動(dòng)。經(jīng)過最近幾年的市場(chǎng)培育，大數(shù)據(jù)在落地的過程中，其核心任務(wù)已經(jīng)從大數(shù)據(jù)基礎(chǔ)平臺(tái)的建設(shè)轉(zhuǎn)向大數(shù)據(jù)的分析、展現(xiàn)和深度加工，畢竟從數(shù)據(jù)中獲取價(jià)值才是大數(shù)據(jù)的最終目標(biāo)。曙光的大數(shù)據(jù)產(chǎn)品創(chuàng)新之路也順應(yīng)了這一變化趨勢(shì)，從以前主要提供大數(shù)據(jù)基礎(chǔ)設(shè)施，包括服務(wù)器、存儲(chǔ)、大數(shù)據(jù)一體機(jī)等，逐漸向大數(shù)據(jù)的軟件、分析平臺(tái)延伸。

從硬件到軟件，從大數(shù)據(jù)基礎(chǔ)設(shè)施到大數(shù)據(jù)分析，說是“跨界”也好，自然延伸也罷，總之，大數(shù)據(jù)的落地必須更加貼近應(yīng)用、貼近用戶。中科曙光總裁助理、江蘇曙光信息技術(shù)有限公司總裁王海榮回憶說：“在開發(fā)方舟大數(shù)據(jù)融合分析平臺(tái)之前，我們?cè)?jīng)走訪過大量用戶，發(fā)現(xiàn)大數(shù)據(jù)落地的最大障礙是技術(shù)和應(yīng)用門檻高，大數(shù)據(jù)工具本身晦澀難懂。如果有一款大數(shù)據(jù)工具能夠降低使用成本，讓用戶像使用Windows應(yīng)用程序一樣簡(jiǎn)單那該多好。方舟大數(shù)據(jù)融合分析平臺(tái)應(yīng)運(yùn)而生。”

大數(shù)據(jù)應(yīng)用到底有多難？

舉個(gè)例子，如果你的筆記本電腦的存儲(chǔ)空間幾乎耗盡，你是選擇對(duì)數(shù)據(jù)進(jìn)行整理，刪除冗余數(shù)據(jù)，還是用移動(dòng)硬盤將數(shù)據(jù)進(jìn)行轉(zhuǎn)移，甚至購買一臺(tái)新的電腦？可能很多人寧愿采購新的硬件設(shè)備，也不想刪除長(zhǎng)年積累的數(shù)據(jù)。這其實(shí)就是大數(shù)據(jù)興起的一個(gè)原因。巨量的數(shù)據(jù)、數(shù)據(jù)類型多樣化、數(shù)據(jù)價(jià)值密度低、處理效率差……所以人們更迫切需要一個(gè)高效的大數(shù)據(jù)工具。

但是，一開始展現(xiàn)在用戶面前的都是專業(yè)的“高大上”的大數(shù)據(jù)工具和平臺(tái)，比如Hadoop。用戶“垂涎”Hadoop的強(qiáng)大，但是又“畏懼”Hadoop的高技術(shù)門檻。怎么辦？一大堆Hadoop的商業(yè)發(fā)行版充斥市場(chǎng)，一些提供Hadoop專業(yè)實(shí)施服務(wù)的企業(yè)開始冒頭，很多人干脆將Hadoop與大數(shù)據(jù)劃上了等號(hào)。慢慢地，當(dāng)人們對(duì)大數(shù)據(jù)有了更深入的了解后，才發(fā)現(xiàn)Hadoop并不是大數(shù)據(jù)的全部，而只是分布式數(shù)據(jù)處理的一個(gè)技術(shù)平臺(tái)。還是王海榮說的對(duì)，用戶需要的是一款涵蓋大數(shù)據(jù)全生態(tài)系統(tǒng)的標(biāo)準(zhǔn)化大數(shù)據(jù)工具。方舟大數(shù)據(jù)融合分析平臺(tái)也正是從這一點(diǎn)切入的，它為用戶提供了大數(shù)據(jù)融合、分析的一站式解決方案。

隨著用戶對(duì)大數(shù)據(jù)應(yīng)用興趣點(diǎn)的轉(zhuǎn)移（或者說用戶需求的變化），市場(chǎng)上的大數(shù)據(jù)產(chǎn)品和解決方案的熱點(diǎn)也在發(fā)生變化。從Hadoop商業(yè)發(fā)行版到大數(shù)據(jù)操作系統(tǒng)，再到今天一站式的大數(shù)據(jù)平臺(tái)，大家都在朝著“大而全”的方向發(fā)展，從底層的分布式數(shù)據(jù)處理到分布式資源管理，再到上層的數(shù)據(jù)采集、數(shù)據(jù)挖掘，形成了一條龍的解決方案和服務(wù)。而這樣做的唯一目的是，將大數(shù)據(jù)的前后臺(tái)技術(shù)進(jìn)行封裝，對(duì)用戶屏蔽大數(shù)據(jù)的技術(shù)難度，用戶只需要通過鼠標(biāo)的拖拽，就可以輕松操作大數(shù)據(jù)工具，獲得自己想要的大數(shù)據(jù)分析結(jié)果。

以前，企業(yè)中只有既懂業(yè)務(wù)，又會(huì)建模的數(shù)據(jù)科學(xué)家才有能力操作大數(shù)據(jù)工具，而現(xiàn)在人人都可以成為數(shù)據(jù)科學(xué)家。這里的“人人”包括企業(yè)中最普通的、沒有受過IT專業(yè)訓(xùn)練的人員，比如銷售人員、文秘等。只有達(dá)到了這樣的效果，才能真正展示出大數(shù)據(jù)的強(qiáng)大和價(jià)值。

王海榮在介紹方舟大數(shù)據(jù)融合分析平臺(tái)時(shí)也反復(fù)強(qiáng)調(diào)，曙光開發(fā)這一產(chǎn)品的主要目的也是為了降低大數(shù)據(jù)的應(yīng)用成本和使用難度，而方舟大數(shù)據(jù)融合分析平臺(tái)所具有的自動(dòng)建模、高度的可視化等功能，使得即使是非專業(yè)人員也能輕松上手。

國(guó)外知名的大數(shù)據(jù)廠商，比如Tableau、Qlik，以及國(guó)內(nèi)的大數(shù)據(jù)廠商永洪科技等，也都把實(shí)現(xiàn)“人人都是數(shù)據(jù)科學(xué)家”作為努力的方向。大數(shù)據(jù)不是少數(shù)專業(yè)技術(shù)人員的專利，而是一個(gè)大眾化的工具，大數(shù)據(jù)越向前發(fā)展，這種趨勢(shì)會(huì)越明顯。以方舟大數(shù)據(jù)融合分析平臺(tái)為開端，曙光也在順潮流而行。

一站式到底有多難？

無獨(dú)有偶，就在曙光推出方舟大數(shù)據(jù)融合分析平臺(tái)前幾天，永洪科技剛剛發(fā)布了最新一代產(chǎn)品Yonghong Z-Suite V7.0，其最大賣點(diǎn)也是通過一站式平臺(tái)實(shí)現(xiàn)完整的大數(shù)據(jù)體驗(yàn)。

一站式、端到端、完整的應(yīng)用體驗(yàn)，雖然大數(shù)據(jù)廠商都表示在朝這個(gè)方向努力，但是每個(gè)廠商的能力不同，所能達(dá)到的深度和廣度也不盡相同。將各種硬件或軟件簡(jiǎn)單地疊加在一起，其實(shí)并不難，難的是降低用戶學(xué)習(xí)和使用大數(shù)據(jù)分析平臺(tái)的成本。

聽了江蘇曙光信息技術(shù)有限公司大數(shù)據(jù)研發(fā)中心項(xiàng)目經(jīng)理趙本杰的介紹，記者最突出的感覺是方舟大數(shù)據(jù)融合分析平臺(tái)沒有辜負(fù)“一站式”這個(gè)稱謂。

方舟大數(shù)據(jù)融合分析平臺(tái)提供從數(shù)據(jù)匯聚、數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)化管控到數(shù)據(jù)建模分析、數(shù)據(jù)挖掘、數(shù)據(jù)可視化的全套支持，可有效解決各行業(yè)在從GB級(jí)到PB級(jí)數(shù)據(jù)分析方面遇到的各種運(yùn)維管理難題。該平臺(tái)還通過用戶友好的管理界面，向用戶提供數(shù)據(jù)同步、集群管理、任務(wù)調(diào)度、監(jiān)控和預(yù)警等多方面的一站式支持。趙本杰表示：“簡(jiǎn)言之，方舟大數(shù)據(jù)融合分析平臺(tái)就是一整套支持從數(shù)據(jù)匯集到數(shù)據(jù)分析、分析建模的全生態(tài)系統(tǒng)。”

中科曙光大數(shù)據(jù)研發(fā)經(jīng)理郭慶補(bǔ)充說：“在方舟大數(shù)據(jù)融合分析平臺(tái)上，各行各業(yè)的人員都可以通過可視化界面自行實(shí)現(xiàn)對(duì)異構(gòu)生產(chǎn)環(huán)境中的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的匯聚整合、數(shù)據(jù)共享、交互式檢索、建模分析、數(shù)據(jù)挖掘、可視化展示，以及對(duì)數(shù)據(jù)進(jìn)行全面的管理和任務(wù)調(diào)度，從而獲得一站式大數(shù)據(jù)功能體驗(yàn)?！?/p>

方舟大數(shù)據(jù)融合分析平臺(tái)為客戶提供了廣泛的計(jì)算、存儲(chǔ)、分析、展示和管理能力，客戶無需切換平臺(tái)即可完成從數(shù)據(jù)融合到數(shù)據(jù)共享、構(gòu)建分析模型、結(jié)果可視化展示的過程，并提供豐富的組件庫和環(huán)境，支持大數(shù)據(jù)全生命周期的方法論和最佳實(shí)踐。

借助方舟大數(shù)據(jù)融合分析平臺(tái)，曙光的最終目標(biāo)是建立一體化的大數(shù)據(jù)分析生態(tài)體系，從而實(shí)現(xiàn)大數(shù)據(jù)可視化應(yīng)用的快速發(fā)布，更加具有針對(duì)性和時(shí)效性，同時(shí)基于任務(wù)流調(diào)度機(jī)制也使得數(shù)據(jù)分析更為便捷?？傊?，通過一體化大數(shù)據(jù)資源的提供，可以大幅提升大數(shù)據(jù)分析應(yīng)用創(chuàng)建的靈活度，降低使用難度。

數(shù)據(jù)與業(yè)務(wù)的融合難在哪？

方舟大數(shù)據(jù)融合分析平臺(tái)在正式發(fā)布前就已經(jīng)在多個(gè)行業(yè)得到了成功部署和應(yīng)用，在江蘇省通信管理局大數(shù)據(jù)分析平臺(tái)、徐州公安智能警務(wù)大數(shù)據(jù)平臺(tái)、鎮(zhèn)江國(guó)稅大數(shù)據(jù)融合分析平臺(tái)、泰州市檢察院大數(shù)據(jù)融合分析平臺(tái)中都可見曙光方舟大數(shù)據(jù)融合分析平臺(tái)的身影。公安、醫(yī)療、軍工、電力、政務(wù)、國(guó)企等將是方舟大數(shù)據(jù)融合分析平臺(tái)重點(diǎn)突破的行業(yè)。

舉例來說，將方舟大數(shù)據(jù)融合分析平臺(tái)用于警務(wù)大數(shù)據(jù)處理，通過展示目標(biāo)人詳細(xì)信息和多維度分析，可以實(shí)現(xiàn)同案人員的推送、隱性涉毒人員的挖掘，另外還可以通過時(shí)間序列模型、案件增長(zhǎng)趨勢(shì)，建立時(shí)間序列等深度分析模型，進(jìn)行犯罪趨勢(shì)的預(yù)測(cè)。據(jù)趙本杰介紹，基于方舟大數(shù)據(jù)融合分析平臺(tái)構(gòu)建的開封市公安局警務(wù)深度應(yīng)用平臺(tái)對(duì)套牌車進(jìn)行分析，準(zhǔn)確率超過70%。

王海榮概括說，方舟大數(shù)據(jù)融合分析平臺(tái)具有兩大突出特色：第一，實(shí)現(xiàn)了數(shù)據(jù)與業(yè)務(wù)的融合；第二，更加貼近用戶的需求。方舟大數(shù)據(jù)融合分析平臺(tái)將業(yè)務(wù)分析需求與易用分析工具緊密結(jié)合，大大縮短了數(shù)據(jù)價(jià)值變現(xiàn)的周期。

其實(shí)，對(duì)于用戶來說，大數(shù)據(jù)不僅僅是一種工具，用戶要在應(yīng)用大數(shù)據(jù)的過程中，慢慢將大數(shù)據(jù)變成自己的一種能力，一種數(shù)字化運(yùn)營(yíng)的能力，這也是未來數(shù)字化企業(yè)所必須具備的一種能力。

要實(shí)現(xiàn)這一目標(biāo)，就要將大數(shù)據(jù)與企業(yè)自身的業(yè)務(wù)需求緊緊聯(lián)系在一起。為此，方舟大數(shù)據(jù)融合分析平臺(tái)打造了“數(shù)據(jù)集市”和“應(yīng)用集市”的概念，目的是將各業(yè)務(wù)系統(tǒng)的數(shù)據(jù)、匯聚的數(shù)據(jù)、經(jīng)過清洗建模的數(shù)據(jù)，以及創(chuàng)建的可視化應(yīng)用推送至統(tǒng)一對(duì)外的“集市”中，實(shí)現(xiàn)數(shù)據(jù)和應(yīng)用的全行業(yè)共享。

“方舟大數(shù)據(jù)融合分析平臺(tái)還可通過將數(shù)據(jù)、建模工具、可視化模板對(duì)基層業(yè)務(wù)人員開放，激發(fā)用戶對(duì)數(shù)據(jù)匯聚和數(shù)據(jù)建模的熱情，讓數(shù)據(jù)和業(yè)務(wù)真正融合。”郭慶表示。

政府已經(jīng)明確提出，要以推行電子政務(wù)、建設(shè)新型智慧城市等為抓手，以數(shù)據(jù)集中和共享為途徑，建設(shè)全國(guó)一體化的國(guó)家大數(shù)據(jù)中心，推進(jìn)技術(shù)融合、業(yè)務(wù)融合、數(shù)據(jù)融合。方舟大數(shù)據(jù)融合分析平臺(tái)的推出可謂恰逢其時(shí)。以曙光為代表的大數(shù)據(jù)“中國(guó)隊(duì)”已經(jīng)整裝待發(fā)。