MineData位置大數(shù)據(jù)平臺(tái)的三大本領(lǐng):聚?看?算
一年前,四維圖新總裁程鵬曾表示“我們已經(jīng)從傳統(tǒng)的導(dǎo)航數(shù)據(jù)地圖成長(zhǎng)為以位置為核心的大數(shù)據(jù)公司,四維圖新的大數(shù)據(jù)能力將開(kāi)放給所有行業(yè)”。一年后,隨著MineData位置大數(shù)據(jù)平臺(tái)的正式發(fā)布,四維圖新構(gòu)建的大數(shù)據(jù)計(jì)劃終于成為現(xiàn)實(shí)。
MineData是依托于四維圖新十余年導(dǎo)航電子地圖的生產(chǎn)及服務(wù)經(jīng)驗(yàn),孵化于集團(tuán)內(nèi)部,首次將旗下所有子公司、所有產(chǎn)品線數(shù)據(jù)和合作伙伴數(shù)據(jù)進(jìn)行充分整合,利用自身數(shù)據(jù)、算法和技術(shù)優(yōu)勢(shì)推出的位置信息SaaS平臺(tái),構(gòu)建數(shù)據(jù)共享平臺(tái),主要由子公司世紀(jì)高通負(fù)責(zé)運(yùn)營(yíng)。
海納百川,聚沙成塔。四維圖新目前有包括地圖、OEM、后裝車機(jī)、移動(dòng)端、芯片以及合作伙伴等六大數(shù)據(jù)來(lái)源,可以獲得多個(gè)維度的海量數(shù)據(jù)。其中,四維圖新自有數(shù)據(jù)源就包括了全國(guó)及港澳地區(qū)的導(dǎo)航數(shù)據(jù)、現(xiàn)場(chǎng)資料、深度數(shù)據(jù)和340余座城市的道路實(shí)況。目前,四維圖新的數(shù)據(jù)總量已經(jīng)超過(guò)4000TB,而且還在以每天2.8TB的速度增長(zhǎng)。隨著車聯(lián)網(wǎng)、自動(dòng)駕駛等業(yè)務(wù)的發(fā)展,數(shù)據(jù)規(guī)模的增長(zhǎng)速度勢(shì)必會(huì)更加迅速。
四維圖新副總裁梁永杰強(qiáng)調(diào),這些都是規(guī)格化之后的有序數(shù)據(jù),而不是原始雜亂的無(wú)序數(shù)據(jù),這兩種數(shù)據(jù)有非常大的區(qū)別,100份的原始雜亂數(shù)據(jù)都不一定能抽出1份規(guī)格化有序數(shù)據(jù)。由此可見(jiàn),四維圖新在大數(shù)據(jù)處理方面的造詣之深,很好地解決了大數(shù)據(jù)之源的問(wèn)題,構(gòu)建了全國(guó)絕無(wú)僅有的權(quán)威位置數(shù)據(jù)倉(cāng)庫(kù)。
四維圖新獲取、處理數(shù)據(jù)的能力毋庸置疑,但是這些數(shù)據(jù)會(huì)分散存儲(chǔ)在公司不同事業(yè)部乃至子公司的服務(wù)器,后續(xù)如何聚集、整合,打破潛在的信息孤島,讓數(shù)據(jù)發(fā)揮更大價(jià)值,就是緊接著要解決的又一個(gè)問(wèn)題。世紀(jì)高通副總經(jīng)理兼四維圖新首席架構(gòu)師石清華介紹,公司以往也是按照先拉各部門數(shù)據(jù)清單,再建數(shù)據(jù)共享平臺(tái),最后坐等上交數(shù)據(jù)的套路,然而效果并不是很好。因此,他們另辟蹊徑,不再被動(dòng)等待上交數(shù)據(jù),而是主動(dòng)出擊 “抽取”數(shù)據(jù)。
因?yàn)閿?shù)據(jù)存儲(chǔ)在服務(wù)器,服務(wù)器又組成集群,因此四維圖新在每個(gè)業(yè)務(wù)口的數(shù)據(jù)集群又放置了一臺(tái)機(jī)器,專門用于業(yè)務(wù)數(shù)據(jù)集群里的數(shù)據(jù)導(dǎo)流,像探針?biāo)频闹苯釉脒M(jìn)行數(shù)據(jù)導(dǎo)流,讓數(shù)據(jù)源源不斷地流入被稱為“蜂巢”的數(shù)據(jù)倉(cāng)庫(kù),并進(jìn)行數(shù)據(jù)清洗,然后再重新分門別類地根據(jù)屬性存儲(chǔ)在數(shù)據(jù)沙盒里對(duì)外供給。石清華介紹,他們將“探針-蜂巢-數(shù)據(jù)沙盒”的三層結(jié)構(gòu)稱為“數(shù)據(jù)蜂巢系統(tǒng)”,是一種非干擾式的全自動(dòng)數(shù)據(jù)萃取系統(tǒng),可以節(jié)約存儲(chǔ)成本,降低數(shù)據(jù)使用門檻。他表示,數(shù)據(jù)蜂巢系統(tǒng)是MineData的基石,正是因?yàn)樗拇嬖?,才使得上層平臺(tái)的數(shù)據(jù)一直是鮮活和多維度的。
既然有了這么好的數(shù)據(jù),如何表達(dá)加以利用,指導(dǎo)具體業(yè)務(wù)?這就是MineData其他兩個(gè)重要的組成部分:MineMap和MineLab。前者解決了位置大數(shù)據(jù)的可視化,后者則解決了位置大數(shù)據(jù)的分析。
MineMap是一站式地圖可視化產(chǎn)品,提供所見(jiàn)即所得的地圖定制服務(wù)。簡(jiǎn)單些理解,就是將以前非常專業(yè)的地圖配置問(wèn)題,按照互聯(lián)網(wǎng)的交互體驗(yàn),進(jìn)行了重構(gòu),數(shù)據(jù)不只有靜態(tài)的,而且也可以是動(dòng)態(tài)的,甚至更加炫酷,只要有足夠的創(chuàng)意,就能獲得用戶想要的效果。為了適應(yīng)不同的終端設(shè)備,MineMap還提供了表現(xiàn)一致的引擎,為Web、Android和iOS多平臺(tái)準(zhǔn)備了第三方開(kāi)發(fā)接口,實(shí)現(xiàn)了一處配置、多屏運(yùn)行。除此之外,MineMap還考慮到具體業(yè)務(wù)需要與地圖進(jìn)行疊加顯示,因此又推出了可視化模板,有各種地圖特效,包括軌跡點(diǎn)亮圖、城市柱形圖、跟蹤流線圖、動(dòng)態(tài)火線圖和熱力圖等。
如果說(shuō)MineMap的操作流程大致是選擇數(shù)據(jù)、配置數(shù)據(jù)、出定制地圖,那么MineLba則是選擇數(shù)據(jù)、配置算法、出分析結(jié)果。
大家可能對(duì)每年春節(jié)時(shí)的人口遷徙圖都不陌生了,這個(gè)就是基于一種叫做OD(交通出行量)算法得出的結(jié)果。類似的例子還有很多,例如道路流量分析、潮汐車道分析、紅綠燈優(yōu)化分析等。但就本質(zhì)而言,這些都是一系列基礎(chǔ)算法,構(gòu)建了不同的業(yè)務(wù)解釋。
石清華介紹,MineLab應(yīng)該是MineData最有魅力的一部分。四維圖新提供了完整的數(shù)據(jù),可以模擬不同場(chǎng)景里的真實(shí)數(shù)據(jù),對(duì)于研究和學(xué)術(shù)而言這是一個(gè)非常好的工具。在石清華看來(lái),因?yàn)楝F(xiàn)在的開(kāi)源配套技術(shù)已經(jīng)非常成熟,大數(shù)據(jù)分析最難的不是技術(shù),也不是算法,當(dāng)然也不是可視化。因?yàn)樗惴梢圆粩嗾{(diào)整,可視化有很多借鑒,最難的是數(shù)據(jù)和完備的數(shù)據(jù)場(chǎng)景。
MineLab可以提供近似真實(shí)環(huán)境的實(shí)驗(yàn)室,里面有近似真實(shí)的場(chǎng)景數(shù)據(jù),有已經(jīng)搭建好的大數(shù)據(jù)框架,也有示例性的工程算法,剩下的就是需要用戶專業(yè)領(lǐng)域的創(chuàng)造能力,用大數(shù)據(jù)的手段解決企業(yè)與位置相關(guān)的痛點(diǎn)。
簡(jiǎn)單總結(jié),MineData提供了三樣最基本的東西:一個(gè)數(shù)據(jù)連接器,稱作數(shù)據(jù)蜂巢,用來(lái)聚數(shù)據(jù);一套稱作MineMap的可視化工具用來(lái)看數(shù)據(jù);一間稱作MineLab位置大數(shù)據(jù)實(shí)驗(yàn)室用來(lái)算數(shù)據(jù)。在此基礎(chǔ)上,四維圖新希望能夠給合作伙伴及用戶,提供一個(gè)完整的位置大數(shù)據(jù)解決方案。目前,MineData有兩個(gè)版本,一個(gè)是基于PC端的嘗鮮版,主要是為了讓大家了解平臺(tái)的基本能力;另一個(gè)則是企業(yè)版,也是未來(lái)四維圖新致力推動(dòng)的版本,可以本地部署在用戶的私有云,協(xié)助用戶快速具備位置大數(shù)據(jù)的私有化能力,降低企業(yè)內(nèi)部的大數(shù)據(jù)管理和建設(shè)成本。
MindData位置大數(shù)據(jù)平臺(tái)的發(fā)布促進(jìn)了四維圖新全業(yè)務(wù)能力的提升,是新增的重要業(yè)務(wù)模塊,正如四維圖新總裁程鵬所言:四維圖新經(jīng)過(guò)十余年發(fā)展,至今積累了以地圖數(shù)據(jù)為入口的海量大數(shù)據(jù)信息,并且具備優(yōu)秀的數(shù)據(jù)匯總、計(jì)算能力與深度學(xué)習(xí)能力。位置大數(shù)據(jù)時(shí)代的來(lái)臨,相關(guān)的產(chǎn)業(yè)及服務(wù)也將從初步的構(gòu)建落地到真實(shí)的應(yīng)用。未來(lái)的發(fā)展將掀起新一輪浪潮,對(duì)生產(chǎn)實(shí)踐起到革命性的影響。
(本刊記者/游建 )