金星

今天我跟大家分享的主題是“創(chuàng)新技術(shù)助力政務(wù)大數(shù)據(jù)”，關(guān)鍵詞就是創(chuàng)新，看到“創(chuàng)新”這個(gè)詞很多人的感受都會(huì)不一樣，或者有的人覺(jué)得這是老生常談的話(huà)題，但其實(shí)我們平時(shí)談的創(chuàng)新大多是一些微創(chuàng)新，我今天想講的是真正的創(chuàng)新，跟微創(chuàng)新不一樣。

大數(shù)據(jù)創(chuàng)新從何做起

也許很多人都會(huì)懷疑我們國(guó)人到底沒(méi)有實(shí)力做真正的創(chuàng)新，我不做論斷，可以談一些現(xiàn)實(shí)情況。中國(guó)有很多技術(shù)實(shí)力可能較弱，如底層的芯片、操作系統(tǒng)，但是有一些地方我們其實(shí)要比國(guó)外強(qiáng)很多，比如報(bào)表。國(guó)外報(bào)表都是很簡(jiǎn)單的，就像銀行的清單。但是我們國(guó)家的報(bào)表是非常復(fù)雜的，格式復(fù)雜，條目多，上面是表格，中間是圖，這樣的報(bào)表在世界上很罕見(jiàn)，幾乎找不到。

我們潤(rùn)乾是做什么的呢？過(guò)去18年一直在做數(shù)據(jù)計(jì)算模型，解決大數(shù)據(jù)計(jì)算的核心難題，一是如何提高效能，把那些復(fù)雜計(jì)算變得簡(jiǎn)單。二是怎么做得更快一些，提高效率。三是解決商業(yè)邏輯中面臨的人工成本的問(wèn)題。我們真正的盈利是在技術(shù)創(chuàng)新上或者說(shuō)數(shù)學(xué)模型算法上。

信息技術(shù)的發(fā)展其實(shí)是跟需求的驅(qū)動(dòng)有很重要的關(guān)系，互聯(lián)網(wǎng)時(shí)代，到后來(lái)計(jì)算機(jī)用的多了，需要把數(shù)據(jù)連通起來(lái)，互聯(lián)網(wǎng)解決這個(gè)問(wèn)題之后要打通各種數(shù)據(jù)，數(shù)據(jù)多了以后需要挖掘出價(jià)值，有更大的利益。

可以看到現(xiàn)在的趨勢(shì)就是大數(shù)據(jù)和人工智能，這很多人都聽(tīng)說(shuō)過(guò)，但是我們很多時(shí)候沒(méi)有搞清楚大數(shù)據(jù)和人工智能的關(guān)鍵，是數(shù)據(jù)量大嗎？大是它的特點(diǎn)，或者說(shuō)很重要的特點(diǎn)，但最重要的特色并不是大。

那么真正的人工智能、大數(shù)據(jù)最重要的特色是什么呢？是數(shù)據(jù)計(jì)算。其實(shí)20年前一些大型的銀行、運(yùn)營(yíng)商的數(shù)據(jù)量也非常大，但是當(dāng)時(shí)的數(shù)據(jù)并沒(méi)有現(xiàn)在復(fù)雜，需要的算法也很簡(jiǎn)單?，F(xiàn)在的數(shù)據(jù)類(lèi)型非常復(fù)雜，而且用戶(hù)的需求也發(fā)生了變化，比如要根據(jù)每個(gè)人的消費(fèi)情況總結(jié)出他的消費(fèi)習(xí)慣，甚至預(yù)測(cè)消費(fèi)行為，或者說(shuō)要分析出哪一片區(qū)域或者哪一個(gè)年齡段消費(fèi)能力最強(qiáng)、貸款能力最強(qiáng)等。

政務(wù)大數(shù)據(jù)的現(xiàn)狀是什么呢？我理解有幾個(gè)特點(diǎn)：1.幾十個(gè)政府部門(mén)的共享數(shù)據(jù)模板；2.上千甚至更多的數(shù)據(jù)庫(kù)表，上萬(wàn)甚至更多的共享數(shù)據(jù)字段模板；3.人口、法人、空間地理、宏觀(guān)經(jīng)濟(jì)、城市資源等多個(gè)基礎(chǔ)數(shù)據(jù)的數(shù)據(jù)模板和數(shù)據(jù)元；4.物聯(lián)感知數(shù)據(jù)、信用數(shù)據(jù)、開(kāi)放數(shù)據(jù)、公共服務(wù)數(shù)據(jù)、社會(huì)治理網(wǎng)格化數(shù)據(jù)、電子證照等多個(gè)主題數(shù)據(jù)庫(kù)的數(shù)據(jù)模板；5.人口、法人、空間地理、宏觀(guān)經(jīng)濟(jì)、物聯(lián)網(wǎng)業(yè)務(wù)分析模型。針對(duì)這些現(xiàn)狀，概況一下有兩大業(yè)務(wù)需求：一是成百上千個(gè)常用數(shù)據(jù)需求處理作業(yè)；二是數(shù)據(jù)量巨大、數(shù)據(jù)源眾多。我們的解決方案是引入數(shù)據(jù)計(jì)算層—集算器。

集算器的創(chuàng)新應(yīng)用

我們?cè)诮?jīng)營(yíng)報(bào)表的過(guò)程中，總能碰到用戶(hù)希望我們協(xié)助開(kāi)發(fā)復(fù)雜報(bào)表。久而久之，我們發(fā)現(xiàn)，報(bào)表的復(fù)雜性不僅體現(xiàn)在格式上，而更多的是在數(shù)據(jù)方面，數(shù)據(jù)庫(kù)中的數(shù)據(jù)距離要呈現(xiàn)出來(lái)的數(shù)據(jù)還非常遙遠(yuǎn)，經(jīng)常需要很多步驟的復(fù)雜運(yùn)算才能得到。而報(bào)表工具只能解決呈現(xiàn)環(huán)節(jié)那一步的少量計(jì)算，對(duì)于進(jìn)入報(bào)表工具之前的數(shù)據(jù)計(jì)算則無(wú)能為力。這導(dǎo)致了雖然有強(qiáng)大的報(bào)表工具來(lái)解決格式及呈現(xiàn)環(huán)節(jié)的計(jì)算問(wèn)題，而報(bào)表開(kāi)發(fā)卻依然很難的現(xiàn)狀。對(duì)此，潤(rùn)乾總結(jié)分析各種數(shù)據(jù)計(jì)算問(wèn)題，設(shè)計(jì)了一套新的數(shù)據(jù)模型和相應(yīng)的程序語(yǔ)法，能夠更簡(jiǎn)捷地描述報(bào)表數(shù)據(jù)源準(zhǔn)備的算法，這就是集算器的由來(lái)。

集算器IDE是專(zhuān)門(mén)為數(shù)據(jù)處理和開(kāi)發(fā)設(shè)計(jì)的編程環(huán)境。集算器Server（集算服務(wù)器）是運(yùn)行在Java平臺(tái)上的數(shù)據(jù)計(jì)算型中間件，嵌入式接口為工程提供了便利的集成性，服務(wù)式接口為工程提供了高效的擴(kuò)展性。

集算器作為專(zhuān)業(yè)的報(bào)表數(shù)據(jù)源準(zhǔn)備中間件，將復(fù)雜的計(jì)算從報(bào)表剝離出來(lái)，有效降低開(kāi)發(fā)難度、提高開(kāi)發(fā)效率。集算器腳本可以與報(bào)表模板一起管理，能有效降低應(yīng)用管理的復(fù)雜度。

集算器是一款擁有完全自主知識(shí)產(chǎn)權(quán)，安全可控的軟件。在設(shè)計(jì)目標(biāo)上，集算器希望提升兩方面的效率：計(jì)算的描述效率和計(jì)算的執(zhí)行效率。這兩個(gè)效率非常重要，如果描述效率太低，就意味著開(kāi)發(fā)成本太高，很難寫(xiě)出程序進(jìn)行計(jì)算；而如果執(zhí)行效率低，則需要運(yùn)行很久才能得到結(jié)果，那實(shí)用價(jià)值也就會(huì)打折扣。

集算器的下一步是數(shù)據(jù)庫(kù)和數(shù)據(jù)倉(cāng)庫(kù)，將演變成和傳統(tǒng)關(guān)系數(shù)據(jù)庫(kù)/數(shù)據(jù)倉(cāng)庫(kù)正面競(jìng)爭(zhēng)的產(chǎn)品。數(shù)據(jù)庫(kù)是指主要用于交易業(yè)務(wù)（OLTP）的產(chǎn)品，而數(shù)據(jù)倉(cāng)庫(kù)則用于分析業(yè)務(wù)（OLAP）。目前許多商業(yè)數(shù)據(jù)庫(kù)把這兩個(gè)功能整合在一個(gè)產(chǎn)品中，但事實(shí)上這兩種需求有相當(dāng)程度的矛盾性，放在一起會(huì)出現(xiàn)顧此失彼的現(xiàn)象。OLTP更強(qiáng)調(diào)事務(wù)一致性、高并發(fā)但單任務(wù)數(shù)據(jù)量不大、計(jì)算復(fù)雜度也低；而OLAP則不需要考慮事務(wù)一致性、低并發(fā)但單任務(wù)數(shù)據(jù)量大、計(jì)算復(fù)雜度高。

（根據(jù)演講內(nèi)容整理，未經(jīng)本人審核）