何力

（成都市大數(shù)據(jù)中心 四川省成都市 610000）

伴隨著科學(xué)技術(shù)的發(fā)展，人工智能、大數(shù)據(jù)、云計(jì)算三者都是科學(xué)發(fā)展的良好結(jié)果。人工智能的出現(xiàn)屬于三者中最早，與大數(shù)據(jù)相比，人工智能有著更大的發(fā)展年齡。經(jīng)過了多次的動(dòng)蕩之后，原本的計(jì)算力與訓(xùn)練數(shù)據(jù)量這一瓶頸技術(shù)，被大數(shù)據(jù)成功攻克，進(jìn)而幫助人工智能得到了迅速的發(fā)展。經(jīng)過與大數(shù)據(jù)分布式技術(shù)結(jié)合后，人工智能擁有了極大的發(fā)展前景，而這樣的發(fā)展方向也讓人工智能與大數(shù)據(jù)兩者之間的發(fā)展方向出現(xiàn)了重合。從此兩大領(lǐng)域進(jìn)行了有機(jī)的結(jié)合。大數(shù)據(jù)的不斷發(fā)展，隨著數(shù)據(jù)在平臺上不斷地匯聚，企業(yè)大數(shù)據(jù)與技術(shù)平臺對于分支機(jī)構(gòu)的需求越發(fā)迫切，容器技術(shù)的出現(xiàn)真正的讓大數(shù)據(jù)與人工智能得到了融合，而容器技術(shù)又屬于云計(jì)算的一種，從此大數(shù)據(jù)、人工智能與云計(jì)算得到了真正的融合應(yīng)用。

1 數(shù)據(jù)處理的發(fā)展階段

伴隨著信息技術(shù)的發(fā)展，尤其是近些年移動(dòng)網(wǎng)絡(luò)的迅速建立，各大行業(yè)對于數(shù)據(jù)的生產(chǎn)量以及儲(chǔ)存需求量，呈現(xiàn)了幾何級別的增長趨勢。數(shù)據(jù)處理性能在數(shù)據(jù)量急速增長的情況下受到了巨大的挑戰(zhàn)，同時(shí)數(shù)據(jù)量的增長也讓數(shù)據(jù)種類出現(xiàn)了各種各樣的分支，讓數(shù)據(jù)處理手段產(chǎn)生了新的要求。對于企業(yè)的數(shù)據(jù)應(yīng)用維護(hù)來說，在生產(chǎn)過程中，許多種類稍微偏頗的數(shù)據(jù)，往往形成了一座座數(shù)據(jù)孤島，無法進(jìn)行歸納與整理，同時(shí)計(jì)算也存在著極大的困難。伴隨著大數(shù)據(jù)技術(shù)的不斷發(fā)展，企業(yè)對于數(shù)據(jù)處理技術(shù)也在不斷地提升，在圖1 中對于企業(yè)數(shù)據(jù)處理轉(zhuǎn)型的階段變化進(jìn)行了表述。

在大數(shù)據(jù)剛剛發(fā)展的階段，數(shù)據(jù)孤島讓數(shù)據(jù)無法整合，為了將數(shù)據(jù)孤島清除，從而建立了一些數(shù)據(jù)歸集，在數(shù)據(jù)歸集的基礎(chǔ)上，作為數(shù)據(jù)歸納的標(biāo)準(zhǔn)化進(jìn)行數(shù)據(jù)合并。在此階段中，企業(yè)對于數(shù)據(jù)的處理往往是以進(jìn)行儲(chǔ)存檢索為主要方向，為結(jié)構(gòu)化的數(shù)據(jù)處理提供各種API 與少量SQL 支持。但在此階段中主要的阻礙是海量的SQL 業(yè)務(wù)無法轉(zhuǎn)移到大平臺中，數(shù)據(jù)無法轉(zhuǎn)移讓數(shù)據(jù)技術(shù)的發(fā)展出現(xiàn)了瓶頸，影響了大數(shù)據(jù)的發(fā)展。

在第二階段中，企業(yè)客戶對于大數(shù)據(jù)平臺的需求主要展現(xiàn)為能夠?qū)?shù)據(jù)進(jìn)行更好的結(jié)構(gòu)化規(guī)范，同時(shí)將以往的it 架構(gòu)遷移到分布式架構(gòu)中。針對于這點(diǎn)想要將架構(gòu)進(jìn)行遷移，就需要將SQL 技術(shù)進(jìn)行重新開發(fā)研究，因此各大廠商在SQL 領(lǐng)域進(jìn)行了競爭，不斷提高SQL 標(biāo)準(zhǔn)的兼容程度。SQL 技術(shù)的發(fā)展，讓數(shù)據(jù)分布式事物的難題得到了解決，從而讓SQL技術(shù)成功的躍入了企業(yè)客戶的眼簾。而SQL 的兼容程度越來越高，讓更多的業(yè)務(wù)場景能夠?qū)⑦@種技術(shù)應(yīng)用于信息儲(chǔ)存中。同時(shí)伴隨著技術(shù)的提升，強(qiáng)大的分布式計(jì)算能力，讓更多的客戶可以使用SQL 對海量數(shù)據(jù)進(jìn)行處理。伴隨著眾多企業(yè)用戶數(shù)據(jù)處理能力的提升，數(shù)據(jù)分析研究技術(shù)的不斷提高帶來了流處理技術(shù)的發(fā)展。

圖1：企業(yè)數(shù)據(jù)處理轉(zhuǎn)型階段性變化

在最后階段中，一些企業(yè)用戶已經(jīng)將關(guān)系型數(shù)據(jù)庫作為核心，從而建立了一個(gè)數(shù)據(jù)處理體系。在這樣的數(shù)據(jù)處理模式中，數(shù)據(jù)技術(shù)能夠成為數(shù)據(jù)處理的核心技術(shù)，將這項(xiàng)技術(shù)作為核心后，能夠出現(xiàn)一個(gè)全新的處理體系。SQL 體系伴隨著時(shí)間的發(fā)展，已經(jīng)無法滿足企業(yè)用戶對于數(shù)據(jù)處理的需求，因此想要使用傳統(tǒng)計(jì)算機(jī)算法中的分布化架構(gòu)。但最終受限于結(jié)構(gòu)化數(shù)據(jù)的學(xué)習(xí)挖掘，并沒有實(shí)際進(jìn)行。而隨著深度學(xué)習(xí)技術(shù)的不斷推廣與分布式技術(shù)的碰撞，新一代計(jì)算框架橫空出世，這其中包括tensorflow 等等。在這一項(xiàng)技術(shù)得到運(yùn)行后，各種各樣的新型技術(shù)橫空出世，這其中包括人臉識別、車輛識別、智能客服、無人駕駛等等。從此，大數(shù)據(jù)計(jì)算系統(tǒng)、與人工智能、云計(jì)算系統(tǒng)得到了完美的結(jié)合，各項(xiàng)數(shù)據(jù)已經(jīng)逐漸走向了企業(yè)的生產(chǎn)生活中。

2 大數(shù)據(jù)、人工智能與云計(jì)算的融合

在未來的發(fā)展中，企業(yè)的數(shù)據(jù)資源已經(jīng)不再封閉，已經(jīng)能夠讓各大部門都能夠接觸到數(shù)據(jù)的使用。伴隨著數(shù)據(jù)處理技術(shù)的不斷發(fā)展，企業(yè)面臨著眾多的問題，這些問題都需要使用大數(shù)據(jù)人工智能進(jìn)行良好的處理應(yīng)用。在大數(shù)據(jù)發(fā)展的最早一段時(shí)間內(nèi)，所做的僅僅是在計(jì)算框架內(nèi)，提供相應(yīng)的作業(yè)調(diào)度算法。伴隨著企業(yè)的發(fā)展與社會(huì)的進(jìn)步，對大數(shù)據(jù)提出了更多的需求。除了依舊對資源管理較為粗放之外，大數(shù)據(jù)已經(jīng)能夠進(jìn)行計(jì)算框架資源的管理。而云計(jì)算技術(shù)作為一項(xiàng)資源隔離封裝虛擬化以及管理調(diào)度的技術(shù)，主要的應(yīng)用方向就是對上述問題進(jìn)行解決。但是在容器技術(shù)被廣泛接受之前，云計(jì)算技術(shù)往往主要應(yīng)用于虛擬機(jī)封裝資源，而并沒有得到重視。這項(xiàng)任務(wù)進(jìn)行過程中，云計(jì)算技術(shù)主要負(fù)責(zé)在其上進(jìn)行加載操作系統(tǒng)，這就導(dǎo)致資源的利用率極低。在云計(jì)算技術(shù)發(fā)展的早期，有廠商嘗試將大數(shù)據(jù)平臺建立在虛擬技術(shù)的云化平臺上，但是由于資源利用以及大數(shù)據(jù)平臺的穩(wěn)定性問題，這方面的嘗試并沒有得到成功。伴隨著容器技術(shù)的發(fā)展，以及一些其他技術(shù)概念的形成，大數(shù)據(jù)人工智能基礎(chǔ)平臺開始在容器云構(gòu)建底層資源管理調(diào)度平臺。從定義的角度來講，平臺就類似于為大數(shù)據(jù)和人工智能進(jìn)行操作系統(tǒng)的分布式平臺，將集群中存在的各類資源進(jìn)行封裝與管理。也就是說，通過平臺的建立，人工智能、大數(shù)據(jù)與云計(jì)算三項(xiàng)技術(shù)真正的實(shí)現(xiàn)了融合發(fā)展，而主要的發(fā)展方向依舊集中在對數(shù)據(jù)的處理中。通過各項(xiàng)技術(shù)的使用，能夠讓原本的數(shù)據(jù)處理模式得到相應(yīng)提升與發(fā)展，虛擬的運(yùn)化平臺主要的發(fā)展案例是中國郵政大數(shù)據(jù)平臺，有效的提升與發(fā)展能夠更好的讓數(shù)據(jù)得到提升。

3 技術(shù)融合的總體構(gòu)架與實(shí)現(xiàn)

本文所挑選的技術(shù)融合對象主要是中國郵政大數(shù)據(jù)平臺，在中國郵政大數(shù)據(jù)平臺中，使用了TDH 作為基礎(chǔ)構(gòu)架系統(tǒng)，同時(shí)搭配了TOS。這種基礎(chǔ)構(gòu)架系統(tǒng)， 產(chǎn)生了新一代的邏輯數(shù)據(jù)倉庫與數(shù)據(jù)集市，完全取代了以往的數(shù)據(jù)構(gòu)架系統(tǒng)。

在中國郵政大數(shù)據(jù)平臺中，主要的服務(wù)集中于各類系統(tǒng)，同時(shí)通過云容器來實(shí)現(xiàn)多租戶的數(shù)據(jù)分析挖掘，從而保證數(shù)據(jù)的儲(chǔ)存安全性和儲(chǔ)存質(zhì)量。在中國郵政大數(shù)據(jù)處理中，智能分析體系從業(yè)務(wù)層到管理層，最后到?jīng)Q策層，都有著相應(yīng)的建立。在中國郵政大數(shù)據(jù)平臺中，還會(huì)對相應(yīng)的風(fēng)險(xiǎn)與收益進(jìn)行量化和模擬，保證郵政各項(xiàng)業(yè)務(wù)的收益能夠得到計(jì)算。同時(shí)通過大數(shù)據(jù)系統(tǒng)中國郵政還能對全面經(jīng)營狀況進(jìn)行掌握，從而實(shí)現(xiàn)宏觀決策所必需的數(shù)據(jù)提供。在中國郵政服務(wù)的過程中，大數(shù)據(jù)平臺建立了5 大基礎(chǔ)服務(wù)集群。以5 大數(shù)據(jù)集群為基礎(chǔ)，達(dá)到了4 個(gè)維度統(tǒng)一，分別是數(shù)據(jù)管理，服務(wù)管理，運(yùn)維管理與安全管控。在4 維度達(dá)到統(tǒng)一以后，還會(huì)對6大應(yīng)用領(lǐng)域展開應(yīng)用，這其中包括風(fēng)險(xiǎn)管控，決策支持，服務(wù)支撐，流程優(yōu)化，品牌創(chuàng)新，交叉營銷。數(shù)據(jù)庫與數(shù)據(jù)倉庫的構(gòu)建基礎(chǔ)是TDH。而各類數(shù)據(jù)語言匯集到一起的方式是esb，這其中包括業(yè)務(wù)系統(tǒng)數(shù)據(jù)，實(shí)時(shí)流數(shù)據(jù)，合作單位數(shù)據(jù)，互聯(lián)網(wǎng)數(shù)據(jù)等等。

無論是數(shù)據(jù)湖還是數(shù)據(jù)倉庫，建立的基礎(chǔ)理論都是TDH，這也就決定了在中國郵政大數(shù)據(jù)平臺中，能夠?qū)⒏鞣矫娴臄?shù)據(jù)進(jìn)行綜合后處理。通過數(shù)據(jù)資產(chǎn)目錄的方式來對數(shù)據(jù)進(jìn)行標(biāo)號，從而讓數(shù)據(jù)的檢索更加簡單輕松。而在進(jìn)行數(shù)據(jù)錄入的過程中，系統(tǒng)會(huì)將數(shù)據(jù)自動(dòng)從數(shù)據(jù)湖中加載分析，再分發(fā)到各個(gè)租戶的個(gè)人空間中，從而讓開發(fā)人員的數(shù)據(jù)使用難度降低。需要注意的是，在數(shù)據(jù)使用完成后，開發(fā)人員還會(huì)將數(shù)據(jù)成果應(yīng)用在數(shù)據(jù)湖內(nèi)，實(shí)現(xiàn)對外數(shù)據(jù)的供應(yīng)。由此可見，中國郵政的大數(shù)據(jù)平臺技術(shù)已經(jīng)接近成熟，可以作為行業(yè)內(nèi)的典型案例以供學(xué)習(xí)。

4 人工智能、大數(shù)據(jù)與云計(jì)算的融合發(fā)展研究

伴隨著科學(xué)的發(fā)展，時(shí)代的進(jìn)步，各項(xiàng)高新技術(shù)都有了巨大的飛躍。作為未來發(fā)展的主要目標(biāo)，人工智能、大數(shù)據(jù)與云計(jì)算的運(yùn)用范圍有了巨大的擴(kuò)大，三者之間的界限日益模糊。云計(jì)算的發(fā)展讓人工智能得到了迅速的提升，而大數(shù)據(jù)和人工智能則促進(jìn)了云計(jì)算的進(jìn)一步深入發(fā)展與大規(guī)模運(yùn)用。也就是說，大數(shù)據(jù)人工智能以及云計(jì)算系統(tǒng)三者相輔相成，不斷幫助對方得到進(jìn)一步的提升和發(fā)展。在當(dāng)下，我國的科學(xué)技術(shù)依舊處于發(fā)展階段，眾多經(jīng)濟(jì)企業(yè)都對人工智能、大數(shù)據(jù)與云計(jì)算的發(fā)展提供了支持，這讓人工智能、大數(shù)據(jù)與云計(jì)算的使用越發(fā)廣泛。人工智能方面首當(dāng)其沖，在人們的生活中人工智能已經(jīng)越來越常見，在生產(chǎn)生活中成為了必不可少的一部分。而人們對于人工智能的硬性需求，也促使了人工智能得到進(jìn)一步的發(fā)揮發(fā)展，讓人工智能的分類得到更為精細(xì)和豐富化。

而在另一方面，大數(shù)據(jù)發(fā)展的方向是在各領(lǐng)域進(jìn)行廣泛應(yīng)用。大數(shù)據(jù)系統(tǒng)的存在讓人們意識到數(shù)據(jù)所能帶來的商業(yè)化幫助，而想要讓大數(shù)據(jù)得到進(jìn)一步的發(fā)展，云計(jì)算技術(shù)需要進(jìn)行相應(yīng)的提升。在當(dāng)下的發(fā)展進(jìn)程中，云計(jì)算技術(shù)已經(jīng)得到了充分的發(fā)展與進(jìn)步，而主要的發(fā)展方向是儲(chǔ)存方向。而由于網(wǎng)絡(luò)的發(fā)展和人工智能的逐漸進(jìn)步，讓云計(jì)算所要面對的數(shù)據(jù)處理量呈現(xiàn)了指數(shù)性的增長。而云計(jì)算對于數(shù)據(jù)的處理能力決定了在未來智能生活中云計(jì)算的重要地位。在未來的發(fā)展中云計(jì)算是數(shù)據(jù)進(jìn)步的基礎(chǔ)之一，更是在時(shí)代發(fā)展中不可缺少的一部分。

在未來的發(fā)展過程中，人工智能、大數(shù)據(jù)與云計(jì)算三者之間的界限將日益模糊，進(jìn)而發(fā)展成為一體化的高新科技，而三者之間的關(guān)系也從以往的互相幫助到如今的互為基石。需要注意的是，這三者之間，無論哪種科技，想要發(fā)展都需要得到另外兩種技術(shù)的水平突破支持。因此未來的發(fā)展中，需要將人工智能、大數(shù)據(jù)與云計(jì)算三種科技視為一體，重要程度不分上下。

5 結(jié)束語

無論是云計(jì)算、人工智能還是大數(shù)據(jù)，人們的生活將會(huì)通過這三樣技術(shù)而受到一定的影響，伴隨著社會(huì)的不斷提升，人們對于這三樣技術(shù)也將產(chǎn)生更大的需求。因此為了滿足社會(huì)中人民群眾的生活需求，三者之間的融合發(fā)展已經(jīng)屬于未來發(fā)展的主要趨勢之一，在未來的形勢中需要加強(qiáng)三者的融合推動(dòng)。主要目的是讓三者能夠更快地進(jìn)行融合，同時(shí)為社會(huì)提供更多的便利與幫助。