褚龍現(xiàn) 陳婉冰
(平頂山學(xué)院計(jì)算機(jī)學(xué)院 河南省平頂山市 467000)
由于移動(dòng)互聯(lián)網(wǎng)和移動(dòng)終端融合發(fā)展速度越來越快,網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)作為一種數(shù)據(jù)集成平臺(tái)能夠?qū)A繑?shù)據(jù)進(jìn)行統(tǒng)一的存儲(chǔ)、管理[1]。網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成技術(shù)是網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面設(shè)計(jì)中主要的應(yīng)用技術(shù),也是網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)設(shè)計(jì)中十分重要的一環(huán)。在網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成過程中,所涉及到的代碼量十分巨大,這就意味著網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成需要花費(fèi)很長的時(shí)間,存在效率低的問題。數(shù)據(jù)庫技術(shù)作為對數(shù)據(jù)進(jìn)行存儲(chǔ)以及管理的倉庫,主要包括三層架構(gòu),分別為:物理數(shù)據(jù)層、概念數(shù)據(jù)層以及用戶數(shù)據(jù)層。數(shù)據(jù)庫技術(shù)通過數(shù)據(jù)處理系統(tǒng),能夠?qū)崿F(xiàn)對數(shù)據(jù)的共享。通過將數(shù)據(jù)庫技術(shù)引進(jìn)到網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成中,致力于從根本上提高網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成速率。
網(wǎng)絡(luò)大數(shù)據(jù)處理技術(shù)的核心是對“大數(shù)據(jù)”的采集、分類、整理與存儲(chǔ),并根據(jù)其特征建立特征索引,以方便數(shù)據(jù)的利用?;诖死砟睿趧?dòng)態(tài)頁面數(shù)據(jù)生成中,需要首先構(gòu)建網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫,建立數(shù)據(jù)處理的源頭信息;其次根據(jù)數(shù)據(jù)庫中存儲(chǔ)的數(shù)據(jù)的特征,設(shè)計(jì)動(dòng)態(tài)頁面數(shù)據(jù)字典;第三步,在數(shù)據(jù)字典的支撐下,生成網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù),實(shí)現(xiàn)動(dòng)態(tài)頁面數(shù)據(jù)的顯示與利用。
數(shù)據(jù)庫技術(shù)作為人工智能技術(shù)中的核心技術(shù),運(yùn)用數(shù)據(jù)庫技術(shù)構(gòu)建網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫。網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫作為提高數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成速度中最重要的一項(xiàng)內(nèi)容,基于人工智能應(yīng)用建立的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫打破傳統(tǒng)對網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)只進(jìn)行簡單羅列的模式,對網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)進(jìn)行智慧化的集成與存儲(chǔ),將大量類型相同的智慧化網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)挖掘聚類構(gòu)成網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫庫?;谌斯ぶ悄軕?yīng)用建立的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫是一個(gè)具有層次關(guān)聯(lián)結(jié)構(gòu)的知識(shí)體系,通過數(shù)據(jù)知識(shí)單元的抽取、關(guān)聯(lián)、組織以及存儲(chǔ)確保網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫安全高效的運(yùn)行。通過網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫對大數(shù)據(jù)進(jìn)行對應(yīng)的數(shù)據(jù)存儲(chǔ)及管理,基于人工智能應(yīng)用中的存儲(chǔ)虛擬化技術(shù)將所有經(jīng)過整理后的數(shù)據(jù)直接存儲(chǔ)至網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫中,這樣一來,便可以直接通過歷史數(shù)據(jù)對大數(shù)據(jù)進(jìn)行有針對性的存儲(chǔ)及管理。與此同時(shí),用數(shù)據(jù)處理技術(shù)對數(shù)據(jù)進(jìn)行信息分類以及聚類,從而得到結(jié)構(gòu)化的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù),平臺(tái)還可以通過數(shù)據(jù)挖掘和數(shù)據(jù)分析技術(shù)對結(jié)構(gòu)化的數(shù)據(jù)與平臺(tái)中的語義詞庫、數(shù)據(jù)分類表等進(jìn)行連接匹配。再通過信息聚類的方法得出網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成所需的關(guān)鍵詞,進(jìn)而將這些關(guān)鍵詞用于目錄網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成工具。本文基于人工智能應(yīng)用構(gòu)建的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫,能夠?qū)崿F(xiàn)30 萬點(diǎn)的實(shí)時(shí)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成,通過人工智能應(yīng)用中的云中心以及數(shù)據(jù)處理能力,最大程度上保證了數(shù)據(jù)的多樣性以及完整性,為后續(xù)針對數(shù)據(jù)的共享與應(yīng)用奠定了扎實(shí)的基礎(chǔ),解決了網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成的后顧之憂。
圖1:網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面圖
圖2:生成數(shù)據(jù)量對比結(jié)果圖
表1:網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)字典
在網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成中,底層數(shù)據(jù)必須具備最基礎(chǔ)的管理功能[2]。本文基于數(shù)據(jù)庫技術(shù)中的數(shù)據(jù)字典,將底層數(shù)據(jù)中每一個(gè)需要調(diào)用的類配置成一個(gè)表的形式,進(jìn)而確保網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面中的底層數(shù)據(jù)能夠合成一個(gè)最基本的組件?;跀?shù)據(jù)庫設(shè)計(jì)的動(dòng)態(tài)頁面數(shù)據(jù)字典,如表1所示。
結(jié)合表1所示,通過基于數(shù)據(jù)庫設(shè)計(jì)動(dòng)態(tài)頁面數(shù)據(jù)字典,將底層數(shù)據(jù)合成為一個(gè)最基本的組件,能夠有效減少網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)的冗余度[3]。在此過程中,需要注意的是一個(gè)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)字典只能配置一個(gè)主健,避免由于存在其他主健導(dǎo)致網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面底層數(shù)據(jù)編碼混亂。與此同時(shí),必須設(shè)置好數(shù)據(jù)長度以及數(shù)據(jù)配置類型。
在設(shè)計(jì)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)字典的基礎(chǔ)上,生成網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)[4]。利用數(shù)據(jù)庫中的數(shù)據(jù)處理層為網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)字典進(jìn)行JDBC 編碼。通過調(diào)用的API 請求,將網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)轉(zhuǎn)化為具體的代碼,實(shí)現(xiàn)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)sQL 查找、解析、執(zhí)行等功能。將自動(dòng)生成的JDBC 代碼提供給網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)的API 接口,利用generatoConfig.xml 對數(shù)據(jù)進(jìn)行配置,實(shí)現(xiàn)對于網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)(類)的調(diào)用。通過將調(diào)用的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)(類)通過DarkNet 與數(shù)據(jù)庫連接,并設(shè)置好賬號(hào)密碼,得到自動(dòng)生成的JDBC 代碼,實(shí)現(xiàn)了基于數(shù)據(jù)庫的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成。網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面圖,如圖1所示。
結(jié)合圖1所示,需要注意的是,所有網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)最終都是通過generatoConfig.xml 配置后,才能夠自動(dòng)生成的,無須人為對網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)進(jìn)行任何修改、添加或是刪除等操作[5]。至此,完成基于數(shù)據(jù)庫的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成技術(shù)設(shè)計(jì)。
本文通過設(shè)計(jì)實(shí)例分析的方式,選取2 個(gè)真實(shí)數(shù)據(jù)集作為實(shí)驗(yàn)對象,分別為:Tyhusge 數(shù)據(jù)集以及Cfisnja 數(shù)據(jù)集,使用Ecldevgsdefsw Luna-SR3 作為網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成代碼實(shí)現(xiàn)的開發(fā)IDE。首先,使用本文設(shè)計(jì)的數(shù)據(jù)生成技術(shù)進(jìn)行網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成操作,將實(shí)驗(yàn)限定時(shí)間設(shè)置為80s,以每10s 為一個(gè)時(shí)間節(jié)點(diǎn)進(jìn)行測試,并記錄數(shù)據(jù)生成的數(shù)量,將其設(shè)為實(shí)驗(yàn)組;再使用傳統(tǒng)數(shù)據(jù)生成技術(shù)對數(shù)據(jù)集在網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面中進(jìn)行生成,同樣記錄數(shù)據(jù)生成的數(shù)量,將其設(shè)為對照組。由此可見,本次實(shí)驗(yàn)主要內(nèi)容為測試兩種數(shù)據(jù)生成技術(shù)在限定時(shí)間內(nèi)的生成數(shù)據(jù)量。通過8 次對比實(shí)驗(yàn),得出實(shí)驗(yàn)結(jié)果。
將兩種數(shù)據(jù)生成技術(shù)下的生成數(shù)據(jù)量進(jìn)行對比,生成數(shù)據(jù)量對比結(jié)果,如圖2所示。
根據(jù)圖2 可知,通過基于數(shù)據(jù)庫設(shè)計(jì)的數(shù)據(jù)生成技術(shù)在相同限定時(shí)間內(nèi)生成的數(shù)據(jù)量高于對照組兩倍以上,設(shè)計(jì)的數(shù)據(jù)生成技術(shù)在數(shù)據(jù)生成效率方面相比傳統(tǒng)數(shù)據(jù)生成技術(shù)具有明顯的優(yōu)勢。綜上所述,設(shè)計(jì)的數(shù)據(jù)生成技術(shù)對網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)的生成效率更高,有理由直接投入現(xiàn)實(shí)應(yīng)用。
文章針對基于數(shù)據(jù)庫的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成技術(shù)展開研究,通過以上研究可以表明,利用本文設(shè)計(jì)的數(shù)據(jù)生成技術(shù)能夠在保證數(shù)據(jù)獨(dú)立性的前提下,解決網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成效率低的問題。由此可見,未來網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成方面的發(fā)展可以以數(shù)據(jù)庫為核心技術(shù),為網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成領(lǐng)域的研究提供學(xué)術(shù)意義。盡管本文進(jìn)行的研究已趨于完善,但現(xiàn)如今針對網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)的建設(shè)仍需進(jìn)一步完善,未來將建立完整的數(shù)據(jù)庫實(shí)現(xiàn)高效、精準(zhǔn)的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成。