秦麒
摘要:大數(shù)據(jù)時(shí)代下數(shù)據(jù)倉(cāng)庫(kù)的建立是必然趨勢(shì),在大數(shù)據(jù)技術(shù)不斷發(fā)展的今天,數(shù)據(jù)的存儲(chǔ)成為了重要的問題,建立數(shù)據(jù)倉(cāng)庫(kù)不但能夠解決數(shù)據(jù)存儲(chǔ)問題,同時(shí)還能夠緩解數(shù)據(jù)存儲(chǔ)矛盾.從目前數(shù)據(jù)倉(cāng)庫(kù)的建立來(lái)看,需要對(duì)倉(cāng)庫(kù)的整體架構(gòu)進(jìn)行合理設(shè)計(jì),需要應(yīng)用關(guān)鍵技術(shù)支撐數(shù)據(jù)倉(cāng)庫(kù)的建立和運(yùn)行,同時(shí),需要掌握正確的數(shù)據(jù)存儲(chǔ)方式并積極解決數(shù)據(jù)存儲(chǔ)過程當(dāng)中存在的多種問題。該文結(jié)合大數(shù)據(jù)技術(shù),認(rèn)真分析了數(shù)據(jù)倉(cāng)庫(kù)建立過程當(dāng)中的注意事項(xiàng)及技術(shù)應(yīng)用,為數(shù)據(jù)倉(cāng)庫(kù)的建立提供了方法支持。
關(guān)鍵詞:大數(shù)據(jù);數(shù)據(jù)倉(cāng)庫(kù);建設(shè)方法
中圖分類號(hào):TP399 文獻(xiàn)標(biāo)識(shí)碼:A
文章編號(hào):1009-3044(2020)10-0010-03
目前數(shù)據(jù)倉(cāng)庫(kù)的建立是大數(shù)據(jù)發(fā)展到特定階段下的重要任務(wù),同時(shí)也是解決數(shù)據(jù)存儲(chǔ)問題和緩解數(shù)據(jù)存儲(chǔ)矛盾的必然選擇。對(duì)于大數(shù)據(jù)技術(shù)而言,大數(shù)據(jù)技術(shù)應(yīng)用之后產(chǎn)生了海量的數(shù)據(jù)信息需要進(jìn)行存儲(chǔ),在存儲(chǔ)過程當(dāng)中,數(shù)據(jù)倉(cāng)庫(kù)的價(jià)值凸顯出來(lái),數(shù)據(jù)倉(cāng)庫(kù)的建立不但關(guān)系到數(shù)據(jù)的存儲(chǔ),還關(guān)系到數(shù)據(jù)的調(diào)用。因此,對(duì)數(shù)據(jù)倉(cāng)庫(kù)的建立進(jìn)行深入分析,不但對(duì)數(shù)據(jù)倉(cāng)庫(kù)的建立有著重要意義,同時(shí)也能夠推動(dòng)數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)升級(jí)和迭代,對(duì)數(shù)據(jù)倉(cāng)庫(kù)建立和功能完善具有重要作用。
1數(shù)據(jù)倉(cāng)庫(kù)的分類
1.1狹義數(shù)據(jù)倉(cāng)庫(kù)
數(shù)據(jù)倉(cāng)庫(kù)主要的功能是存儲(chǔ)數(shù)據(jù),數(shù)據(jù)的來(lái)源主要與數(shù)據(jù)的應(yīng)用過程有直接關(guān)系。數(shù)據(jù)的類別相對(duì)較雜,數(shù)據(jù)的數(shù)量較多,在存儲(chǔ)過程當(dāng)中不但要對(duì)數(shù)據(jù)進(jìn)行有效存儲(chǔ),同時(shí)還要保證數(shù)據(jù)在調(diào)用過程當(dāng)中能夠滿足調(diào)用要求,只有達(dá)到這些標(biāo)準(zhǔn),才能夠符合數(shù)據(jù)倉(cāng)庫(kù)的功能要求。在數(shù)據(jù)倉(cāng)庫(kù)的建立過程當(dāng)中,狹義的數(shù)據(jù)倉(cāng)庫(kù)主要是指存儲(chǔ)數(shù)據(jù)的數(shù)據(jù)庫(kù),其功能相對(duì)單一,主要是對(duì)數(shù)據(jù)進(jìn)行保存,方便數(shù)據(jù)在應(yīng)用中隨時(shí)調(diào)用,最大限度的保障數(shù)據(jù)的安全性,避免數(shù)據(jù)因黑客攻擊發(fā)生泄漏。
狹義數(shù)據(jù)倉(cāng)庫(kù)的概念主要是聚焦了數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)存儲(chǔ)功能,對(duì)數(shù)據(jù)的存儲(chǔ)有著明確的要求,在數(shù)據(jù)存儲(chǔ)和調(diào)用過程當(dāng)中,需要按照相應(yīng)的標(biāo)準(zhǔn)予以運(yùn)行,對(duì)整個(gè)數(shù)據(jù)的處理和數(shù)據(jù)的保管有著明確的規(guī)定。在數(shù)據(jù)的存儲(chǔ)過程當(dāng)中,需要保證數(shù)據(jù)的安全性和穩(wěn)定性,避免數(shù)據(jù)在調(diào)用過程當(dāng)中出現(xiàn)數(shù)據(jù)丟失和數(shù)據(jù)失真的問題。從這一點(diǎn)來(lái)看,狹義數(shù)據(jù)庫(kù)是目前數(shù)據(jù)倉(cāng)庫(kù)分類的基本類別,在實(shí)際應(yīng)用過程當(dāng)中,我們應(yīng)當(dāng)掌握狹義數(shù)據(jù)倉(cāng)庫(kù)這一分類方式,在數(shù)據(jù)倉(cāng)庫(kù)的定義以及數(shù)據(jù)倉(cāng)庫(kù)的應(yīng)用過程當(dāng)中了解其特點(diǎn)。
1.2廣義數(shù)據(jù)倉(cāng)庫(kù)
廣義數(shù)據(jù)倉(cāng)庫(kù)除了涵蓋現(xiàn)有的存儲(chǔ)數(shù)據(jù)的數(shù)據(jù)庫(kù)之外,同時(shí)也泛指其他具有數(shù)據(jù)存儲(chǔ)功能的服務(wù)器、電腦終端等小型的數(shù)據(jù)庫(kù)。廣義數(shù)據(jù)倉(cāng)庫(kù)并不針對(duì)單一的數(shù)據(jù)庫(kù)進(jìn)行定義,而是將所有具有存儲(chǔ)數(shù)據(jù)功能的硬件系統(tǒng)都稱之為數(shù)據(jù)倉(cāng)庫(kù)。除了硬件系統(tǒng)之外,例如云端等網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)系統(tǒng)也可以稱為廣義的數(shù)據(jù)倉(cāng)庫(kù),在廣義數(shù)據(jù)倉(cāng)庫(kù)中定義較為寬泛,對(duì)數(shù)據(jù)倉(cāng)庫(kù)的認(rèn)定比較直接,能夠成為數(shù)據(jù)倉(cāng)庫(kù)定義的重要類別,按照廣義數(shù)據(jù)倉(cāng)庫(kù)去定義符合要求的數(shù)據(jù)倉(cāng)庫(kù),無(wú)論是數(shù)量還是規(guī)模都是相對(duì)較大的。
廣義數(shù)據(jù)倉(cāng)庫(kù)主要是與狹義數(shù)據(jù)倉(cāng)庫(kù)相區(qū)分,廣義數(shù)據(jù)倉(cāng)庫(kù)關(guān)注的是數(shù)據(jù)的存儲(chǔ)以及數(shù)據(jù)的存儲(chǔ)方式,沒有按照狹義數(shù)據(jù)倉(cāng)庫(kù)的定義去嚴(yán)格的區(qū)分?jǐn)?shù)據(jù)倉(cāng)庫(kù)的專屬性,對(duì)數(shù)據(jù)倉(cāng)庫(kù)的劃分類別較為寬泛。在實(shí)際應(yīng)用過程當(dāng)中廣義數(shù)據(jù)倉(cāng)庫(kù)的應(yīng)用較多,在理解難度上相對(duì)較低,對(duì)于整個(gè)數(shù)據(jù)倉(cāng)庫(kù)的構(gòu)建和數(shù)據(jù)倉(cāng)庫(kù)的應(yīng)用具有重要意義。了解廣義數(shù)據(jù)倉(cāng)庫(kù)的定義,能夠幫助我們做好數(shù)據(jù)倉(cāng)庫(kù)的構(gòu)建,對(duì)于數(shù)據(jù)倉(cāng)庫(kù)的建立和發(fā)展具有重要作用。
2大數(shù)據(jù)時(shí)代數(shù)據(jù)倉(cāng)庫(kù)的架構(gòu)
2.1系統(tǒng)處理架構(gòu)
大數(shù)據(jù)時(shí)代數(shù)據(jù)倉(cāng)庫(kù)的架構(gòu)對(duì)系統(tǒng)處理要求較高,在數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)過程當(dāng)中,首先進(jìn)行的就是系統(tǒng)處理的架構(gòu)。系統(tǒng)處理既關(guān)系到數(shù)據(jù)存儲(chǔ)的速率,同時(shí)也關(guān)系到數(shù)據(jù)存儲(chǔ)的安全性和數(shù)據(jù)調(diào)用過程當(dāng)中是否能夠達(dá)到快速性標(biāo)準(zhǔn)。按照這些要求構(gòu)建的系統(tǒng)處理架構(gòu),在架構(gòu)的科學(xué)性和完善性上相對(duì)較高,對(duì)于數(shù)據(jù)的處理能夠滿足基本處理要求,能夠解決數(shù)據(jù)處理過程當(dāng)中存在的突出問題,對(duì)數(shù)據(jù)處理的有效性和數(shù)據(jù)處理的快速性有著重要幫助,在數(shù)據(jù)倉(cāng)庫(kù)的架構(gòu)過程中系統(tǒng)處理架構(gòu)是關(guān)鍵。
在實(shí)際的數(shù)據(jù)處理架構(gòu)設(shè)計(jì)中,應(yīng)當(dāng)保證數(shù)據(jù)處理的有效性,將數(shù)據(jù)處理的要求涵蓋在系統(tǒng)處理架構(gòu)設(shè)計(jì)標(biāo)準(zhǔn)中,按照系統(tǒng)處理的要求以及數(shù)據(jù)處理和調(diào)用的要求設(shè)計(jì)系統(tǒng)處理架構(gòu)。這樣的架構(gòu)在科學(xué)性和完善性上才能夠滿足使用要求,才能夠解決數(shù)據(jù)處理中存在的多種問題。因此,我們應(yīng)當(dāng)認(rèn)識(shí)到系統(tǒng)處理架構(gòu)的重要性及系統(tǒng)處理架構(gòu)在設(shè)計(jì)中需要考慮的問題,便于提高系統(tǒng)處理架構(gòu)設(shè)計(jì)質(zhì)量。
2.2集群架構(gòu)
數(shù)據(jù)倉(cāng)庫(kù)在建立中,除了要做好系統(tǒng)處理架構(gòu)之外,集群的架構(gòu)也十分關(guān)鍵。數(shù)據(jù)在數(shù)據(jù)倉(cāng)庫(kù)中的存儲(chǔ)并不是以單一數(shù)據(jù)體現(xiàn)的,而是以數(shù)據(jù)群或者數(shù)據(jù)集群的方式體現(xiàn)。這種方式的數(shù)據(jù)集約程度較高,存儲(chǔ)效果較好,無(wú)論是在數(shù)據(jù)存儲(chǔ)的安全性,還是數(shù)據(jù)調(diào)用的便捷性方面都能夠滿足實(shí)際需要,在實(shí)施過程當(dāng)中能夠解決數(shù)據(jù)處理存在的實(shí)際問題。從這一點(diǎn)來(lái)看,集群數(shù)據(jù)處理決定了在數(shù)據(jù)倉(cāng)庫(kù)建立中需要對(duì)集群進(jìn)行有效的架構(gòu),按照集群的方式和集群的特點(diǎn)進(jìn)行架構(gòu),提高架構(gòu)的合理性。
對(duì)于數(shù)據(jù)倉(cāng)庫(kù)而言,集群架構(gòu)能夠?qū)⒓哼M(jìn)行合理分類,并且按照集群的類別進(jìn)行模塊化的處理,能夠使數(shù)據(jù)倉(cāng)庫(kù)在集群模塊上具有較強(qiáng)的針對(duì)性,能夠解決數(shù)據(jù)存儲(chǔ)中集群類別不清晰和集群混亂的問題。通過集群架構(gòu)的設(shè)計(jì),能夠使集群的科學(xué)性和合理性得以體現(xiàn),滿足數(shù)據(jù)存儲(chǔ)需要。因此,做好集群架構(gòu)是數(shù)據(jù)倉(cāng)庫(kù)建立中的重要方式,對(duì)數(shù)據(jù)倉(cāng)庫(kù)的建立和數(shù)據(jù)的分類存儲(chǔ)有著重要意義。
2.3存儲(chǔ)方式
數(shù)據(jù)倉(cāng)庫(kù)在建立中存儲(chǔ)方式的選擇至關(guān)重要,存儲(chǔ)方式既關(guān)系到數(shù)據(jù)存儲(chǔ)的安全性和穩(wěn)定性,同時(shí)也關(guān)系到數(shù)據(jù)的存儲(chǔ)和調(diào)用速度是否能夠滿足實(shí)際需要。目前在數(shù)據(jù)存儲(chǔ)中,有集中式存儲(chǔ)和分布式存儲(chǔ)這兩種方式,在實(shí)際選擇中應(yīng)當(dāng)按照數(shù)據(jù)的類別和數(shù)據(jù)的特點(diǎn)進(jìn)行合理選擇,結(jié)合數(shù)據(jù)倉(cāng)庫(kù)的實(shí)際特點(diǎn)以及數(shù)據(jù)倉(cāng)庫(kù)在建立過程當(dāng)中需要考慮的因素,分布式存儲(chǔ)是目前主流的存儲(chǔ)方式,既能夠保證數(shù)據(jù)的安全性,同時(shí)也能夠防止數(shù)據(jù)被惡意篡改,最大限度地保證了數(shù)據(jù)的原始性和準(zhǔn)確性。
分布式存儲(chǔ)對(duì)于提高數(shù)據(jù)存儲(chǔ)的安全穩(wěn)定性和維護(hù)數(shù)據(jù)的原始性和準(zhǔn)確性具有重要意義,在實(shí)際應(yīng)用過程當(dāng)中有著廣闊的應(yīng)用前景,能夠?qū)崿F(xiàn)數(shù)據(jù)的安全穩(wěn)定運(yùn)行和存儲(chǔ),保證了數(shù)據(jù)存儲(chǔ)的整體效果。從這一點(diǎn)來(lái)看,我們應(yīng)當(dāng)認(rèn)識(shí)到數(shù)據(jù)存儲(chǔ)的重要性以及存儲(chǔ)方式對(duì)數(shù)據(jù)倉(cāng)庫(kù)的重要影響,在數(shù)據(jù)倉(cāng)庫(kù)選擇時(shí)傾向于分布式存儲(chǔ)的選擇和設(shè)定。通過分布式存儲(chǔ)有效解決數(shù)據(jù)存儲(chǔ)過程當(dāng)中面臨的安全風(fēng)險(xiǎn)和威脅。因此,分布式存儲(chǔ)對(duì)于數(shù)據(jù)倉(cāng)庫(kù)的建立而言就有重要意義,應(yīng)當(dāng)在存儲(chǔ)方式選擇上予以有效傾斜。
3大數(shù)據(jù)時(shí)代數(shù)據(jù)倉(cāng)庫(kù)的關(guān)鍵技術(shù)分析
3.1節(jié)點(diǎn)優(yōu)化技術(shù)
大數(shù)據(jù)時(shí)代數(shù)據(jù)倉(cāng)庫(kù)的建立需要用到多種關(guān)鍵技術(shù),在實(shí)際的技術(shù)運(yùn)營(yíng)過程當(dāng)中,應(yīng)當(dāng)以數(shù)據(jù)倉(cāng)庫(kù)的需求為準(zhǔn),既要使關(guān)鍵技術(shù)能夠支撐數(shù)據(jù)倉(cāng)庫(kù)的建立和運(yùn)行,同時(shí)也要保證關(guān)鍵技術(shù)在穩(wěn)定性上能夠更好地滿足使用要求。其中在數(shù)據(jù)倉(cāng)庫(kù)建立中,節(jié)點(diǎn)優(yōu)化技術(shù)是重要的支撐技術(shù),在應(yīng)用當(dāng)中能夠?yàn)閿?shù)據(jù)倉(cāng)庫(kù)建立多個(gè)控制節(jié)點(diǎn)。通過控制節(jié)點(diǎn)的運(yùn)行,能夠?qū)ο鄳?yīng)的功能模塊進(jìn)行控制,起到提綱起領(lǐng)的作用。節(jié)點(diǎn)優(yōu)化技術(shù)不但能夠幫助數(shù)據(jù)倉(cāng)庫(kù)合理設(shè)定管控節(jié)點(diǎn),同時(shí)還能夠提高節(jié)點(diǎn)的管控效果。
通過節(jié)點(diǎn)優(yōu)化技術(shù),能夠保證數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)存儲(chǔ)模塊能夠在實(shí)際運(yùn)用當(dāng)中提高數(shù)據(jù)存儲(chǔ)的安全性和穩(wěn)定性,保證數(shù)據(jù)存儲(chǔ)的整體效果滿足實(shí)際要求,同時(shí)還能夠在數(shù)據(jù)運(yùn)用當(dāng)中,通過節(jié)點(diǎn)優(yōu)化技術(shù)提高數(shù)據(jù)調(diào)用效率,保證數(shù)據(jù)在調(diào)用中能夠符合使用要求。節(jié)點(diǎn)優(yōu)化技術(shù)是目前大數(shù)據(jù)技術(shù)中相對(duì)成熟的技術(shù)體系,在數(shù)據(jù)倉(cāng)庫(kù)的運(yùn)營(yíng)中能夠起到良好的節(jié)點(diǎn)優(yōu)化作用,對(duì)于數(shù)據(jù)倉(cāng)庫(kù)的建立和數(shù)據(jù)倉(cāng)庫(kù)功能的完善具有重要意義。
3.2數(shù)據(jù)分布技術(shù)
數(shù)據(jù)分布技術(shù)與數(shù)據(jù)的存儲(chǔ)有著直接的關(guān)系,通過數(shù)據(jù)分布技術(shù)能夠使同一類別的數(shù)據(jù)進(jìn)行有效的存儲(chǔ),并且分成多個(gè)存儲(chǔ)的模塊,既實(shí)現(xiàn)了數(shù)據(jù)的備份,同時(shí)又解決了數(shù)據(jù)在存儲(chǔ)過程當(dāng)中面臨的安全威脅。通過數(shù)據(jù)分布技術(shù),能夠建立分布式存儲(chǔ)的模塊和分布式存儲(chǔ)的數(shù)據(jù)單元,保證數(shù)據(jù)在存儲(chǔ)和調(diào)用過程當(dāng)中最大限度地維持?jǐn)?shù)據(jù)的原始性和安全性,利用數(shù)據(jù)分布技術(shù),也實(shí)現(xiàn)了數(shù)據(jù)防篡改,避免了數(shù)據(jù)在存儲(chǔ)和調(diào)用過程當(dāng)中發(fā)生惡意篡改的情況。
從當(dāng)前數(shù)據(jù)分布技術(shù)來(lái)看,數(shù)據(jù)分布技術(shù)的應(yīng)用對(duì)于數(shù)據(jù)倉(cāng)庫(kù)的建立有著直接的幫助,既解決了數(shù)據(jù)倉(cāng)庫(kù)建立過程當(dāng)中存在的數(shù)據(jù)存儲(chǔ)問題,同時(shí)也保證了數(shù)據(jù)存儲(chǔ)的安全l生和穩(wěn)定性,推動(dòng)了數(shù)據(jù)存儲(chǔ)方式的升級(jí)和迭代,對(duì)于數(shù)據(jù)分布而言具有重要作用。從這點(diǎn)來(lái)看,我們應(yīng)當(dāng)認(rèn)識(shí)到數(shù)據(jù)分布技術(shù)的優(yōu)勢(shì)以及數(shù)據(jù)分析技術(shù)在數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用當(dāng)中的優(yōu)勢(shì),做好數(shù)據(jù)分布技術(shù)的全面應(yīng)用。
3.3索引技術(shù)
數(shù)據(jù)倉(cāng)庫(kù)在建立中應(yīng)當(dāng)為數(shù)據(jù)的存儲(chǔ)和數(shù)據(jù)調(diào)用提供便捷的技術(shù)支持,其中索引技術(shù)是保證數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)模塊和數(shù)據(jù)存儲(chǔ)位置能夠清晰的關(guān)鍵技術(shù)。通過索引技術(shù)能夠?yàn)槊恳粋€(gè)數(shù)據(jù)單體和數(shù)據(jù)模塊提供準(zhǔn)確的位置信息,方便在存儲(chǔ)和調(diào)用過程當(dāng)中清楚數(shù)據(jù)的具體位置,能夠在應(yīng)用當(dāng)中提高數(shù)據(jù)的應(yīng)用效果。在當(dāng)前數(shù)據(jù)應(yīng)用當(dāng)中,索引技術(shù)是關(guān)鍵的支持技術(shù),能夠幫助數(shù)據(jù)倉(cāng)庫(kù)為每一個(gè)數(shù)據(jù)模塊和數(shù)據(jù)單體劃分存儲(chǔ)區(qū)域,并按照存儲(chǔ)位置對(duì)信息進(jìn)行存儲(chǔ)和調(diào)用。
從這一點(diǎn)來(lái)看,數(shù)據(jù)倉(cāng)庫(kù)對(duì)索引技術(shù)有較高的要求,既需要索引技術(shù)能夠指引清楚具體的數(shù)據(jù)存儲(chǔ)位置,同時(shí)也需要索引技術(shù)能夠?qū)?shù)據(jù)的存儲(chǔ)位置進(jìn)行標(biāo)記,保證數(shù)據(jù)的存儲(chǔ)滿足使用需要。結(jié)合當(dāng)前數(shù)據(jù)倉(cāng)庫(kù)的建立實(shí)際,索引技術(shù)已經(jīng)得到了有效的應(yīng)用,并且在應(yīng)用過程當(dāng)中取得了積極效果,對(duì)于數(shù)據(jù)倉(cāng)庫(kù)來(lái)建立和數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)存儲(chǔ)調(diào)用具有重要意義。因此,我們應(yīng)當(dāng)認(rèn)識(shí)到索引技術(shù)的重要性,在數(shù)據(jù)倉(cāng)庫(kù)建立過程當(dāng)中予以有效地應(yīng)用。
4大數(shù)據(jù)時(shí)代數(shù)據(jù)倉(cāng)庫(kù)的分布式存儲(chǔ)形式分析
目前來(lái)看,數(shù)據(jù)倉(cāng)庫(kù)的存儲(chǔ)形式分為集中存儲(chǔ)和分布式存儲(chǔ)。與集中存儲(chǔ)相比,分布式存儲(chǔ)的優(yōu)勢(shì)相對(duì)明顯,分布式存儲(chǔ)不但能夠解決數(shù)據(jù)的完整性和原始性問題,同時(shí)分布式存儲(chǔ)還能夠解決數(shù)據(jù)的防篡改問題,使數(shù)據(jù)的存儲(chǔ)優(yōu)勢(shì)進(jìn)一步擴(kuò)大,能夠滿足數(shù)據(jù)倉(cāng)庫(kù)的實(shí)際需要。同時(shí),分布式存儲(chǔ)也能夠?qū)崿F(xiàn)存儲(chǔ)基礎(chǔ)的升級(jí),對(duì)數(shù)據(jù)存儲(chǔ)的安全性、數(shù)據(jù)存儲(chǔ)的穩(wěn)定性具有重要影響。目前分布式存儲(chǔ)已經(jīng)應(yīng)用在了數(shù)據(jù)倉(cāng)庫(kù)中,成了數(shù)據(jù)存儲(chǔ)的重要形式,并且分布式存儲(chǔ)已經(jīng)從數(shù)據(jù)存儲(chǔ)的領(lǐng)域向其他的數(shù)據(jù)處理領(lǐng)域發(fā)展,對(duì)整個(gè)數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)有著重要影響。
大數(shù)據(jù)時(shí)代數(shù)據(jù)的存儲(chǔ)和數(shù)據(jù)的管理對(duì)于數(shù)據(jù)的安全性而言至關(guān)重要,數(shù)據(jù)要想實(shí)現(xiàn)防篡改,提高數(shù)據(jù)的原始性,就將應(yīng)用有效的存儲(chǔ)方式予以解決。其中,分布式存儲(chǔ)是重要的存儲(chǔ)方式,在實(shí)際應(yīng)用過程當(dāng)中解決了數(shù)據(jù)的原始性問題。通過分布式存儲(chǔ)也能夠增加數(shù)據(jù)備份的數(shù)量,使數(shù)據(jù)的存儲(chǔ)方式發(fā)生了變化,由傳統(tǒng)的整體數(shù)據(jù)存儲(chǔ)變成分散式存儲(chǔ),存儲(chǔ)效率更高,對(duì)于數(shù)據(jù)存儲(chǔ)的安全性和穩(wěn)定性而言具有較強(qiáng)的優(yōu)勢(shì)。
5大數(shù)據(jù)時(shí)代數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用存在的問題
5.1容量擴(kuò)容壓力增大
從目前數(shù)據(jù)存儲(chǔ)過程來(lái)看,數(shù)據(jù)在存儲(chǔ)中,數(shù)據(jù)的量會(huì)迅速增加。隨著數(shù)據(jù)倉(cāng)庫(kù)的持續(xù)應(yīng)用,數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)量呈幾何倍數(shù)增加,對(duì)數(shù)據(jù)倉(cāng)庫(kù)的容量提出了較高的要求,需要數(shù)據(jù)倉(cāng)庫(kù)在容量方面不斷地?cái)U(kuò)大,才能夠滿足數(shù)據(jù)存儲(chǔ)需要。這一現(xiàn)實(shí)的需求導(dǎo)致了數(shù)據(jù)倉(cāng)庫(kù)在建立過程中應(yīng)當(dāng)合理考慮倉(cāng)庫(kù)的擴(kuò)容問題,并且采用模塊化的方式進(jìn)行擴(kuò)容,才能夠降低倉(cāng)庫(kù)擴(kuò)容對(duì)數(shù)據(jù)存儲(chǔ)的影響。通過模塊化的擴(kuò)容,也能夠提高倉(cāng)庫(kù)的擴(kuò)容效率和擴(kuò)容效果,保證數(shù)據(jù)存儲(chǔ)不受影響。目前數(shù)據(jù)倉(cāng)庫(kù)的初始容量與原來(lái)相比發(fā)生了較大的變化,需要數(shù)據(jù)倉(cāng)庫(kù)在整體容量方面予以有效地增加。
5.2數(shù)據(jù)倉(cāng)庫(kù)能力有限
數(shù)據(jù)倉(cāng)庫(kù)的容量即使進(jìn)行擴(kuò)大和增加,但是在數(shù)據(jù)倉(cāng)庫(kù)的整體存儲(chǔ)能力方面也是有一定限制的。數(shù)據(jù)倉(cāng)庫(kù)的存儲(chǔ)能力不可能無(wú)限制增加,因?yàn)閿?shù)據(jù)倉(cāng)庫(kù)不但需要對(duì)數(shù)據(jù)進(jìn)行存儲(chǔ)和管理,同時(shí)還需要完成數(shù)據(jù)調(diào)用。數(shù)據(jù)倉(cāng)庫(kù)的規(guī)模越大,數(shù)據(jù)的調(diào)用速度越慢,即使采用關(guān)鍵技術(shù)支撐,數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)管理能力也是有限的。因此,數(shù)據(jù)倉(cāng)庫(kù)在建立過程當(dāng)中,應(yīng)當(dāng)對(duì)數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)保管能力、數(shù)據(jù)調(diào)用能力和數(shù)據(jù)的未來(lái)發(fā)展規(guī)模和發(fā)展瓶頸有正確認(rèn)識(shí),避免數(shù)據(jù)倉(cāng)庫(kù)無(wú)限制擴(kuò)張,給數(shù)據(jù)的保管和調(diào)用帶來(lái)不利影響。因此,掌握數(shù)據(jù)倉(cāng)庫(kù)的發(fā)展瓶頸,了解數(shù)據(jù)倉(cāng)庫(kù)的存儲(chǔ)限制,對(duì)于數(shù)據(jù)倉(cāng)庫(kù)的建立而言至關(guān)重要。
6結(jié)論
通過本文的分析可知,大數(shù)據(jù)時(shí)代下的數(shù)據(jù)倉(cāng)庫(kù)建立既是必然趨勢(shì),同時(shí)也是大數(shù)據(jù)技術(shù)發(fā)展到特定階段的必然選擇。為了保證數(shù)據(jù)倉(cāng)庫(kù)的建立和運(yùn)用當(dāng)中能夠滿足實(shí)際需要,應(yīng)當(dāng)保證數(shù)據(jù)倉(cāng)庫(kù)的應(yīng)用技術(shù)達(dá)標(biāo),既要提高數(shù)據(jù)倉(cāng)庫(kù)的先進(jìn)性,同時(shí)也要運(yùn)用成熟的數(shù)據(jù)存儲(chǔ)技術(shù)實(shí)現(xiàn)數(shù)據(jù)的有效存儲(chǔ)和調(diào)用,保證數(shù)據(jù)在存儲(chǔ)過程當(dāng)中能夠滿足使用需要,最大限度地提高數(shù)據(jù)的安全性和穩(wěn)定性,使整個(gè)數(shù)據(jù)倉(cāng)庫(kù)在建立和運(yùn)行當(dāng)中能夠達(dá)到使用要求。