劉洋
摘? ?要:現(xiàn)如今,在計(jì)算機(jī)技術(shù)迅猛發(fā)展的背景下,數(shù)據(jù)的運(yùn)輸和處理數(shù)量也持續(xù)增多,其重要性日益凸顯出來。而計(jì)算機(jī)大數(shù)據(jù)分析技術(shù)在運(yùn)算處理數(shù)據(jù)方面有著顯著的優(yōu)勢(shì),例如數(shù)據(jù)的可視化分析、數(shù)據(jù)的挖掘算法、語氣引擎、數(shù)據(jù)的預(yù)測(cè)性分析以及數(shù)據(jù)質(zhì)量管理方面。云計(jì)算網(wǎng)絡(luò)技術(shù)主要包括虛擬化技術(shù)、分布式計(jì)算以及分部署存儲(chǔ)技術(shù)、多租戶等方面。基于現(xiàn)代社會(huì)背景,可用且優(yōu)秀的數(shù)據(jù)處理技術(shù)至少要有著強(qiáng)勁的數(shù)據(jù)運(yùn)算能力和安全加密技術(shù)。因此,文章主要針對(duì)計(jì)算機(jī)大數(shù)據(jù)分析和云計(jì)算網(wǎng)絡(luò)技術(shù)做了詳細(xì)探討,希望能為未來計(jì)算機(jī)的發(fā)展提供有效的借鑒經(jīng)驗(yàn)。
關(guān)鍵詞:計(jì)算機(jī)大數(shù)據(jù)分析;云計(jì)算技術(shù);數(shù)據(jù)處理;計(jì)算機(jī)技術(shù)
隨著信息化時(shí)代逐漸發(fā)展成熟,互聯(lián)網(wǎng)技術(shù)已經(jīng)深入應(yīng)用到了人們生活、工作的方方面面中。同時(shí),人們對(duì)數(shù)據(jù)運(yùn)算和儲(chǔ)存的需求越來越高,傳統(tǒng)的計(jì)算機(jī)計(jì)算能力已經(jīng)難以滿足其需求,這使得相關(guān)成本的投入也增多。云計(jì)算的出現(xiàn)極大改善了以上問題,且云計(jì)算理念被廣泛應(yīng)用到了各行各業(yè)中,并成了相關(guān)學(xué)者研究的熱點(diǎn)課題,這也是文章研究的理論意義。
1? ? 當(dāng)前云計(jì)算和大數(shù)據(jù)主要概況探究
1.1? 大數(shù)據(jù)與云計(jì)算的定義
大數(shù)據(jù)具體指,常規(guī)軟件及工作難以在規(guī)定時(shí)間內(nèi)對(duì)海量數(shù)據(jù)進(jìn)行收集、處理和整理時(shí),則需要依托全新的處理方法才能實(shí)現(xiàn)更強(qiáng)的決策力、洞察力、高增長(zhǎng)率以及多樣化的信息資產(chǎn)。
云計(jì)算技術(shù)是各類傳統(tǒng)計(jì)算機(jī)和網(wǎng)絡(luò)技術(shù)融合且不斷發(fā)展產(chǎn)生的技術(shù),其有機(jī)結(jié)合了分布式運(yùn)算、效用計(jì)算、并行計(jì)算技術(shù)、虛擬化技術(shù)、網(wǎng)絡(luò)儲(chǔ)存技術(shù)以及熱備份冗余等多元化技術(shù)[1]。
1.2? 云計(jì)算與大數(shù)據(jù)分析關(guān)系研究
云計(jì)算技術(shù)的出現(xiàn)有效改善了數(shù)據(jù)的計(jì)算方式,借助互聯(lián)網(wǎng)就可以為個(gè)人或者企業(yè)用戶提供更易擴(kuò)展和動(dòng)態(tài)性的虛擬化數(shù)據(jù)資源。在這種按需付費(fèi)的模式下,網(wǎng)民則可以根據(jù)自己的實(shí)際需求搜索相關(guān)資源,并對(duì)互聯(lián)網(wǎng)開展便捷、有針對(duì)性的訪問,這極大提高了網(wǎng)絡(luò)資源利用效率。數(shù)據(jù)分析是大數(shù)據(jù)處理過程中重要的組成部分,是基于大數(shù)據(jù)對(duì)海量數(shù)據(jù)進(jìn)行獲取,并采取一定的方法快速整合和深度處理數(shù)據(jù)的過程,在此過程中極大體現(xiàn)出了數(shù)據(jù)的價(jià)值[2]。云計(jì)算作為大數(shù)據(jù)分析的重要支撐平臺(tái),能為大數(shù)據(jù)的分析提供更快速、靈活多樣的部署方案,從而大大提高大數(shù)據(jù)分析結(jié)果精確度,也為大數(shù)據(jù)分析提供了更具經(jīng)濟(jì)性、更強(qiáng)擴(kuò)展性的計(jì)算存儲(chǔ)資源。簡(jiǎn)單來講,大數(shù)據(jù)技術(shù)屬于云計(jì)算的拓展和延伸,該技術(shù)在數(shù)據(jù)的采集、整理、儲(chǔ)存和應(yīng)用過程都離不開大量技術(shù)的應(yīng)用。隨著海量數(shù)據(jù)變化速度越來越快,互聯(lián)網(wǎng)內(nèi)信息資源和數(shù)量也日益龐雜,大數(shù)據(jù)分析若要朝著云計(jì)算方面發(fā)展,仍需要不斷加強(qiáng)云資源建設(shè),從而提高數(shù)據(jù)通信寬帶。
云計(jì)算網(wǎng)絡(luò)技術(shù)下的大數(shù)據(jù)分析有著非常獨(dú)特的優(yōu)勢(shì):(1)在云計(jì)算虛擬環(huán)境下,融合不同網(wǎng)絡(luò)用戶業(yè)務(wù)需求,實(shí)現(xiàn)大數(shù)據(jù)信息的延伸性和拓展性,以此優(yōu)化網(wǎng)絡(luò)資源配置。(2)提高數(shù)據(jù)分析的細(xì)化力度,深入挖掘數(shù)據(jù)價(jià)值?;谠朴?jì)算的大數(shù)據(jù)分析還能全面提高計(jì)算機(jī)軟硬件利用效率,以此降低數(shù)據(jù)分析成本[3]。這均是大數(shù)據(jù)分析與云計(jì)算相互融合應(yīng)用的優(yōu)勢(shì)所在,其最終目的是為用戶提供更好、性價(jià)比更高的數(shù)據(jù)分析服務(wù)。
1.3? 增強(qiáng)數(shù)據(jù)處理能力的必要性
首先,提高數(shù)據(jù)處理能力水平,對(duì)全面、客觀反映實(shí)際情況,實(shí)現(xiàn)數(shù)據(jù)處理的實(shí)事求是,為后續(xù)利用數(shù)據(jù)資源做決策或者編寫相關(guān)報(bào)告奠定了堅(jiān)實(shí)、正確的基礎(chǔ)。其次,增強(qiáng)數(shù)據(jù)處理能力,從多方面深入挖掘數(shù)據(jù)資料價(jià)值。相關(guān)數(shù)據(jù)分析人員采取抽查、普查、執(zhí)行、調(diào)查等方式整合各類數(shù)據(jù)信息,并進(jìn)行加工整理,從而實(shí)現(xiàn)數(shù)據(jù)資源的深層次、多方向開發(fā)利用。最后,增強(qiáng)數(shù)據(jù)處理能力,對(duì)推動(dòng)數(shù)據(jù)統(tǒng)計(jì)與決策的有機(jī)融合,對(duì)數(shù)據(jù)實(shí)時(shí)、整體、科學(xué)管理有著積極作用。相關(guān)數(shù)據(jù)分析部門通過分析和研究充足的數(shù)據(jù)資料,并深入到數(shù)據(jù)內(nèi)在本質(zhì)進(jìn)行探查,實(shí)現(xiàn)了數(shù)據(jù)感性認(rèn)知上升至理性認(rèn)知的質(zhì)的變化。
2? ? 大數(shù)據(jù)基本處理流程分析
傳統(tǒng)數(shù)據(jù)處理手段已經(jīng)無法應(yīng)對(duì)海量數(shù)據(jù)處理需求,而海量數(shù)據(jù)要想實(shí)現(xiàn)短時(shí)間獲取、整理及分析,就需要借助先進(jìn)的信息處理技術(shù)。大數(shù)據(jù)技術(shù)則是對(duì)傳統(tǒng)數(shù)據(jù)處理技術(shù)進(jìn)一步創(chuàng)新和升級(jí),再加上云計(jì)算理念的融入,構(gòu)建起云計(jì)算技術(shù)平臺(tái),為大數(shù)據(jù)處理提供科學(xué)、系統(tǒng)的技術(shù)服務(wù)平臺(tái),互聯(lián)網(wǎng)數(shù)據(jù)資料的處理方法與流程得到了極大優(yōu)化。
大數(shù)據(jù)處理流程一般分為4個(gè)主要階段,即數(shù)據(jù)的采集、數(shù)據(jù)的處理、數(shù)據(jù)分析以及數(shù)據(jù)解釋。簡(jiǎn)單來講,大數(shù)據(jù)處理流程主要是在互聯(lián)網(wǎng)中全面采集各類有用、優(yōu)質(zhì)的數(shù)據(jù)資源,之后實(shí)現(xiàn)資源的預(yù)處理,為后續(xù)數(shù)據(jù)分析與計(jì)算提供統(tǒng)一、可靠的數(shù)據(jù)格式,奠定了充實(shí)的資源基礎(chǔ)。最后將數(shù)據(jù)按照既定算法進(jìn)行計(jì)算分析后,利用可視化手段將分析完成的數(shù)據(jù)結(jié)果傳遞到用戶端,從而解釋數(shù)據(jù)的基本作用[4]。
(1)數(shù)據(jù)采集階段:如今的互聯(lián)網(wǎng)有著龐大、復(fù)雜的數(shù)據(jù)資源,數(shù)據(jù)生產(chǎn)的環(huán)節(jié)也日漸增多,這極大提高了數(shù)據(jù)產(chǎn)出效率,數(shù)據(jù)與數(shù)據(jù)之間的關(guān)聯(lián)越加復(fù)雜。在這種背景下,要求數(shù)據(jù)的采集應(yīng)更快、更加精準(zhǔn),以此適應(yīng)大數(shù)據(jù)技術(shù)的不斷發(fā)展。因此,只有不斷升級(jí)和優(yōu)化傳統(tǒng)數(shù)據(jù)整合處理技術(shù),才能在最短時(shí)間內(nèi)實(shí)現(xiàn)海量復(fù)雜數(shù)據(jù)的最快、最有效處理,從而更好地服務(wù)于用戶。
(2)數(shù)據(jù)處理與集成階段:主要是對(duì)數(shù)據(jù)采集階段獲得的各類數(shù)據(jù)進(jìn)行格式化、去燥等預(yù)處理,從而實(shí)現(xiàn)統(tǒng)一的數(shù)據(jù)結(jié)構(gòu)。數(shù)據(jù)預(yù)處理階段所涉及的數(shù)據(jù)類型相對(duì)復(fù)雜,同時(shí),還有很多無效數(shù)據(jù)需要剔除整理,將其轉(zhuǎn)為統(tǒng)一的數(shù)據(jù)格式才能更便捷地進(jìn)行應(yīng)用,最常見的數(shù)據(jù)處理方法為設(shè)計(jì)過濾器等方式。
(3)數(shù)據(jù)分析階段:針對(duì)完成采集且預(yù)處理的數(shù)據(jù)進(jìn)行進(jìn)一步分析,并根據(jù)數(shù)據(jù)價(jià)值功能方向和具體應(yīng)用需求,采用數(shù)據(jù)挖掘工具、數(shù)據(jù)倉庫工具對(duì)數(shù)據(jù)進(jìn)行集中處理和分析。目前在數(shù)據(jù)分析過程中,已經(jīng)有很多大數(shù)據(jù)分析服務(wù)商為其提供了專業(yè)的支撐產(chǎn)品和專業(yè)的服務(wù)軟件,這對(duì)提高數(shù)據(jù)分析效率、加強(qiáng)數(shù)據(jù)的全面深度分析等有著極大的幫助。
(4)數(shù)據(jù)解釋:是對(duì)數(shù)據(jù)分析結(jié)構(gòu)進(jìn)行進(jìn)一步展示,在數(shù)據(jù)信息量不斷增多的背景下,傳統(tǒng)數(shù)據(jù)展示模式難以滿足數(shù)據(jù)分析結(jié)果輸出需求,而數(shù)據(jù)可視化技術(shù)的應(yīng)用則為數(shù)據(jù)的解釋與直觀展示提供了基礎(chǔ)技術(shù)支撐。通過應(yīng)用數(shù)據(jù)可視化技術(shù),能將數(shù)據(jù)的價(jià)值和數(shù)據(jù)分析結(jié)果全面、形象地展示給用戶,對(duì)提高用戶數(shù)據(jù)應(yīng)用效率和數(shù)據(jù)深度利用價(jià)值有一定作用[5]。
3? ? 大數(shù)據(jù)自身優(yōu)點(diǎn)與弊端分析
3.1? 優(yōu)勢(shì)
大數(shù)據(jù)分析相對(duì)突出的一點(diǎn)優(yōu)勢(shì)為能實(shí)現(xiàn)數(shù)據(jù)資料的可視化分析,并直觀、清晰地展示數(shù)據(jù)某個(gè)特點(diǎn)及分析結(jié)果。大數(shù)據(jù)分析的核心理念為數(shù)據(jù)挖掘算法,而算法內(nèi)容又呈現(xiàn)出多元化的類型及格式,可視化分析功能就是針對(duì)數(shù)據(jù)本身的特點(diǎn)進(jìn)行有效突出,為數(shù)據(jù)分析人員有針對(duì)性地挖掘數(shù)據(jù)內(nèi)部高價(jià)值資料提供了便捷途徑。此外,大數(shù)據(jù)分析還包含大量應(yīng)用領(lǐng)域,其中最突出的則為預(yù)測(cè)性分析部分。預(yù)測(cè)性分析技術(shù)通過融合建模技術(shù),在大數(shù)據(jù)模型上融入新的數(shù)據(jù),從而實(shí)現(xiàn)未來數(shù)據(jù)的準(zhǔn)確預(yù)測(cè)。
3.2? 弊端
大數(shù)據(jù)分析所具備的較大發(fā)展空間與潛力也促使著更多的隱私派人員加大對(duì)數(shù)據(jù)的收集力度,數(shù)據(jù)因此在社交媒體中廣為流傳。這種背景下,人們的隱私資料常常會(huì)遭到泄露。此外,數(shù)據(jù)的海量集合在進(jìn)行預(yù)測(cè)時(shí)也常常會(huì)產(chǎn)生一些虛假信息,這影響著既定決策的準(zhǔn)確性。大數(shù)據(jù)分析中一些惡意信息甚至?xí)?dǎo)致重大事件未來走向偏離正確軌道,從而引發(fā)一系列不可避免的惡性事件,甚至造成巨大的經(jīng)濟(jì)損失與人身傷害??傊?,大數(shù)據(jù)對(duì)每個(gè)人來說都是一把雙刃劍,它在起到優(yōu)勢(shì)作用的同時(shí),也不可避免地伴隨著一些弊端,因此,需要認(rèn)清大數(shù)據(jù)分析的全面特點(diǎn)[6]。
4? ? 云計(jì)算網(wǎng)絡(luò)技術(shù)的優(yōu)勢(shì)與缺陷
4.1? 云計(jì)算網(wǎng)絡(luò)優(yōu)勢(shì)
云計(jì)算網(wǎng)絡(luò)技術(shù)有著較為突出的4點(diǎn)優(yōu)勢(shì):降低計(jì)算機(jī)成本、改進(jìn)性能、幾乎無限的存儲(chǔ)容量和數(shù)據(jù)安全性。具體分析如下:
(1)降低計(jì)算機(jī)成本,云計(jì)算網(wǎng)絡(luò)技術(shù)不需要依托傳統(tǒng)軟件的硬盤工具及處理能力,其應(yīng)用均能在云端實(shí)現(xiàn)并運(yùn)行,這極大節(jié)約了計(jì)算機(jī)成本。
(2)改進(jìn)的性能,計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)有著進(jìn)程和程序相對(duì)較少的特點(diǎn),因此,在云計(jì)算系統(tǒng)中,能使得計(jì)算機(jī)運(yùn)行更加快捷高效,極大改進(jìn)了云計(jì)算網(wǎng)絡(luò)應(yīng)用性能。
(3)幾乎無限的數(shù)據(jù)儲(chǔ)存容量。
(4)數(shù)據(jù)儲(chǔ)存的較大安全性,儲(chǔ)存在云端中的數(shù)據(jù)避免了外界因素破壞導(dǎo)致數(shù)據(jù)丟失的問題。
4.2? 云計(jì)算網(wǎng)絡(luò)的主要缺陷
(1)云計(jì)算網(wǎng)絡(luò)無法有效保障用戶數(shù)據(jù)安全性。例如,企業(yè)組織和單位在公共云上儲(chǔ)存數(shù)據(jù)或主機(jī)應(yīng)用程序時(shí),就會(huì)失去訪問承載信息服務(wù)器的能力,使得一些未授權(quán)的用戶也能采取其他手段訪問數(shù)據(jù),數(shù)據(jù)安全性較低[7]。
(2)云計(jì)算網(wǎng)絡(luò)虛擬化存在潛在的安全問題。
5? ? 結(jié)語
在計(jì)算機(jī)技術(shù)與云技術(shù)飛速發(fā)展的背景下,人們之間的交流越來越方便快捷。然而在交流中會(huì)涉及大量的數(shù)據(jù),甚至?xí)鬏敐B透到世界各個(gè)階層與領(lǐng)域,這極大改變了人們的生活、娛樂和工作方式。因此,深入探討大數(shù)據(jù)分析與云計(jì)算網(wǎng)絡(luò)的發(fā)展情況對(duì)整個(gè)信息領(lǐng)域有著一定的現(xiàn)實(shí)意義。
[參考文獻(xiàn)]
[1]楊佳.基于云計(jì)算的電力大數(shù)據(jù)分析技術(shù)與應(yīng)用[J].信息與電腦(理論版),2019(8):30-31.
[2]徐敏,楊三美.基于云計(jì)算的電力大數(shù)據(jù)分析技術(shù)與應(yīng)用[J].計(jì)算機(jī)產(chǎn)品與流通,2019(11):70.
[3]任明.計(jì)算機(jī)大數(shù)據(jù)分析與云計(jì)算網(wǎng)絡(luò)技術(shù)[J].數(shù)字通信世界,2019(10):52.
[4]羅陽倩子,廖威.芻議計(jì)算機(jī)大數(shù)據(jù)分析與云計(jì)算網(wǎng)絡(luò)技術(shù)[J].數(shù)字技術(shù)與應(yīng)用,2019(9):223-224.
[5]李震.計(jì)算機(jī)大數(shù)據(jù)分析與云計(jì)算網(wǎng)絡(luò)技術(shù)研究[J].科技創(chuàng)新與應(yīng)用,2020(2):150-151.
[6]黃蕾,陶銳.基于云計(jì)算的電力大數(shù)據(jù)分析技術(shù)與應(yīng)用[J].數(shù)字技術(shù)與應(yīng)用,2017(2):117.
[7]戴平.基于大數(shù)據(jù)及云計(jì)算技術(shù)的污水分析管控平臺(tái)的研究與設(shè)計(jì)[J].長(zhǎng)春大學(xué)學(xué)報(bào),2018(8):10-14.
Analysis of big data and cloud computing technology based on computer
Liu Yang
(CNOOC Information Technology Co., Ltd., Tianjin Branch, Tianjin 300452, China)
Abstract:Nowadays, with the rapid development of computer technology, the quantity of data transportation and processing is increasing, and its importance is becoming more and more prominent. And computer big data analysis technology has significant advantages in computing and processing data, such as visual analysis of data, data mining algorithm, tone engine, predictive analysis of data and data quality management. Cloud computing network technology mainly includes virtualization technology, distributed computing and divisional deployment storage technology, multi-tenant and so on. Based on the background of modern society, the available and excellent data processing technology must have at least strong data computing ability and safe addition secret technology. Therefore, the article mainly aimed at computer big data analysis and cloud computing network technology to do a detailed discussion, hoping to provide an effective reference experience for the future development of computers.
Key words:computer big data analysis; cloud computing technology; data processing; computer technology