文/張黎平
在大數(shù)據(jù)時(shí)代中,社會(huì)生產(chǎn)、生活的各個(gè)方面都在不斷產(chǎn)出海量數(shù)據(jù),這些數(shù)據(jù)中蘊(yùn)含著行業(yè)、市場(chǎng)、客戶需求等與企業(yè)市場(chǎng)營(yíng)銷關(guān)聯(lián)性十分高的信息,可以說(shuō),大數(shù)據(jù)技術(shù)已經(jīng)與企業(yè)精準(zhǔn)營(yíng)銷形成了緊密聯(lián)系,能夠有效挖掘數(shù)據(jù)的企業(yè)才能夠掌握更大的營(yíng)銷主動(dòng)性、獲取更大的經(jīng)濟(jì)效益。大數(shù)據(jù)技術(shù)的應(yīng)用幫助企業(yè)進(jìn)一步挖掘客戶的需求、市場(chǎng)的行情變動(dòng),制定更加合理、科學(xué)、有效的營(yíng)銷戰(zhàn)略。
大數(shù)據(jù)是指無(wú)法用常規(guī)軟件工具進(jìn)行捕捉、處理、利用的一定時(shí)間段內(nèi)產(chǎn)生的海量數(shù)據(jù),是需要新處理技術(shù)、模式才能進(jìn)行處理和利用的數(shù)據(jù)集合,能夠有效輔助企業(yè)管理層作出具有更強(qiáng)實(shí)踐性的決策力,有效彌補(bǔ)管理層在發(fā)現(xiàn)力、洞察力上的缺失,為企業(yè)生產(chǎn)經(jīng)營(yíng)流程、組織架構(gòu)、市場(chǎng)定位的優(yōu)化提供海量、高價(jià)值的信息。
MPP大規(guī)模并行處理系統(tǒng)是一種由多個(gè)SMP對(duì)稱多處理系統(tǒng)服務(wù)器組成的數(shù)據(jù)處理系統(tǒng),SMP服務(wù)器之間通過(guò)一定的節(jié)點(diǎn)進(jìn)行連接,這些SMP服務(wù)器協(xié)同工作,共同完成數(shù)據(jù)處理、利用任務(wù)。在執(zhí)行任務(wù)過(guò)程中,SMP服務(wù)器只訪問(wèn)本地資源,而SMP服務(wù)器之間的信息交互則通過(guò)互聯(lián)網(wǎng)完成。隨著科學(xué)技術(shù)的不斷發(fā)展,MPP大規(guī)模并行處理系統(tǒng)能夠連接的SMP服務(wù)器數(shù)量越來(lái)越多,目前最多可實(shí)現(xiàn)512個(gè)節(jié)點(diǎn)的連接。MPP大規(guī)模并行處理系統(tǒng)具有結(jié)構(gòu)化、節(jié)點(diǎn)獨(dú)立存儲(chǔ)、數(shù)據(jù)分布式劃分等優(yōu)勢(shì),是大數(shù)據(jù)挖掘過(guò)程中常見的處理系統(tǒng)。
Hadoop是一個(gè)開源分布式存儲(chǔ)和計(jì)算系統(tǒng),其核心部分是HDFS分布式文件系統(tǒng)和Map/Reduce計(jì)算框架,其中HDFS分布式文件系統(tǒng)具有較高的容錯(cuò)性,可以對(duì)系統(tǒng)的數(shù)據(jù)輸入、計(jì)算、輸出全過(guò)程的存儲(chǔ)和記錄,可以說(shuō),HDFS負(fù)責(zé)整個(gè)Map/Reduce計(jì)算框架的調(diào)度和監(jiān)控,負(fù)責(zé)對(duì)處理失敗任務(wù)進(jìn)行重新執(zhí)行,負(fù)責(zé)對(duì)處理完畢的任務(wù)進(jìn)行輸出;Map/Reduce計(jì)算框架則可以將輸入的數(shù)據(jù)集切分為若干獨(dú)立的數(shù)據(jù)塊,對(duì)Map的輸出進(jìn)行排序,以完全并行的方式進(jìn)行計(jì)算、處理和利用,把經(jīng)過(guò)計(jì)算的結(jié)果輸入至Reduce。
ΕTL,Εxtract-Transform-Load是 指 將數(shù)據(jù)的處理過(guò)程,其中經(jīng)過(guò)了Εxtract、Transform、Load三個(gè)環(huán)節(jié),也被稱為大數(shù)據(jù)分析技術(shù)中最基礎(chǔ)的一種形式。ΕTL技術(shù)具有自動(dòng)糾錯(cuò)、數(shù)據(jù)可信度評(píng)估、保護(hù)數(shù)據(jù)、整合源數(shù)據(jù)、數(shù)據(jù)結(jié)構(gòu)化等優(yōu)勢(shì),是大數(shù)據(jù)技術(shù)中十分重要的技術(shù)之一。
公共交通是一個(gè)城市交通的基礎(chǔ),其發(fā)達(dá)、便利程度也為一個(gè)城市交通順暢程度提供了卓越貢獻(xiàn),提升公共交通系統(tǒng)的建設(shè)程度,給市民提供更加便捷的公共交通出行輔助,都需要大數(shù)據(jù)技術(shù)來(lái)幫忙。目前,移動(dòng)通信設(shè)備基本具備精準(zhǔn)的GPS定位和暢通的無(wú)線傳輸網(wǎng)絡(luò),基礎(chǔ)運(yùn)營(yíng)商與公共交通管理部門共同開發(fā)的APP可以為出行人員提供最近的公交車、地鐵站位置,車輛到達(dá)時(shí)間,提供抵達(dá)目的地的便捷路線,提供支付共享單車、預(yù)約出租車的調(diào)度和管理服務(wù),為市民出行提供最大的便利,并且有效提高公共交通資源利用效率;為出租車司機(jī)提供路面交通“實(shí)時(shí)路況”,提供行駛抵達(dá)目的地最近、最順暢的路線數(shù)據(jù)。公共交通的精準(zhǔn)營(yíng)銷在于利用大數(shù)據(jù)匯集和處理路況信息,為出行人員提供便利,提升公共交通的服務(wù)質(zhì)量,為城市公共交通營(yíng)造更大的發(fā)展空間。
改革開放帶來(lái)的發(fā)展紅利已經(jīng)或多或少體現(xiàn)在國(guó)民儲(chǔ)蓄量層面上,很多人民手有余錢卻沒(méi)有合適的投資方向,要么一頭扎進(jìn)股市,要么一股腦投進(jìn)房地產(chǎn),但并未考慮過(guò)這些投資方式是否適合自己的實(shí)際情況,導(dǎo)致很多散戶投資人的投資和收益不成比例,形成資產(chǎn)損失。國(guó)有銀行、商業(yè)銀行可以充分利用已有客戶數(shù)據(jù),聯(lián)合基礎(chǔ)運(yùn)營(yíng)商對(duì)用戶數(shù)據(jù)進(jìn)行分析匯總,從中提取有潛力的用戶進(jìn)行銀行金融理財(cái)產(chǎn)品、信用卡優(yōu)惠、貸款服務(wù)的營(yíng)銷推廣工作。
在成人教育、繼續(xù)教育、自考教育在當(dāng)下教育領(lǐng)域中的比重越來(lái)越大,每年參與各種教育考試的人數(shù)都在不斷上漲,市場(chǎng)中有關(guān)教育方面的企業(yè)、APP數(shù)量越來(lái)越多,采用的方式主要是云端電子課件。這是一種以大數(shù)據(jù)技術(shù)為基礎(chǔ)的教學(xué)工具,為學(xué)生提供聽課、隨堂考、課后作業(yè)、錯(cuò)題積累、預(yù)估分?jǐn)?shù)、模擬考試等多種學(xué)習(xí)模式的支持,充分針對(duì)學(xué)生的考試計(jì)劃、教育資源、教學(xué)需求進(jìn)行資源的分配,有效提升了教育資源的利用率,有效提升學(xué)生的學(xué)習(xí)效率和質(zhì)量,受到學(xué)生的廣泛好評(píng)。
隨著大數(shù)據(jù)技術(shù)的不斷發(fā)展,其應(yīng)用范圍不斷擴(kuò)大,逐漸在社會(huì)生產(chǎn)、生活等領(lǐng)域的轉(zhuǎn)型、優(yōu)化中占據(jù)重要地位。目前,政府、行政事業(yè)單位、企業(yè)、教育界正在積極通過(guò)大數(shù)據(jù)技術(shù)挖掘營(yíng)銷數(shù)據(jù),致力于形成有效的信息資產(chǎn),幫助管理層制定更加科學(xué)、合理的戰(zhàn)略發(fā)展方案,提升營(yíng)銷方案準(zhǔn)確性,提高經(jīng)濟(jì)效益。大數(shù)據(jù)技術(shù)的發(fā)展逐漸打破了行業(yè)之間的傳統(tǒng)壁壘,實(shí)現(xiàn)了多方合作共贏,提升了經(jīng)濟(jì)生態(tài)圈的質(zhì)量,也使大數(shù)據(jù)技術(shù)在市場(chǎng)營(yíng)銷中的重要性再上一層樓。