楊光
第十一屆開源中國開源世界高峰論壇近日在京舉辦。論壇有力促進開源社區(qū)、企業(yè)、院校、科研機構(gòu)、用戶之間的相互交流與合作,推動開源軟件在中國及全球的發(fā)展。聯(lián)想創(chuàng)投集團大數(shù)據(jù)業(yè)務(wù)在此次高峰論壇上展示了聯(lián)想大數(shù)據(jù)平臺如何協(xié)助企業(yè)應(yīng)對全球化挑戰(zhàn)和復(fù)雜的開源技術(shù),探索出一條制造企業(yè)全球大數(shù)據(jù)方案之路,并運用開源大數(shù)據(jù)技術(shù)助力全球智能制造。聯(lián)想集團副總裁、首席研究員田日輝受邀參加開源高峰論壇圓桌會議,聯(lián)想大數(shù)據(jù)業(yè)務(wù)高級總監(jiān)、首席研究員于辰濤在論壇上發(fā)表了主題演講“開源大數(shù)據(jù)技術(shù)助力全球智能制造”。
推動聯(lián)想的大數(shù)據(jù)轉(zhuǎn)型
聯(lián)想在2011年8月啟動聯(lián)想企業(yè)級大數(shù)據(jù)分析平臺(Lenovo Enterprise Analytics Platform,簡稱LEAP)的建設(shè),5年時間內(nèi)基于開源技術(shù)推動聯(lián)想的大數(shù)據(jù)轉(zhuǎn)型,持續(xù)投入了300多名研發(fā)人員,并且在全球范圍內(nèi)部署超大規(guī)模集群,經(jīng)過多年錘煉,現(xiàn)在已完全具備海量數(shù)據(jù)分析與持續(xù)性業(yè)務(wù)支撐的能力。
5年來聯(lián)想大數(shù)據(jù)深度整合聯(lián)想內(nèi)部數(shù)千個來源和上萬個不同類型的數(shù)據(jù),包括消費者數(shù)據(jù)、零售商數(shù)據(jù)、運營和分銷數(shù)據(jù)。
此外,聯(lián)想大數(shù)據(jù)平臺致力于推動大數(shù)據(jù)作為工具,推動聯(lián)想以用戶為中心提升整體業(yè)務(wù)效率。大數(shù)據(jù)技術(shù)幫助聯(lián)想集團移動業(yè)務(wù)在發(fā)展中國家實現(xiàn)了快速擴張,僅一年時間從默默無聞進而成長為印度第三大移動設(shè)備供應(yīng)商,而且打入了東南亞,非洲和拉美多個區(qū)域市場。
全球化大數(shù)據(jù)方案部署
聯(lián)想大數(shù)據(jù)平臺在全球多個國家與城市擁有中心部署,如德國、美國、以及中國的北京和香港等地,擁有12PB的總?cè)萘?。?lián)想大數(shù)據(jù)不僅具備支撐全球化業(yè)務(wù)同步運營的豐富實戰(zhàn)經(jīng)驗,而且大數(shù)據(jù)運營體系完全合規(guī)各國數(shù)據(jù)保護和隱私保護法律。
不僅如此,聯(lián)想大數(shù)據(jù)平臺積極進行全球深度設(shè)備優(yōu)化,支持全球1.5億設(shè)備,包括產(chǎn)品退化、軟件開發(fā)、質(zhì)量保證等方面都得到深度優(yōu)化,進而提升設(shè)備滿意度。同時,聯(lián)想大數(shù)據(jù)平臺改善全球服務(wù)效率,并縮減成本,提升服務(wù)滿意度。包括聯(lián)想呼叫中心的優(yōu)化和偽造維修單據(jù)識別,譬如可節(jié)約單個用戶客訴20%的呼叫時間或智能化預(yù)測用戶投訴問題,分析維修站的備件計劃和準(zhǔn)確識別偽造維修單據(jù),為聯(lián)想每年在發(fā)展中國家的維修系統(tǒng)節(jié)約了數(shù)百萬至上千萬美元,并且提升了客服效率和用戶滿意度。
基于開源技術(shù)的實戰(zhàn)
聯(lián)想大數(shù)據(jù)平臺基于開源技術(shù)探索了一條制造企業(yè)全球大數(shù)據(jù)方案之路,大數(shù)據(jù)技術(shù)幫助聯(lián)想各個業(yè)務(wù)價值鏈條帶來數(shù)千萬美金的成本節(jié)約,譬如設(shè)備分析方面進行了設(shè)備激活,用戶行為跟蹤,系統(tǒng)優(yōu)化和設(shè)備畫像;在輿情分析方面利用市場矩陣、渠道優(yōu)化、公眾情緒從各個評論網(wǎng)站獲取手機的正面及負(fù)面評價;在市場分析方面從手機出貨到渠道,渠道到客戶,實現(xiàn)客戶開機激活的監(jiān)控;并對用戶畫像、設(shè)備畫像、聯(lián)系分析、用戶反饋等方面進行收集。按照用戶需求進行產(chǎn)品定制。
對于聯(lián)想這樣的復(fù)雜平臺,開源技術(shù)僅僅是個開始,開源項目直接安裝,其普遍性能和穩(wěn)定性較差。如何優(yōu)化部署和數(shù)據(jù)結(jié)構(gòu),并跟進補丁和引入創(chuàng)新,以及業(yè)務(wù)整合和數(shù)據(jù)整合都是開源技術(shù)所需解決的問題。
田日輝表示:“聯(lián)想大數(shù)據(jù)平臺基于開源技術(shù)規(guī)劃出三個步驟,首先理解和吃透開源平臺,從第一個開源版本開始,建立完備的性能評估和穩(wěn)定性評價體系,并跟蹤開源補丁,打入評測發(fā)現(xiàn)問題對應(yīng)的開源補丁,開發(fā)提升平臺穩(wěn)定性的組件;其次,優(yōu)化開源平臺發(fā)揮硬件效能,保證其SQL的兼容性、編譯與執(zhí)行和資源分配的優(yōu)化;最后,聯(lián)想大數(shù)據(jù)積極擴展開源平臺實現(xiàn)業(yè)務(wù)需求,發(fā)展一站式的大數(shù)據(jù)開發(fā)環(huán)境,建立了新的ETL工具、數(shù)據(jù)字典、SQL執(zhí)行器、任務(wù)調(diào)度、可視化工具以及深度學(xué)習(xí)模塊?!?/p>
未來聯(lián)想大數(shù)據(jù)愿與中外開源社區(qū)和產(chǎn)業(yè)界同盟共同助力全球智能制造,深化開源交流,共同探討全球合作之道,壯大開源平臺,共建大數(shù)據(jù)技術(shù)與商業(yè)合作的全價值生態(tài)圈。