国产日韩欧美一区二区三区三州_亚洲少妇熟女av_久久久久亚洲av国产精品_波多野结衣网站一区二区_亚洲欧美色片在线91_国产亚洲精品精品国产优播av_日本一区二区三区波多野结衣 _久久国产av不卡

?

基于敏捷型BI的礦業(yè)集團生產(chǎn)信息分析模型

2017-11-01 06:12:23修國林黃雨筍李國清胡乃聯(lián)黃樹巍
中國礦業(yè) 2017年10期
關(guān)鍵詞:礦業(yè)集團數(shù)據(jù)倉庫數(shù)據(jù)包

修國林,黃雨筍,李國清,胡乃聯(lián),侯 杰,黃樹巍

(1.北京科技大學(xué)金屬礦山高效開采與安全教育部重點實驗室,北京 100083;2.山東黃金集團有限公司,山東 濟南 250100)

基于敏捷型BI的礦業(yè)集團生產(chǎn)信息分析模型

修國林1,2,黃雨筍1,李國清1,胡乃聯(lián)1,侯 杰1,黃樹巍1

(1.北京科技大學(xué)金屬礦山高效開采與安全教育部重點實驗室,北京100083;2.山東黃金集團有限公司,山東 濟南250100)

為了解決礦業(yè)集團底層生產(chǎn)運營數(shù)據(jù)難以交互分析、無法直接轉(zhuǎn)換為戰(zhàn)略層面上集成信息,易形成數(shù)據(jù)孤島的問題,本文基于敏捷型BI實施方案,采用多種現(xiàn)代化信息技術(shù)快速構(gòu)建了礦業(yè)集團生產(chǎn)信息多維數(shù)據(jù)模型,并完成了相關(guān)的數(shù)據(jù)分析。從集團管控模式的角度出發(fā),在科學(xué)規(guī)劃生產(chǎn)數(shù)據(jù)的基礎(chǔ)之上,進行了可視化的數(shù)據(jù)ETL處理和主題域的確定,搭建了礦業(yè)集團生產(chǎn)信息數(shù)據(jù)倉庫,構(gòu)建了生產(chǎn)信息多維數(shù)據(jù)模型,利用OLAP技術(shù)對模型進行了多角度、深層次的分析與研究,最后采用敏捷型BI工具實現(xiàn)了生產(chǎn)信息可視化的多維分析操作與圖形展示。通過敏捷型BI生產(chǎn)信息分析模型在國內(nèi)某大型礦業(yè)集團的應(yīng)用,實現(xiàn)了集團下屬礦山企業(yè)生產(chǎn)運營數(shù)據(jù)的匯總、統(tǒng)計分析及異常預(yù)警,促進了礦業(yè)集團生產(chǎn)信息智能分析和科學(xué)決策能力的提升。

礦業(yè)集團;生產(chǎn)信息;商業(yè)智能;敏捷型BI;多維數(shù)據(jù)模型

礦業(yè)集團是現(xiàn)代礦山企業(yè)發(fā)展的高級組織形式之一,集團管控模式可以針對宏觀戰(zhàn)略目標(biāo),通過層級管理的控制、資源的協(xié)調(diào)分配、生產(chǎn)經(jīng)營的風(fēng)險控制,進而優(yōu)化業(yè)務(wù)流程和組織架構(gòu),使成員企業(yè)集中資源要素、減少內(nèi)耗,最終達(dá)到最佳運作效率并實現(xiàn)更好的經(jīng)濟和社會效益[1]。礦業(yè)集團化經(jīng)營可以實現(xiàn)專業(yè)化經(jīng)營與集團化管理的雙重優(yōu)勢,但這種管控模式也存在著管理層級復(fù)雜、管控集中程度多樣化、成員企業(yè)生產(chǎn)類型與產(chǎn)品類型個性突出等諸多不利因素的影響。

在集團管控模式下,管理者需要隨時了解和掌握集團下屬企業(yè)的生產(chǎn)運營情況,包括生產(chǎn)數(shù)據(jù)、財務(wù)成本、技術(shù)經(jīng)濟指標(biāo)等信息,并通過對生產(chǎn)狀況的綜合分析,及時發(fā)現(xiàn)生產(chǎn)經(jīng)營過程中存在的問題,進而改進集團及其下屬企業(yè)的計劃規(guī)劃,輔助企業(yè)的經(jīng)營決策[2-4]。礦業(yè)集團目前處理底層生產(chǎn)經(jīng)營數(shù)據(jù)的方式是報表系統(tǒng),然而礦山企業(yè)的生產(chǎn)與經(jīng)濟指標(biāo)體系龐雜,呈現(xiàn)數(shù)據(jù)量大、維度多、統(tǒng)計路徑多樣化等特點,隨著生產(chǎn)數(shù)據(jù)的增多和集團需求的提高,傳統(tǒng)的報表系統(tǒng)逐漸面臨數(shù)據(jù)量豐富、信息知識匱乏,難以交互分析、形成數(shù)據(jù)孤島等問題[5]。為此,本文針對礦業(yè)集團生產(chǎn)運營管理特點,借助現(xiàn)代信息技術(shù)手段,引入商業(yè)智能(BI)技術(shù)。

商業(yè)智能是一套完整的解決方案,用來將企業(yè)中現(xiàn)有數(shù)據(jù)進行有效整合,快速準(zhǔn)確地提供圖表分析與決策依據(jù),幫助企業(yè)管理者做出明智的業(yè)務(wù)經(jīng)營決策,其關(guān)鍵技術(shù)是數(shù)據(jù)倉庫技術(shù)、OLAP技術(shù)和數(shù)據(jù)挖掘技術(shù)。隨著信息時代的來臨,大部分礦山企業(yè)已經(jīng)建立了比較完善的CRM、ERP、OA等基礎(chǔ)信息化系統(tǒng),可以實現(xiàn)簡單的信息查詢與決策支持,山東某黃金礦山在此基礎(chǔ)上應(yīng)用商業(yè)智能中的數(shù)據(jù)倉庫技術(shù)研究了礦山成本問題,構(gòu)建了黃金礦山成本分析模型,實現(xiàn)了黃金礦山成本考察和成本分析的目的。傳統(tǒng)BI實施方案在解決單一特定問題上十分有效,但其大數(shù)據(jù)分析能力和靈活性較差,分析能力滯后,而且相關(guān)項目耗資不菲、實施周期極長、對人才要求高。本文研究礦業(yè)集團生產(chǎn)信息,數(shù)據(jù)龐雜,需求靈活多變,應(yīng)用傳統(tǒng)BI實施方案可能會導(dǎo)致投入與收益不成正比,因此采用貼近現(xiàn)代企業(yè)經(jīng)營需求,可實現(xiàn)快速部署、需求多變、靈活易用的敏捷型BI,完成礦業(yè)集團生產(chǎn)信息分析模型的構(gòu)建。

1 敏捷型BI在礦業(yè)集團的適用性分析

商業(yè)智能的關(guān)鍵是通過數(shù)據(jù)ETL過程從海量生產(chǎn)運營數(shù)據(jù)中提取出有用的部分,再利用合適的查詢和分析工具對其進行分析和處理(這時數(shù)據(jù)變?yōu)檩o助決策的知識),最后將知識呈現(xiàn)給管理者,為管理者的決策過程提供數(shù)據(jù)支持[6]。敏捷型BI是在商業(yè)智能的基礎(chǔ)上,使用可視化ETL流程操作,動態(tài)的內(nèi)存數(shù)據(jù)立方體技術(shù),并行計算的先進數(shù)據(jù)處理模式,根據(jù)用戶需求形成快而有效、靈活易用的實施方案。敏捷型BI的主要特性和優(yōu)點如下所述。

1)快速部署。敏捷型BI采用了分布式計算、內(nèi)存計算、列存儲以及庫內(nèi)計算等技術(shù),這樣大數(shù)據(jù)量處理不再依賴預(yù)計算即可快速完成,數(shù)據(jù)處理速度得到大幅度提升。面對礦業(yè)集團億級數(shù)據(jù)量,敏捷型BI實施方案也可以做到快速部署,最快一周左右即可上線。

2)可視化ETL流程。敏捷型BI支持豐富的數(shù)據(jù)源連接,以及可視化的ETL工具幫助企業(yè)進行多樣數(shù)據(jù)整合;并通過智能的字段名稱轉(zhuǎn)義和關(guān)聯(lián)手段,讓數(shù)據(jù)具有更強的可讀性。礦業(yè)集團無需引進專業(yè)技術(shù)人才,業(yè)務(wù)人員也不用編輯代碼和腳本,所見即所得,可快捷地完成數(shù)據(jù)ETL流程。

3)動態(tài)的內(nèi)存數(shù)據(jù)立方體(Cube)。敏捷型BI完成數(shù)據(jù)ETL清洗轉(zhuǎn)換后,即可存儲到Cube中,并按照業(yè)務(wù)數(shù)據(jù)包進行分類管理,方便業(yè)務(wù)人員進行前端數(shù)據(jù)分析。不同的業(yè)務(wù)人員操作不同的業(yè)務(wù)數(shù)據(jù)包,一個業(yè)務(wù)數(shù)據(jù)包中可包含多個Cube,Cube中的數(shù)據(jù)可實時動態(tài)調(diào)整。礦業(yè)集團數(shù)據(jù)多樣、指標(biāo)眾多、分析主題動態(tài)化且多樣化,敏捷型BI可根據(jù)主題建立業(yè)務(wù)數(shù)據(jù)包,再根據(jù)分析的指標(biāo)建立Cube,相應(yīng)的業(yè)務(wù)人員只有固定的Cube操作權(quán)限,使得工作快捷高效地進行。

4)輕量建模,N個視圖。與傳統(tǒng)BI的重量建模、統(tǒng)一視圖不同,敏捷BI采取輕量建模、N個視圖的方法,不需建二次表,數(shù)據(jù)導(dǎo)入后可直接進行分析。操作人員可快速建立分析主題,并且可以實時調(diào)整分析維度和度量計算方式,極大增加了分析的靈活性和實用性,真正做到操作人員和數(shù)據(jù)對話。礦業(yè)集團領(lǐng)導(dǎo)不需要再通過業(yè)務(wù)人員定制報表,自己即可通過可視化的操作進行分析和探索,而且分析主題靈活多變,固定分析主題與臨時分析主題并重,真正做到經(jīng)營決策及時調(diào)整。

5)低成本。敏捷型BI降低了數(shù)據(jù)分析學(xué)習(xí)和操作的門檻,隨之降低了對業(yè)務(wù)人員的要求;同時降低了項目實施難度,縮短了項目周期,隨之降低的還有項目風(fēng)險性,敏捷型BI從整體上降低了項目成本。因此在礦業(yè)形勢低迷的現(xiàn)階段,敏捷型BI也是十分適用的。

通過對敏捷型BI概念、特性和優(yōu)點的分析,可以發(fā)現(xiàn)敏捷型BI不僅能夠?qū)崿F(xiàn)商業(yè)智能將原始數(shù)據(jù)轉(zhuǎn)換為決策知識的功能,而且更快、更簡單、成本更低、適用性更好。面對礦業(yè)集團數(shù)據(jù)多樣、指標(biāo)眾多、分析主題動態(tài)化且多樣化、固定分析主題與臨時分析主題并重等問題,采用敏捷型BI實施方案,無需引進專業(yè)人才,只需提供底層數(shù)據(jù),再經(jīng)過可視化的數(shù)據(jù)ETL處理,建立動態(tài)的內(nèi)存數(shù)據(jù)立方體,即可組成生產(chǎn)信息分析模型;同時可以實現(xiàn)數(shù)據(jù)的圖表可視化和OLAP分析,使數(shù)據(jù)快捷地變成輔助決策的知識。

2 基于敏捷型BI的生產(chǎn)信息分析模型構(gòu)建

2.1 集團管控模式下生產(chǎn)信息的分析需求

目前大部分礦山企業(yè)單位已建立了比較完善的CRM、ERP、OA等基礎(chǔ)信息化系統(tǒng),這些系統(tǒng)的統(tǒng)一特點是:通過礦山業(yè)務(wù)人員或者用戶的操作,對礦山數(shù)據(jù)庫進行查看、增加、修改、刪除等操作。上述系統(tǒng)可統(tǒng)稱為OLTP(Online Transaction Process,在線事務(wù)處理),OLTP系統(tǒng)運行了一段時間以后,會幫助礦山企業(yè)收集大量的生產(chǎn)運營數(shù)據(jù),而這些數(shù)據(jù)最終將匯總到礦業(yè)集團的數(shù)據(jù)庫中。集團方面處理這些數(shù)據(jù)的方式是相關(guān)業(yè)務(wù)人員根據(jù)決策者的需求進行報表定制,即報表系統(tǒng),然而隨著生產(chǎn)經(jīng)營數(shù)據(jù)的增多和礦業(yè)集團需求的提高,使得礦業(yè)集團生產(chǎn)經(jīng)營決策過程更為復(fù)雜,這也促使生產(chǎn)信息的分析過程出現(xiàn)了一些新的需求。

1)數(shù)據(jù)的集成化與規(guī)范化[7]。現(xiàn)階段礦山企業(yè)已建立了比較完善的基礎(chǔ)信息化系統(tǒng),每天會收集大量的數(shù)據(jù)信息并通過互聯(lián)網(wǎng)匯總至礦業(yè)集團的數(shù)據(jù)庫中,數(shù)據(jù)量豐富但信息知識匱乏,數(shù)據(jù)利用率較低。因此,集團需要構(gòu)建標(biāo)準(zhǔn)化的數(shù)據(jù)倉庫,從存儲方式、數(shù)據(jù)結(jié)構(gòu)、處理邏輯等方面規(guī)范礦業(yè)集團大規(guī)模數(shù)據(jù)的集成方式。

2)需求多變,分析多樣。礦業(yè)集團管理層級復(fù)雜、管控集中程度多樣化、成員企業(yè)生產(chǎn)類型與產(chǎn)品類型個性突出,導(dǎo)致不同部門、不同層級的領(lǐng)導(dǎo)需要了解的信息不同,需要分析的主題不同;傳統(tǒng)的報表定制,無法滿足分析的動態(tài)性和個人定制性。因此,采用敏捷型BI實施方案,可根據(jù)分析主題建立業(yè)務(wù)數(shù)據(jù)包,再根據(jù)分析的指標(biāo)建立Cube,使用可視化的操作,所見即所得的自助式數(shù)據(jù)分析模式,滿足集團領(lǐng)導(dǎo)靈活多變的分析需求。

3)智能分析,科學(xué)決策。面對礦業(yè)集團的海量數(shù)據(jù)和復(fù)雜多變的經(jīng)濟環(huán)境,需要根據(jù)清理分類后的生產(chǎn)信息捕獲分析主題,并對主題進行多層次、多角度、全方位立體式分析與挖掘,才能為集團分析下屬礦山企業(yè)生產(chǎn)狀況提供準(zhǔn)確的數(shù)據(jù)支持,傳統(tǒng)的技術(shù)難以完成。因此,需要建立生產(chǎn)運營信息的多維數(shù)據(jù)模型,從模型中捕獲分析主題,并采取切片、切塊、鉆取、切換維度等多種分析動作來剖析主題中的數(shù)據(jù),深入地了解包含在數(shù)據(jù)中的知識,幫助集團領(lǐng)導(dǎo)做出科學(xué)決策。

4)快速部署,實時調(diào)整。集團領(lǐng)導(dǎo)需要隨時了解和掌握集團下屬企業(yè)的生產(chǎn)運營情況,及時發(fā)現(xiàn)問題,進而改進集團及其下屬企業(yè)的計劃規(guī)劃;并且領(lǐng)導(dǎo)的分析需求多變,需要從多種角度分析數(shù)據(jù),但傳統(tǒng)BI實施方案部署周期長,需求定制,無法滿足集團領(lǐng)導(dǎo)需求的靈活性。因此,選擇采用敏捷型BI實施方案,做到快速部署、實時調(diào)整分析維度和度量計算方式等,極大增加靈活性,真正做到和數(shù)據(jù)對話。

2.2 敏捷型BI實施流程

敏捷型BI是在商業(yè)智能的基礎(chǔ)之上,使用可視化的ETL流程、動態(tài)的內(nèi)存數(shù)據(jù)立方體技術(shù)、并行計算的先進數(shù)據(jù)處理模式,并根據(jù)業(yè)務(wù)數(shù)據(jù)包捕獲分析主題,構(gòu)建相應(yīng)的數(shù)據(jù)立方體,大大加快了數(shù)據(jù)處理與分析的速度,而且易用性與靈活性更強,更加貼近現(xiàn)代礦業(yè)集團的經(jīng)營需求。敏捷型BI的具體實施流程如圖1所示。

采用敏捷型BI實施方案,底層數(shù)據(jù)在導(dǎo)入數(shù)據(jù)倉庫之前,必須由數(shù)據(jù)抽取和轉(zhuǎn)換層(ETL)進行數(shù)據(jù)清理、合并、轉(zhuǎn)換及其他信息集成工作。數(shù)據(jù)倉庫提供了生產(chǎn)信息分析模型的基礎(chǔ)數(shù)據(jù),可實現(xiàn)大量細(xì)節(jié)數(shù)據(jù)和綜合性數(shù)據(jù)的存儲,敏捷型BI采用了動態(tài)的內(nèi)存數(shù)據(jù)立方體技術(shù),可將數(shù)據(jù)倉庫劃分為多個業(yè)務(wù)數(shù)據(jù)包,每個業(yè)務(wù)數(shù)據(jù)包中包含多個數(shù)據(jù)立方體(Cube),后續(xù)的OLAP分析和數(shù)據(jù)挖掘操作,都可以在Cube上完成的。OLAP服務(wù)器可以根據(jù)業(yè)務(wù)數(shù)據(jù)包中自動捕獲的分析主題進行分析,也可以迅速地響應(yīng)用戶的各種查詢及分析要求,并能根據(jù)數(shù)據(jù)之間的關(guān)聯(lián)對數(shù)據(jù)進行快速、靈活的計算和轉(zhuǎn)換;前端信息展示可部署所需的各種圖表分析,而且可自主調(diào)節(jié)數(shù)據(jù)的分析維度、指標(biāo)、方式等,將二維或多維數(shù)據(jù)生動形象地顯示給集團生產(chǎn)運營管理人員。

2.3 生產(chǎn)信息數(shù)據(jù)倉庫構(gòu)建

數(shù)據(jù)倉庫構(gòu)建的主要工作包括收集、分析和確認(rèn)業(yè)務(wù)分析需求,分析和理解主體和元數(shù)據(jù)、事實及其量度、粒度和維度的選擇與設(shè)計、數(shù)據(jù)倉庫的物理存儲方式選擇等[8]。主要過程包括概念模型構(gòu)建、邏輯模型構(gòu)建和物理模型構(gòu)建,具體如圖2所示。

2.3.1 概念模型構(gòu)建

概念模型構(gòu)建的主要工作可以分兩個步驟:首先分析用戶的決策需求,其次分析實現(xiàn)這些決策需求所需的數(shù)據(jù)。

礦業(yè)集團領(lǐng)導(dǎo)主要的決策需求是了解旗下礦山企業(yè)的生產(chǎn)運營狀況,及時發(fā)現(xiàn)生產(chǎn)經(jīng)營存在的問題。實現(xiàn)這些需求需要對礦山的生產(chǎn)信息進行分析,礦山的生產(chǎn)信息主要包括地質(zhì)資源信息、礦山產(chǎn)品信息、運營收入信息、物資設(shè)備信息、安全環(huán)保信息等,其中地質(zhì)資源信息主要包括礦山地質(zhì)資源儲量、備采礦量和三級礦量等地質(zhì)方面數(shù)據(jù);礦石產(chǎn)品信息主要包括原礦產(chǎn)品和精礦產(chǎn)品等方面的數(shù)據(jù);運營收入信息包括銷售收入、銷售價格和成本費用等財務(wù)方面的數(shù)據(jù);物資設(shè)備信息主要包括物資供應(yīng)和設(shè)備管理等方面的數(shù)據(jù);安全環(huán)保信息主要包括安全生產(chǎn)和環(huán)保管理等方面的數(shù)據(jù)。

綜上所述,根據(jù)集團領(lǐng)導(dǎo)的決策需求及礦山生產(chǎn)活動的實際劃分主題域如圖3所示。

圖1 敏捷型BI的實施流程圖

圖2 生產(chǎn)信息數(shù)據(jù)倉庫構(gòu)建過程框架圖

圖3 生產(chǎn)信息主題域劃分框架圖

2.3.2 邏輯模型構(gòu)建

邏輯模型構(gòu)建的主要工作是對概念模型構(gòu)建中所劃分的主題域進行分析以及對事實表和維度表進行設(shè)計。在概念模型中已經(jīng)劃分出地質(zhì)資源、礦石產(chǎn)品、運營收入、物資設(shè)備以及安全環(huán)保五個主題域,表1對各個主題域進行了詳細(xì)分析,具體如表1所示。

數(shù)據(jù)倉庫的每個主題是由多個數(shù)據(jù)表來實現(xiàn)的,這些表之間依靠主題的公共碼鍵聯(lián)系在一起,形成一個完整的數(shù)據(jù)結(jié)構(gòu)。在邏輯模型構(gòu)建中,主要考慮數(shù)據(jù)倉庫的結(jié)構(gòu)及完整性,保證數(shù)據(jù)倉庫所有數(shù)據(jù)元素包含在數(shù)據(jù)模型中。其重點是細(xì)化數(shù)據(jù),以星型模型或雪花型模型為基礎(chǔ),明確事實表和維度表,并在事實表和維度表中添加屬性。

表1 主題域詳細(xì)分析

1)事實表設(shè)計。度量值選取本月實際、本月計劃、本季計劃、本年累計、年計劃、去年同期。

2)維度表設(shè)計。將時間、企業(yè)、指標(biāo)定義為分析維度。其中時間維度形成月、季度、年的層級結(jié)構(gòu);企業(yè)維度形成礦山成員、二級公司、集團的層次結(jié)構(gòu);指標(biāo)維度則形成具體指標(biāo)、指標(biāo)類型的層次結(jié)構(gòu)。

3)數(shù)據(jù)立方體。數(shù)據(jù)立方體是一組維和度量的集合,也稱多維數(shù)據(jù)集。度量來自事實表,維來自維度表,從底層的維度表中讀取維的數(shù)據(jù),構(gòu)建維的結(jié)構(gòu),創(chuàng)建層次,將成員指派到層次中合適的級別。度量的聚集是基于維的層次來聚集,以特定的結(jié)構(gòu)存儲預(yù)先計算的聚集,通過索引幫助查詢聚集數(shù)據(jù)并實時返回查詢分析的結(jié)果。

2.3.3 物理模型構(gòu)建

物理模型是邏輯模型在物理系統(tǒng)的實現(xiàn)模式。包括特定的邏輯模型中的各種實體,例如,關(guān)系表的數(shù)據(jù)結(jié)構(gòu)類型,索引策略、數(shù)據(jù)存儲位置和數(shù)據(jù)的存儲分配等。在物理模型構(gòu)建和實施中,要考慮的因素包括:I/O訪問時間,空間利用率和維護成本[10]。

在本次物理模型構(gòu)建中,主要進行存儲方式的選擇。關(guān)系型數(shù)據(jù)庫存儲方式所需的查詢時間較長,但它所需存儲空間較小、查詢性能好、可以處理大量數(shù)據(jù),而且邏輯模型劃分的主題域較多,同時元數(shù)據(jù)存儲在關(guān)系型數(shù)據(jù)庫中。根據(jù)綜合性數(shù)據(jù)的組織方式,從運算速度、磁盤容量等方面綜合考慮,本模型對多維數(shù)據(jù)集采用關(guān)系型數(shù)據(jù)庫方式存儲。

2.4 生產(chǎn)信息多維數(shù)據(jù)模型構(gòu)建

與傳統(tǒng)BI的重量建模、統(tǒng)一視圖不同,敏捷型BI采取輕量建模、N個視圖的方法,不需建二次表,數(shù)據(jù)連進來直接可以進行分析,同時敏捷型BI采用分布式計算、內(nèi)存計算、列存儲、庫內(nèi)計算等技術(shù),使得數(shù)據(jù)處理速度有了大幅度提升,可迅速響應(yīng)操作人員的查詢及分析要求。操作人員可快速建立分析主題,并且可以實時調(diào)整分析維度和度量計算方式,極大增加了分析的靈活性和實用性,真正做到操作人員和數(shù)據(jù)對話。敏捷型BI建模方式如圖4所示。

圖4 輕量建模、N個視圖

傳統(tǒng)BI做分析是通過組織一批數(shù)據(jù),或者通過新建查詢從數(shù)據(jù)倉庫中得到主題相關(guān)的數(shù)據(jù)表,再通過組織查詢來構(gòu)建多維數(shù)據(jù)模型,這種方式弊端十分明顯,主要是流程復(fù)雜,專業(yè)要求性極高,而且面對大數(shù)據(jù)量時,查詢復(fù)雜繁瑣,構(gòu)建模型困難。而敏捷型BI則是使用了業(yè)務(wù)數(shù)據(jù)包的方式,業(yè)務(wù)數(shù)據(jù)包中包含相關(guān)主題對應(yīng)的所有業(yè)務(wù)數(shù)據(jù)表,是后續(xù)分析的數(shù)據(jù)基礎(chǔ),其源數(shù)據(jù)可以來自某個數(shù)據(jù)庫的多個表,或者多個數(shù)據(jù)庫的多個表。借助業(yè)務(wù)數(shù)據(jù)包可以輕松實現(xiàn)按照主題對數(shù)據(jù)進行分類、管理和權(quán)限配置,做到固定分析主題與臨時分析主題并重。同時業(yè)務(wù)數(shù)據(jù)包是多維數(shù)據(jù)模型在前端的映射,通過業(yè)務(wù)包的創(chuàng)建和設(shè)置,使得多維數(shù)據(jù)模型和業(yè)務(wù)分析需求的銜接更加緊密自然。

在業(yè)務(wù)數(shù)據(jù)包的基礎(chǔ)之上,敏捷型BI可根據(jù)其中的源數(shù)據(jù)捕獲分析主題,關(guān)聯(lián)對應(yīng)的數(shù)據(jù)表,自動形成數(shù)據(jù)立方體,如在礦山產(chǎn)品業(yè)務(wù)數(shù)據(jù)包中,可捕獲分析主題“原礦產(chǎn)品”,數(shù)據(jù)立方體實體關(guān)系圖如圖5所示。

圖5 原礦產(chǎn)品數(shù)據(jù)立方體E-R圖

隨后對數(shù)據(jù)立方體進行OLAP分析,OLAP的關(guān)鍵屬性是多維性。多維數(shù)據(jù)分析是分析企業(yè)數(shù)據(jù)最有效的方法,是OLAP的靈魂。多維數(shù)據(jù)分析是指對以多維分析組織起來的數(shù)據(jù)采取切片/切塊、上卷/鉆取和旋轉(zhuǎn)等多種分析動作來剖析數(shù)據(jù)[11],具體如圖6所示。

針對礦業(yè)集團生產(chǎn)信息分析模型的特點,此數(shù)據(jù)立方體主要從三種維度分析觀察事實數(shù)據(jù)。在時間維度進行“月→季度→年”上卷或“年→季度→月”鉆?。辉谄髽I(yè)維度進行“礦山→二級公司→集團”上卷或“集團→二級公司→礦山”鉆?。辉谥笜?biāo)維度可以對某一指標(biāo)類型進行統(tǒng)計,或在多個維度上進行切片/切塊、上卷/鉆取和旋轉(zhuǎn)等操作;對事實數(shù)據(jù)可采取完成計劃情況、同比、環(huán)比分析,集團領(lǐng)導(dǎo)可直觀地分析、理解數(shù)據(jù),最終多角度、多層次地觀察數(shù)據(jù),深入了解包含在數(shù)據(jù)中的信息與知識。

在展示方式上,敏捷型BI工具提供了豐富的圖表展示效果,對于量的信息,可以采用直方圖顯示,直接對比分析本月實際和本月計劃。對于率的信息或是品位信息,可采用折線圖顯示,一方面可以分析本月指標(biāo)的走勢;另一方面則可以對比本月的計劃數(shù)據(jù),從波動性中清晰觀測到數(shù)據(jù)的異常變動。

3 應(yīng)用案例

國內(nèi)某大型礦業(yè)集團生產(chǎn)運營系統(tǒng)主要針對集團公司與其下屬企業(yè)對于生產(chǎn)信息管理需求設(shè)計,用于管理各下屬企業(yè)生產(chǎn)相關(guān)指標(biāo)信息。系統(tǒng)主要由子公司/礦山生產(chǎn)數(shù)據(jù)管理、集團總部生產(chǎn)數(shù)據(jù)稽核與管理、生產(chǎn)信息綜合服務(wù)門戶三部分構(gòu)成,其中生產(chǎn)信息綜合服務(wù)門戶的生產(chǎn)狀況分析模塊,需根據(jù)各下屬企業(yè)填報的日常生產(chǎn)運營信息,進行多維度匯總分析,并通過相關(guān)分析對生產(chǎn)運營不佳的單位進行狀態(tài)警示和重點關(guān)注。

本論文基于NET平臺,采用全B/S架構(gòu),SQL Server2012作為后臺數(shù)據(jù)庫,F(xiàn)ineBI作為展示工具,運用敏捷型BI實施方案完成了生產(chǎn)信息分析模型的實體化過程,并已成功運用于國內(nèi)某大型礦業(yè)集團生產(chǎn)運營系統(tǒng),作為系統(tǒng)中生產(chǎn)信息綜合服務(wù)門戶的生產(chǎn)狀況分析模塊,可實現(xiàn)的核心功能包括數(shù)據(jù)匯總與分析,多維數(shù)據(jù)的OLAP分析以及多樣式數(shù)據(jù)預(yù)警。

圖6 OLAP分析的基本操作

3.1 數(shù)據(jù)匯總與分析

通過匯總二級公司旗下各個礦山企業(yè)的生產(chǎn)數(shù)據(jù),分析各項生產(chǎn)數(shù)據(jù)的分布情況。如礦山產(chǎn)品主題域中原礦產(chǎn)品分析的采掘總量數(shù)據(jù),采用柱狀圖形式并進行實際值與計劃值對比,了解計劃完成情況;同時采用餅狀圖的形式分析各個礦山企業(yè)所占百分比,了解此項生產(chǎn)數(shù)據(jù)的分布情況。

3.2 多維數(shù)據(jù)的OLAP分析

集團領(lǐng)導(dǎo)可從生產(chǎn)信息分析模型中抽取所需的多維數(shù)據(jù)立方體,進行切片/切塊、上卷/鉆取和旋轉(zhuǎn)等OLAP分析操作,實現(xiàn)從不同角度、不同層次、多方位地分析數(shù)據(jù)。當(dāng)分析某個匯總指標(biāo)的具體數(shù)值時,該指標(biāo)的具體組成部分或有一定邏輯運算關(guān)系的數(shù)據(jù)可在表格或者圖表組件中聯(lián)動顯示,如礦山產(chǎn)品主題域中精礦產(chǎn)品分析的產(chǎn)品產(chǎn)量數(shù)據(jù),柱狀圖可上卷至季度或年,同時儀表盤可聯(lián)動顯示完成計劃百分比,折線圖可聯(lián)動顯示環(huán)比分析。

3.3 多樣式數(shù)據(jù)預(yù)警

礦山企業(yè)生產(chǎn)過程中,某些重要生產(chǎn)指標(biāo)可以直觀地反映礦山生產(chǎn)運營狀況,對這些重要指標(biāo)可設(shè)置預(yù)警線,如運營收入主題域中銷售價格分析可設(shè)置預(yù)期價格警戒線;也可對重要指標(biāo)設(shè)置預(yù)警值,當(dāng)指標(biāo)具體值高于或低于預(yù)警值時,會有特殊標(biāo)記提醒,如運營收入主題域中銷售收入分析可設(shè)置完成月計劃情況;還可設(shè)置趨勢預(yù)警,計算出指標(biāo)漲幅,箭頭標(biāo)記趨勢是上升或下降,如物資設(shè)備主題域中物資供應(yīng)分析可設(shè)置某個部件每月使用量的漲幅變化。

4 結(jié) 論

本文以國內(nèi)某大型礦業(yè)集團為工程背景,采用敏捷型BI實施方案,構(gòu)建了生產(chǎn)信息分析模型并進行實際應(yīng)用,成功運用于集團生產(chǎn)運營系統(tǒng),作為其中生產(chǎn)狀況分析模塊,極大提高了集團運營管理效率及科學(xué)決策水平,在以下幾個方面有所體現(xiàn)。

1)將現(xiàn)代信息技術(shù)商業(yè)智能應(yīng)用到礦業(yè)領(lǐng)域,通過分析國內(nèi)某大型礦業(yè)集團生產(chǎn)運營系統(tǒng)所產(chǎn)生的數(shù)據(jù),根據(jù)不同的數(shù)據(jù)性質(zhì),全面定義數(shù)據(jù)維度、變量、維的深度、集成方向等,實現(xiàn)了生產(chǎn)經(jīng)營數(shù)據(jù)在時間、指標(biāo)類型、企業(yè)等維度上的集成。

2)基于敏捷型BI實施方案,采用多種現(xiàn)代化信息技術(shù)快速構(gòu)建了礦業(yè)集團生產(chǎn)信息多維數(shù)據(jù)模型,實現(xiàn)了礦業(yè)集團下屬企業(yè)生產(chǎn)信息的采集、抽取、加工與處理,在此基礎(chǔ)上進行集中式數(shù)據(jù)匯總與分析,并形成了清晰、直觀的圖表分析,將海量生產(chǎn)數(shù)據(jù)變成了戰(zhàn)略層面上的集成信息,使集團管理者可以實時、快捷地了解旗下礦山企業(yè)生產(chǎn)運營狀況。

3)通過敏捷型BI工具對生產(chǎn)運營數(shù)據(jù)進行可視化的切片/切塊、上卷/鉆取、旋轉(zhuǎn)等的OLAP分析操作,并添加多樣式預(yù)警設(shè)置,增強了數(shù)據(jù)分析的展示效果,形成所見即所得的自助式分析模式,集團領(lǐng)導(dǎo)可根據(jù)自己的需求查看相關(guān)數(shù)據(jù)并進行分析,為集團決策提供更可靠的數(shù)據(jù)支持。

[1] 黃樹巍,修國林,李國清,等.集團管控模式下的礦業(yè)集團生產(chǎn)信息管理系統(tǒng)[J].金屬礦山,2016(6):117-124.

[2] 胡乃聯(lián),何煦春,李國清.礦業(yè)集團信息化問題研究[J].金屬礦山,2005(Z1):178-180,185.

[3] 李學(xué)鋒,謝長江,段希祥.我國礦山信息化現(xiàn)狀及發(fā)展途徑探討[J].礦業(yè)研究與開發(fā),2004,24(6):66-68.

[4] 陳玉民,李國清,何吉平,等.山東黃金數(shù)字礦山建設(shè)實踐[C]∥全國采礦科學(xué)技術(shù)高峰論壇.2010:10-14.

[5] 黃解軍,崔巍,袁艷斌,等.面向數(shù)字礦山的數(shù)據(jù)倉庫構(gòu)建及其應(yīng)用研究[J].中國礦業(yè),2009,18(11):80-83.

[6] 趙衛(wèi)東.商務(wù)智能[M].北京:清華大學(xué)出版社,2009.

[7] 侯杰,胡乃聯(lián),李國清,等.基于商務(wù)智能的礦業(yè)集團運營決策系統(tǒng)解決方案[J].計算機集成制造系統(tǒng),2016,22(1):202-212.

[8] 陳志泊.數(shù)據(jù)倉庫與數(shù)據(jù)挖掘[M].北京:清華大學(xué)出版社,2009.

[9] 何煦春,胡乃聯(lián),李國清,等.基于數(shù)據(jù)倉庫的礦山企業(yè)決策支持系統(tǒng)研究[J].中國礦業(yè),2007,16(4):4-7.

[10] 林宇.數(shù)據(jù)倉庫原理與實踐[M].北京:人民郵電出版社,2003.

[11] 陳嶺,陳元中,陳根才,等.基于操作序列挖掘的OLAP查詢推薦方法[J].東南大學(xué)學(xué)報:自然科學(xué)版,2011,41(3):498-504.

BI-basedanalysismodelofmininggroupproductioninformation

XIU Guolin1,2,HUANG Yusun1,LI Guoqing1,HU Nailian1,HOU Jie1,HUANG Shuwei1

(1.State Key Laboratory of High-Efficient Mining and Safety of Metal Mines of Ministry of Education,University of Science and Technology Beijing,Beijing 100083,China;2.Shandong Gold Group Co., Ltd.,Jinan 250100,China)

In order to solve the problems that the data of the bottom production and operation of the mining group are difficult to be analysed,and can not be directly transformed into the information integration on the strategic level,it is easy to form the data island.Based on the agile BI implementation plan,this paper constructs the production information of the mining group by many kinds of modern information technology Multidimensional data model,and completed the relevant data analysis.From the point of view of group control mode,based on the scientific planning of production data,the ETL processing of data and the definition of subject area are made.The production information data warehouse of mining group is built,and the multi-dimensional data model of production information is constructed.Use OLAP technology to analyse and research the model from multi-angle and deep-level.Finally,the agile BI tool is used to realize the multi-dimensional analysis operation and graphical display of production information visualization.The agile BI production information analysis model is applied to a large mining group in China to realize the summary,statistical analysis and abnormal early warning of the production and operation data of the mining enterprises,and promote the intelligent analysis and scientific decision-making ability of the mining group.

mining group;production information;business intelligence;agile BI;multidimensional data model

F406.2

A

1004-4051(2017)10-0030-08

2017-01-10責(zé)任編輯趙奎濤

修國林(1966-),男,山東萊州人,教授級高級工程師,主要從事礦山生產(chǎn)技術(shù)及管理工作。

黃雨筍(1993-),男,漢族,湖北襄陽人,碩士研究生,攻讀北京科技大學(xué)采礦專業(yè),主要從事礦業(yè)系統(tǒng)工程方面的研究工作,E-mail:huangyusun@163.com。

猜你喜歡
礦業(yè)集團數(shù)據(jù)倉庫數(shù)據(jù)包
TGS智能梯流干選機在淮北礦業(yè)集團的應(yīng)用
紫金礦業(yè)集團股份有限公司簡介
基于數(shù)據(jù)倉庫的住房城鄉(xiāng)建設(shè)信息系統(tǒng)整合研究
SmartSniff
分布式存儲系統(tǒng)在液晶面板制造數(shù)據(jù)倉庫中的設(shè)計
電子制作(2016年15期)2017-01-15 13:39:15
探析電力系統(tǒng)調(diào)度中數(shù)據(jù)倉庫技術(shù)的應(yīng)用
基于數(shù)據(jù)倉庫的數(shù)據(jù)分析探索與實踐
雞西礦業(yè)集團瓦斯發(fā)電機組尾氣余熱利用的實踐和推廣
中國煤層氣(2015年5期)2015-08-22 03:26:45
陜西煤化黃陵礦業(yè)集團有限責(zé)任公司
基于Libpcap的網(wǎng)絡(luò)數(shù)據(jù)包捕獲器的設(shè)計與實現(xiàn)
普兰店市| 淮南市| 通榆县| 南康市| 鹤壁市| 天峨县| 德州市| 临猗县| 佛教| 卫辉市| 马边| 荥阳市| 什邡市| 景宁| 黑龙江省| 论坛| 石河子市| 长岭县| 旺苍县| 贵德县| 葵青区| 梁河县| 铜梁县| 闻喜县| 金秀| 黄陵县| 中方县| 萝北县| 安泽县| 比如县| 鹰潭市| 金溪县| 富裕县| 敦煌市| 平顶山市| 河间市| 清丰县| 綦江县| 桐梓县| 井冈山市| 新邵县|