国产日韩欧美一区二区三区三州_亚洲少妇熟女av_久久久久亚洲av国产精品_波多野结衣网站一区二区_亚洲欧美色片在线91_国产亚洲精品精品国产优播av_日本一区二区三区波多野结衣 _久久国产av不卡

?

基建工程數(shù)據(jù)倉(cāng)庫(kù)構(gòu)建與應(yīng)用研究

2016-12-27 14:49:46王朝霞郭宇棟談昨非孟月昊
中國(guó)管理信息化 2016年21期
關(guān)鍵詞:數(shù)據(jù)倉(cāng)庫(kù)

王朝霞++郭宇棟++談昨非++孟月昊

[摘 要] 完整而規(guī)范的數(shù)據(jù)倉(cāng)庫(kù)既能解決異構(gòu)數(shù)據(jù)源集成問(wèn)題,也為多維數(shù)據(jù)分析和數(shù)據(jù)挖掘提供數(shù)據(jù)支撐。本文基于基建工程數(shù)據(jù)倉(cāng)庫(kù)研究和建設(shè)的實(shí)際做法,闡述了基于數(shù)據(jù)倉(cāng)庫(kù)的決策支持系統(tǒng)架構(gòu)與相應(yīng)的商業(yè)智能開(kāi)發(fā)平臺(tái)構(gòu)建,系統(tǒng)建設(shè)中數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)、數(shù)據(jù)收集的ETL設(shè)計(jì)、數(shù)據(jù)分析的OLAP設(shè)計(jì)和數(shù)據(jù)展示的報(bào)表設(shè)計(jì),希望通過(guò)探索和研究,為基本建設(shè)工程領(lǐng)域構(gòu)建規(guī)范化數(shù)據(jù)倉(cāng)庫(kù)提供參考和借鑒意義。

[關(guān)鍵詞] 數(shù)據(jù)倉(cāng)庫(kù);ETL;OLAP;Report

doi : 10 . 3969 / j . issn . 1673 - 0194 . 2016. 21. 085

[中圖分類(lèi)號(hào)] TP392 [文獻(xiàn)標(biāo)識(shí)碼] A [文章編號(hào)] 1673 - 0194(2016)21- 0163- 06

0 引 言

經(jīng)過(guò)多年發(fā)展,基本建設(shè)工程領(lǐng)域各個(gè)業(yè)務(wù)部門(mén)開(kāi)發(fā)并使用各類(lèi)管理信息系統(tǒng),積累了大量業(yè)務(wù)數(shù)據(jù)。然而,現(xiàn)有系統(tǒng)互不聯(lián)通,相應(yīng)的數(shù)據(jù)資源被分割在不同的系統(tǒng)中,無(wú)法實(shí)現(xiàn)跨系統(tǒng)綜合查詢(xún)與分析,同時(shí),在現(xiàn)有系統(tǒng)中,統(tǒng)計(jì)查詢(xún)僅僅作為一種輔助功能,直接基于業(yè)務(wù)數(shù)據(jù)庫(kù)進(jìn)行簡(jiǎn)單的瀏覽查詢(xún)和統(tǒng)計(jì)匯總。因此,如何將異構(gòu)的數(shù)據(jù)資源集成在一起,實(shí)現(xiàn)跨系統(tǒng)、跨表、全面靈活的統(tǒng)計(jì)查詢(xún)與分析,為基建工程精細(xì)管理與科學(xué)決策提供信息化手段支撐,成為目前的重要研究課題。本文提出了一種基于數(shù)據(jù)倉(cāng)庫(kù)的基建工程決策支持系統(tǒng)框架、搭建了自主集成的商業(yè)智能平臺(tái),在此基礎(chǔ)上重點(diǎn)闡述基建工程數(shù)據(jù)倉(cāng)庫(kù)的建設(shè),以及數(shù)據(jù)倉(cāng)庫(kù)之上的數(shù)據(jù)分析應(yīng)用。通過(guò)構(gòu)建數(shù)據(jù)倉(cāng)庫(kù),有效解決數(shù)據(jù)不一致、冗余、異構(gòu)等問(wèn)題;同時(shí),基于數(shù)據(jù)倉(cāng)庫(kù)的基建工程決策支持系統(tǒng)支持多維數(shù)據(jù)分析和數(shù)據(jù)挖掘,更好地支撐基建工程管理和決策[1]。

1 系統(tǒng)架構(gòu)與平臺(tái)構(gòu)建

1.1 系統(tǒng)架構(gòu)

基于數(shù)據(jù)倉(cāng)庫(kù)的基建工程決策支持系統(tǒng)框架主要包括:數(shù)據(jù)源層、數(shù)據(jù)處理層、數(shù)據(jù)存儲(chǔ)層、應(yīng)用服務(wù)層和用戶(hù)訪問(wèn)層。

1.1.1 數(shù)據(jù)源層

數(shù)據(jù)源層是數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的數(shù)據(jù)來(lái)源,基建工程業(yè)務(wù)涉及的數(shù)據(jù)源主要分布于工程計(jì)劃、房屋土地、住房、兩項(xiàng)普查等核心業(yè)務(wù)系統(tǒng)。

1.1.2 數(shù)據(jù)處理層

數(shù)據(jù)處理層采用統(tǒng)一的ETL調(diào)度平臺(tái),實(shí)現(xiàn)對(duì)原始數(shù)據(jù)抽取、清洗、轉(zhuǎn)換、加載,消除數(shù)據(jù)間的不一致和冗余,按數(shù)據(jù)倉(cāng)庫(kù)模型結(jié)構(gòu)重新組織數(shù)據(jù)并加載到數(shù)據(jù)倉(cāng)庫(kù),形成能夠?qū)Q策提供支持的多重粒度級(jí)的數(shù)據(jù)倉(cāng)庫(kù)標(biāo)準(zhǔn)化數(shù)據(jù)。

1.1.3 數(shù)據(jù)存儲(chǔ)層

數(shù)據(jù)存儲(chǔ)層主要包括操作數(shù)據(jù)層(ODS)、基礎(chǔ)數(shù)據(jù)層(EDW)和數(shù)據(jù)集市層(DM)3層。ODS層與EDW層共同構(gòu)成企業(yè)統(tǒng)一數(shù)據(jù)平臺(tái)。ODS層主要實(shí)現(xiàn)企業(yè)數(shù)據(jù)整合、共享和準(zhǔn)實(shí)時(shí)運(yùn)營(yíng)監(jiān)控等功能,EDW層為中央數(shù)據(jù)倉(cāng)庫(kù),將不同的OLTP數(shù)據(jù)集中到面向主題、集成、穩(wěn)定、隨時(shí)間變化的統(tǒng)一數(shù)據(jù)層中,主要為企業(yè)提供分析決策服務(wù)。DM層是針對(duì)各部門(mén)的特殊分析需要設(shè)計(jì)獨(dú)立數(shù)據(jù)集市(即EDW的子集),建立維度匯總信息,為不同部門(mén)業(yè)務(wù)應(yīng)用建立匯總數(shù)據(jù)區(qū)。

1.1.4 應(yīng)用服務(wù)層

應(yīng)用服務(wù)層是訪問(wèn)數(shù)據(jù)倉(cāng)庫(kù)信息的核心,它接收用戶(hù)請(qǐng)求訪問(wèn)數(shù)據(jù)倉(cāng)庫(kù),生成各種形式的復(fù)雜報(bào)表,并以多種方式展現(xiàn),包括預(yù)定義報(bào)表、多維分析、即席查詢(xún)、數(shù)據(jù)挖掘等。

1.1.5 用戶(hù)訪問(wèn)層

用戶(hù)訪問(wèn)層是數(shù)據(jù)服務(wù)與決策人員、管理人員、分析人員和業(yè)務(wù)人員等用戶(hù)之間的接口,該層提供用戶(hù)對(duì)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)的瀏覽、請(qǐng)求、存取等服務(wù),以及向用戶(hù)的數(shù)據(jù)交付。

1.2 自主集成的基于Pentaho的BI平臺(tái)

針對(duì)基建工程決策支持系統(tǒng)框架,在開(kāi)源的商業(yè)智能BI(Business Intelligence)平臺(tái)基礎(chǔ)上構(gòu)建自主集成的BI平臺(tái)。構(gòu)建平臺(tái)分兩步走:首先是開(kāi)源商業(yè)智能BI平臺(tái)選型,其次是自主集成商業(yè)智能平臺(tái)。

1.2.1 開(kāi)源商業(yè)智能平臺(tái)選型

選擇開(kāi)源的商業(yè)智能BI平臺(tái)的依據(jù)有:平臺(tái)具有開(kāi)放性、靈活性和功能全面。開(kāi)放性是指源代碼開(kāi)放,在此基礎(chǔ)上才能實(shí)現(xiàn)靈活性;靈活性是指平臺(tái)小巧,可移植,可集成;功能全面是指具有通用商業(yè)智能平臺(tái)的數(shù)據(jù)集成、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)分析和數(shù)據(jù)展現(xiàn)功能。通過(guò)追蹤權(quán)威咨詢(xún)機(jī)構(gòu)Gartner從2010-2016年的年度BI報(bào)告[3],開(kāi)源BI平臺(tái)Pentaho連續(xù)6年入圍商業(yè)智能魔力四象限圖,因此,我們選擇Pentaho作為決策支持系統(tǒng)的商業(yè)智能平臺(tái)。Pentaho滿(mǎn)足通用商業(yè)智能平臺(tái)數(shù)據(jù)集成、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)分析和數(shù)據(jù)展現(xiàn)的功能[4],此外,Pentaho主要目標(biāo)是和商業(yè)BI抗衡,市面上已經(jīng)有一些基于Pentaho的決策支持系統(tǒng)研發(fā)的實(shí)例可供參考[5-7]。然而,Pentaho在頁(yè)面框架設(shè)計(jì)的靈活性和報(bào)表展現(xiàn)的美觀性?xún)煞矫婺芰^弱,同時(shí),考慮到對(duì)大數(shù)據(jù)存儲(chǔ)與分析的需求,基于Pentaho平臺(tái)我們提出一種自主集成的商業(yè)智能BI平臺(tái)。

1.2.2 自主集成BI平臺(tái)

自主集成的商業(yè)智能平臺(tái)分為數(shù)據(jù)持久化層、服務(wù)層、控制層、表現(xiàn)層。數(shù)據(jù)持久化層集成了文件訪問(wèn)、Hibernate和JDBC,Hibernate是一個(gè)開(kāi)源框架,是對(duì)象關(guān)聯(lián)關(guān)系映射的框架,支持各種關(guān)系數(shù)據(jù)庫(kù),對(duì)JDBC做了輕量級(jí)的封裝,因此,能夠很好地支持對(duì)異構(gòu)數(shù)據(jù)源的訪問(wèn)。數(shù)據(jù)持久層之下集成了Hadoop生態(tài)圈的HDFS、Hbase、Hive和Spark,支持批量數(shù)據(jù)、實(shí)時(shí)數(shù)據(jù)和增量數(shù)據(jù)的存儲(chǔ)和訪問(wèn)[8-17]。服務(wù)層包含Pentaho的即席查詢(xún)、多維分析展示、OLAP引擎、多維立方體構(gòu)建等功能組件,并集成了數(shù)據(jù)挖掘構(gòu)件Weka,大數(shù)據(jù)分析構(gòu)件Mahout、MLLib,ETL構(gòu)件Kettle、Sqoop等??刂茖硬捎肧pring MVC,分離了控制器、模型對(duì)象、分派器以及處理程序?qū)ο蟮慕巧?,這種分離讓他們更容易進(jìn)行定制。表現(xiàn)層則采用基于Web前端開(kāi)源框架Bootstrap的ACE頁(yè)面框架模板,能夠?qū)崿F(xiàn)靈活的頁(yè)面設(shè)計(jì)。平臺(tái)對(duì)每一層都提供了相應(yīng)的支持,系統(tǒng)開(kāi)發(fā)時(shí),可以方便訪問(wèn)已有的公共構(gòu)件。上述技術(shù)均是基于Java實(shí)現(xiàn),符合開(kāi)放源碼基礎(chǔ)軟件要求。

2 系統(tǒng)建設(shè)

本文以基建工程的“基本建設(shè)與房地產(chǎn)資源”兩項(xiàng)普查數(shù)據(jù)和基建工程各處室在用的18個(gè)業(yè)務(wù)系統(tǒng)的業(yè)務(wù)數(shù)據(jù)為數(shù)據(jù)源建立數(shù)據(jù)倉(cāng)庫(kù),在數(shù)據(jù)倉(cāng)庫(kù)之上建立多維數(shù)據(jù)模型,利用自主集成平臺(tái)中Pentaho的OLAP引擎Mondrian對(duì)數(shù)據(jù)進(jìn)行多維度、多層次分析,并通過(guò)Saiku將分析結(jié)果展現(xiàn)出來(lái)。利用ACE頁(yè)面框架做報(bào)表展現(xiàn)。

2.1 數(shù)據(jù)倉(cāng)庫(kù)建模

數(shù)據(jù)倉(cāng)庫(kù)模型是針對(duì)特定的數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用系統(tǒng)的數(shù)據(jù)模型,在整個(gè)數(shù)據(jù)倉(cāng)庫(kù)的建模過(guò)程中,一般需要經(jīng)歷四個(gè)過(guò)程:業(yè)務(wù)建模,生成業(yè)務(wù)模型,主要解決業(yè)務(wù)層面的分解和程序化;領(lǐng)域建模,生成領(lǐng)域模型,主要是對(duì)業(yè)務(wù)模型進(jìn)行抽象處理;邏輯建模,生成邏輯模型,主要是將領(lǐng)域模型的概念實(shí)體以及實(shí)體之間的關(guān)系進(jìn)行數(shù)據(jù)庫(kù)層次的邏輯化;物理建模,生成物理模型,主要解決邏輯模型針對(duì)不同關(guān)系型數(shù)據(jù)庫(kù)的物理化以及性能等一些具體的技術(shù)問(wèn)題[1]。本節(jié)重點(diǎn)介紹基建工程數(shù)據(jù)倉(cāng)庫(kù)的業(yè)務(wù)建模、邏輯建模和物理建模。

2.1.1 業(yè)務(wù)建模

結(jié)合基建工程業(yè)務(wù)特點(diǎn),將基建工程數(shù)據(jù)倉(cāng)庫(kù)內(nèi)容規(guī)劃為公共基礎(chǔ)、工程建設(shè)管理、土地、住房管理、環(huán)保綠化和空余房地產(chǎn)等六大業(yè)務(wù)管理主線(xiàn),在每個(gè)業(yè)務(wù)主線(xiàn)內(nèi),考慮相應(yīng)的業(yè)務(wù)主線(xiàn)需要分析的業(yè)務(wù)主題(圖1)。

公共基礎(chǔ)主題:指地區(qū)、單位、坐落和分棟四類(lèi)基礎(chǔ)信息,公共基礎(chǔ)主題是數(shù)據(jù)倉(cāng)庫(kù)中最基礎(chǔ)、最核心的內(nèi)容,所有的業(yè)務(wù)活動(dòng)都是圍繞地區(qū)、單位、坐落和分棟展開(kāi),與其他主題產(chǎn)生緊密聯(lián)系。

工程建設(shè)管理主題:存放機(jī)場(chǎng)、地下工程、地面工程、人防工程等設(shè)施數(shù)質(zhì)量情況,泵類(lèi)、風(fēng)機(jī)、柴油發(fā)電機(jī)組、配電屏(柜)、控制臺(tái)、變壓器、除濕機(jī)、空調(diào)、電加熱器和鍋爐等設(shè)備數(shù)質(zhì)量情況。

土地主題:存放土地資源信息,包括土地資源總量,按城鄉(xiāng)、按地域、按地勢(shì)資源分布信息。

住房管理主題:存放公寓房、經(jīng)濟(jì)適用房、住用人員等相關(guān)實(shí)體,包括:住房數(shù)質(zhì)量情況,住用情況。

環(huán)保綠化主題:存放污染治理、綠化資源、放射性污染源等相關(guān)實(shí)體,包括:污染源總體情況與污染設(shè)施總體情況,綠化資源總量與分布情況,放射源與射線(xiàn)裝置的種類(lèi)、用途、數(shù)量、分布、使用和管理狀況。

空余房地產(chǎn)主題:存放空余房地產(chǎn)、租賃管理等相關(guān)實(shí)體,包括:儲(chǔ)備房地產(chǎn)、整坐落空余房地產(chǎn)、成片空余營(yíng)區(qū)數(shù)質(zhì)量情況,租賃坐落、項(xiàng)目、審批、繳費(fèi)辦證情況。

2.1.2 邏輯建模

目前業(yè)界較為流行的數(shù)據(jù)倉(cāng)庫(kù)的邏輯建模方法主要有范式建模法,維度建模法,實(shí)體建模法等。對(duì)于本系統(tǒng)來(lái)說(shuō),ODS層模型的表結(jié)構(gòu)與業(yè)務(wù)系統(tǒng)保持一致,因此,其邏輯模型采用與關(guān)系數(shù)據(jù)庫(kù)相一致的實(shí)體關(guān)系模型。EDW層數(shù)據(jù)模型依據(jù)圖3的主題劃分建立統(tǒng)一的數(shù)據(jù)模型。同時(shí),根據(jù)部門(mén)業(yè)務(wù)決策分析需求,采用維度建模法建立對(duì)應(yīng)的數(shù)據(jù)集市(DM,Data Market)模型。例如,住房管理業(yè)務(wù)關(guān)注從不同地區(qū)、不同單位、不同人員類(lèi)型、不同戶(hù)型、不同住房性質(zhì)等角度來(lái)掌握住房的面積、出售情況、套數(shù)、住用率,空置率等,因此,按照事實(shí)表,維表來(lái)構(gòu)建住房星型數(shù)據(jù)模型(圖2)。

2.1.3 物理建模

物理建模是將前面的邏輯數(shù)據(jù)模型落地的一個(gè)過(guò)程。首先是生成創(chuàng)建表的腳本,其次是針對(duì)數(shù)據(jù)集市的需要,按照維度建模的方法,生成事實(shí)表和維表等。在這里,我們介紹住房管理主題物理建模的方法。住房管理主題物理建模其實(shí)是建立住房管理多維立方體,該立方體為OLAP分析服務(wù)。本文借助Pentaho的Schema workbench來(lái)設(shè)計(jì)數(shù)據(jù)立方體,構(gòu)建物理的事實(shí)表和維度表。如圖3所示,該立方體包括一個(gè)住房事實(shí)表(圖3的zffact表),多個(gè)維度表(例如,人員類(lèi)別表見(jiàn)圖3的rylb表,住房性質(zhì)表見(jiàn)圖3的zfxingzhi表等)。

將源數(shù)據(jù)加載到數(shù)據(jù)倉(cāng)庫(kù)的過(guò)程有兩種形式,一種是進(jìn)入數(shù)據(jù)庫(kù)后再進(jìn)行清洗和轉(zhuǎn)換,另一種是首先進(jìn)行清洗轉(zhuǎn)換再進(jìn)入數(shù)據(jù)庫(kù)。自主開(kāi)發(fā)的集成平臺(tái)中已經(jīng)集成了Kettle和Sqoop兩個(gè)數(shù)據(jù)ETL工具。其中,Kettle是集成在Pentaho中的開(kāi)源ETL工具,支持將源數(shù)據(jù)庫(kù)(一般是關(guān)系數(shù)據(jù)庫(kù))中的數(shù)據(jù)進(jìn)行清洗轉(zhuǎn)換后再裝載入數(shù)據(jù)倉(cāng)庫(kù)。Sqoop是用于Hadoop大數(shù)據(jù)存儲(chǔ)和關(guān)系數(shù)據(jù)庫(kù)數(shù)據(jù)存儲(chǔ)相互轉(zhuǎn)移的開(kāi)源工具。目前主要是將業(yè)務(wù)數(shù)據(jù)庫(kù)中的數(shù)據(jù)抽取到數(shù)據(jù)倉(cāng)庫(kù)中,因此,本文采用Kettle實(shí)現(xiàn)從源數(shù)據(jù)層到數(shù)據(jù)倉(cāng)庫(kù)層的數(shù)據(jù)清洗、轉(zhuǎn)換和加載。圖4是采用Kettle加載住房管理主題數(shù)據(jù)集市的過(guò)程。

2.3 數(shù)據(jù)分析應(yīng)用實(shí)例

在數(shù)據(jù)倉(cāng)庫(kù)基礎(chǔ)上,基建工程分析決策系統(tǒng)目前實(shí)現(xiàn)了:采用ACE頁(yè)面框架實(shí)現(xiàn)統(tǒng)計(jì)報(bào)表功能,例如,采用文本描述與餅圖展示相結(jié)合的方式統(tǒng)計(jì)住房數(shù)質(zhì)量情況,為進(jìn)一步優(yōu)化配置住房資源提供科學(xué)的決策依據(jù),如圖5;采用Pentaho的Mondrian和MDX實(shí)現(xiàn)多維交叉分析功能,并利用Saiku實(shí)現(xiàn)多維分析展現(xiàn),例如,從使用單位、戶(hù)型分類(lèi)、住房質(zhì)量等多個(gè)維度掌握住房分布情況,支持下鉆、旋轉(zhuǎn)等操作,并支持自定義多維分析,為住房精細(xì)化管理提供數(shù)據(jù)支持,如圖6。

將源數(shù)據(jù)加載到數(shù)據(jù)倉(cāng)庫(kù)的過(guò)程有兩種形式,一種是進(jìn)入數(shù)據(jù)庫(kù)后再進(jìn)行清洗和轉(zhuǎn)換,另一種是首先進(jìn)行清洗轉(zhuǎn)換再進(jìn)入數(shù)據(jù)庫(kù)。自主開(kāi)發(fā)的集成平臺(tái)中已經(jīng)集成了Kettle和Sqoop兩個(gè)數(shù)據(jù)ETL工具。其中,Kettle是集成在Pentaho中的開(kāi)源ETL工具,支持將源數(shù)據(jù)庫(kù)(一般是關(guān)系數(shù)據(jù)庫(kù))中的數(shù)據(jù)進(jìn)行清洗轉(zhuǎn)換后再裝載入數(shù)據(jù)倉(cāng)庫(kù)。Sqoop是用于Hadoop大數(shù)據(jù)存儲(chǔ)和關(guān)系數(shù)據(jù)庫(kù)數(shù)據(jù)存儲(chǔ)相互轉(zhuǎn)移的開(kāi)源工具。目前主要是將業(yè)務(wù)數(shù)據(jù)庫(kù)中的數(shù)據(jù)抽取到數(shù)據(jù)倉(cāng)庫(kù)中,因此,本文采用Kettle實(shí)現(xiàn)從源數(shù)據(jù)層到數(shù)據(jù)倉(cāng)庫(kù)層的數(shù)據(jù)清洗、轉(zhuǎn)換和加載。圖4是采用Kettle加載住房管理主題數(shù)據(jù)集市的過(guò)程。

2.3 數(shù)據(jù)分析應(yīng)用實(shí)例

在數(shù)據(jù)倉(cāng)庫(kù)基礎(chǔ)上,基建工程分析決策系統(tǒng)目前實(shí)現(xiàn)了:采用ACE頁(yè)面框架實(shí)現(xiàn)統(tǒng)計(jì)報(bào)表功能,例如,采用文本描述與餅圖展示相結(jié)合的方式統(tǒng)計(jì)住房數(shù)質(zhì)量情況,為進(jìn)一步優(yōu)化配置住房資源提供科學(xué)的決策依據(jù),如圖5;采用Pentaho的Mondrian和MDX實(shí)現(xiàn)多維交叉分析功能,并利用Saiku實(shí)現(xiàn)多維分析展現(xiàn),例如,從使用單位、戶(hù)型分類(lèi)、住房質(zhì)量等多個(gè)維度掌握住房分布情況,支持下鉆、旋轉(zhuǎn)等操作,并支持自定義多維分析,為住房精細(xì)化管理提供數(shù)據(jù)支持,如圖6。

3 結(jié) 語(yǔ)

本文闡述了基于數(shù)據(jù)倉(cāng)庫(kù)的基建工程決策支持系統(tǒng)架構(gòu)與商業(yè)智能開(kāi)發(fā)平臺(tái)構(gòu)建,詳細(xì)介紹了基建工程數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)建模、數(shù)據(jù)分析與展現(xiàn)的技術(shù)實(shí)現(xiàn)。后續(xù)工作將在數(shù)據(jù)倉(cāng)庫(kù)及多維分析基礎(chǔ)上,采用數(shù)據(jù)挖掘技術(shù),在項(xiàng)目計(jì)劃動(dòng)態(tài)排序、工程建設(shè)“三超”評(píng)估、房地產(chǎn)資源配置優(yōu)化、保障能力評(píng)估、基建工程管理制度輔助決策等方面進(jìn)行更深層次的知識(shí)挖掘。

主要參考文獻(xiàn)

[1][美]羅伯特·拉柏格.數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用指南:數(shù)據(jù)倉(cāng)庫(kù)與商務(wù)智能最佳實(shí)踐[M].祝洪凱,譯.北京:機(jī)械工業(yè)出版社,2012.

[2]趙衛(wèi)東.商務(wù)智能[M].第3版.北京,清華大學(xué)出版社,2014.

[3]Gartner. Magic Quadrant for Business Intelligence and Analytics Platforms[EB/OL]. http://www.gartner.com/doc/2668318/magic-quadrant-business-intelligence-analytics,2016.

[4]Roland Bouman, Jos van Dongen. Pentaho Solutions: Business Intelligence and Data Warehousing with Pentaho and MySQL[M]. Wiley Publishing Inc, 2009.

[5]曾希強(qiáng).基于Pentaho的電話(huà)中心商務(wù)智能系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D].成都:電子科技大學(xué),2013.

[6]陳榮鑫,付永剛,陳維斌.基于Pentaho的商業(yè)智能系統(tǒng)[J].計(jì)算機(jī)工程與設(shè)計(jì),2008,29(9):2407-2409.

[7]范鑫,何中威,張素偉.基于Pentaho的數(shù)據(jù)中心研究及應(yīng)用[J].計(jì)算機(jī)與現(xiàn)代化,2015(11):12-16.

[8]趙英杰.基于商業(yè)智能技術(shù)的決策支持系統(tǒng)設(shè)計(jì)與開(kāi)發(fā)[D].北京:北京工業(yè)大學(xué),2012.

[9] 楊海波,李建林,洪貞啟.潛射導(dǎo)彈作戰(zhàn)指揮輔助決策支持系統(tǒng)框架[J].火力與指揮控制,2015, 40(1):122-125.

[10]毛鶯池,閔偉,接青,等.基于動(dòng)態(tài)影像的實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)存取處理技術(shù)[J]. 計(jì)算機(jī)與現(xiàn)代化,2015(3):108-112.

[11]何麗麗.商務(wù)智能決策支持系統(tǒng)框架的研究與設(shè)計(jì)[D].哈爾濱:哈爾濱工業(yè)大學(xué),2012.

[12]夏火松,甄化春.大數(shù)據(jù)環(huán)境下輿情分析與決策支持研究文獻(xiàn)綜述[J].情報(bào)雜志,2015,34(2):1-7.

[13]羅賀,楊善林,丁帥.云計(jì)算環(huán)境下的智能決策研究綜述.系統(tǒng)工程學(xué)報(bào)[J].2013,28(1):134-143.

[14]崔杰,李陶深,蘭紅星.基于Hadoop的海量數(shù)據(jù)存儲(chǔ)平臺(tái)設(shè)計(jì)與開(kāi)發(fā)——計(jì)算機(jī)研究與發(fā)展[J].2012(s1):12-18.

[15]趙長(zhǎng)明. 我國(guó)二手房地產(chǎn)交易價(jià)格風(fēng)險(xiǎn)的核算[J]. 統(tǒng)計(jì)與決策,2014(1):96-99.

[16]高獻(xiàn)衛(wèi),師智斌.基于Mahout的新用戶(hù)推薦算法的設(shè)計(jì)與實(shí)現(xiàn)[J].計(jì)算機(jī)工程與科學(xué),2015,37(8):1444-1449.

[17]唐長(zhǎng)城,楊峰,代棟,等.一種基于Hbase的數(shù)據(jù)持久性和可用性研究[J].計(jì)算機(jī)系統(tǒng)應(yīng)用,2013,22(10):175-180.

猜你喜歡
數(shù)據(jù)倉(cāng)庫(kù)
基于數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)傾斜解決方案研究
基于數(shù)據(jù)倉(cāng)庫(kù)的住房城鄉(xiāng)建設(shè)信息系統(tǒng)整合研究
頁(yè)巖氣工程大數(shù)據(jù)倉(cāng)庫(kù)建設(shè)與管理系統(tǒng)開(kāi)發(fā)
錄井工程(2017年3期)2018-01-22 08:39:50
分布式存儲(chǔ)系統(tǒng)在液晶面板制造數(shù)據(jù)倉(cāng)庫(kù)中的設(shè)計(jì)
電子制作(2016年15期)2017-01-15 13:39:15
探析電力系統(tǒng)調(diào)度中數(shù)據(jù)倉(cāng)庫(kù)技術(shù)的應(yīng)用
數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)
基于數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)分析探索與實(shí)踐
數(shù)據(jù)復(fù)用在存儲(chǔ)數(shù)據(jù)倉(cāng)庫(kù)中的運(yùn)用
卷宗(2014年12期)2014-04-02 15:22:16
論銷(xiāo)售數(shù)據(jù)倉(cāng)庫(kù)的需求分析和概念模型設(shè)計(jì)
河南科技(2014年5期)2014-02-27 14:08:51
應(yīng)用數(shù)據(jù)倉(cāng)庫(kù)可以給我們帶來(lái)什么
普格县| 马龙县| 北宁市| 锦州市| 嘉定区| 宿迁市| 禄丰县| 海城市| 德阳市| 金山区| 光山县| 长武县| 岳阳县| 威信县| 怀柔区| 卢湾区| 桐柏县| 峨眉山市| 丁青县| 金阳县| 琼海市| 安远县| 达拉特旗| 体育| 璧山县| 蕉岭县| 肇庆市| 莱西市| 达拉特旗| 阜康市| 息烽县| 乌兰察布市| 怀安县| 鹤山市| 武清区| 岳池县| 武邑县| 密山市| 兴国县| 沁源县| 连南|