劉天須 王子昂 張雪揚(yáng)
摘 要 數(shù)據(jù)資產(chǎn)是交通運(yùn)輸行業(yè)信息化建設(shè)的重要成果。如何保障數(shù)據(jù)資產(chǎn)有效、規(guī)范管理,本文從數(shù)據(jù)資源管理、數(shù)據(jù)標(biāo)準(zhǔn)符合性檢測(cè)、數(shù)據(jù)質(zhì)量管理等三個(gè)方面進(jìn)行應(yīng)用研究。
關(guān)鍵詞 數(shù)據(jù)資源管理;數(shù)據(jù)標(biāo)準(zhǔn)符合性檢測(cè);數(shù)據(jù)質(zhì)量管理
數(shù)據(jù)治理是通過(guò)對(duì)交通運(yùn)輸行業(yè)數(shù)據(jù)資源進(jìn)行綜合管控,保障數(shù)據(jù)準(zhǔn)確性、一致性、完整性、可用性和安全性。數(shù)據(jù)治理是為了規(guī)范數(shù)據(jù)標(biāo)準(zhǔn)、提高數(shù)據(jù)質(zhì)量和保證數(shù)據(jù)安全而建立的政策、組織、流程、技術(shù)保障體系。
1總體框架
為實(shí)現(xiàn)數(shù)據(jù)資源“一數(shù)一源,一源多用”,應(yīng)建立數(shù)據(jù)治理體系,確保采集源頭的唯一性和標(biāo)準(zhǔn)化,提高數(shù)據(jù)質(zhì)量,確保數(shù)據(jù)資源能在不同部門(mén)之間互聯(lián)互通和深層次應(yīng)用,為數(shù)據(jù)作為資產(chǎn)的價(jià)值與效益提供基礎(chǔ)保障。
交通運(yùn)輸行業(yè)數(shù)據(jù)治理總體框架如下圖1所示。
如上圖所示,交通運(yùn)輸數(shù)據(jù)治理主要內(nèi)容包括:
(1)治理對(duì)象:包括各業(yè)務(wù)領(lǐng)域形成的基礎(chǔ)數(shù)據(jù)庫(kù)、主題數(shù)據(jù)庫(kù)、業(yè)務(wù)數(shù)據(jù)庫(kù)、共享數(shù)據(jù)庫(kù);
(2)治理支撐:在交通運(yùn)輸行業(yè)信息化建設(shè)過(guò)程中,為保證數(shù)據(jù)的可靠性和一致性實(shí)現(xiàn)數(shù)據(jù)資源有效的管控,需要從管控組織、管控流程、管控工具和評(píng)價(jià)考核四個(gè)方面進(jìn)行建設(shè),四項(xiàng)工作內(nèi)容相互作用、相互支撐;
(3)治理任務(wù):主要是實(shí)現(xiàn)數(shù)據(jù)治理的具體途徑(方法),包括元數(shù)據(jù)資源管理、數(shù)據(jù)標(biāo)準(zhǔn)符合性測(cè)試和數(shù)據(jù)質(zhì)量管理。
本文主要針對(duì)數(shù)據(jù)治理任務(wù)進(jìn)行應(yīng)用研究[1]。
2數(shù)據(jù)資源管理
數(shù)據(jù)資源目錄管理主要面向行業(yè)業(yè)務(wù)管理部門(mén),其目的是協(xié)助行業(yè)管理部門(mén)掌握各自數(shù)據(jù)“固定資產(chǎn)”,以便讓各級(jí)授權(quán)用戶(hù)了解各自業(yè)務(wù)領(lǐng)域已經(jīng)沉淀了哪些數(shù)據(jù)資源?保存在什么地方?數(shù)據(jù)的質(zhì)量如何?找什么人聯(lián)系或通過(guò)什么方式可以獲???數(shù)據(jù)資源目錄管理是確保交通運(yùn)輸行業(yè)數(shù)據(jù)資源“一數(shù)一源、一源多用”的基礎(chǔ)和關(guān)鍵。
數(shù)據(jù)資源目錄管理應(yīng)在全行業(yè)數(shù)據(jù)資源整體規(guī)劃的基礎(chǔ)上,按照《交通運(yùn)輸政務(wù)信息資源目錄(2017版)》要求,對(duì)全行業(yè)政務(wù)信息進(jìn)行統(tǒng)一目錄編制。
(1)現(xiàn)有數(shù)據(jù)資源梳理:全面梳理省級(jí)、市級(jí)交通運(yùn)輸管理部門(mén)現(xiàn)有系統(tǒng)數(shù)據(jù)資源,細(xì)化到數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)項(xiàng)。
(2)明確權(quán)威數(shù)據(jù)源:基于數(shù)據(jù)資源規(guī)劃理論,進(jìn)行業(yè)務(wù)和數(shù)據(jù)流程分析,描述交通運(yùn)輸行業(yè)各類(lèi)業(yè)務(wù)過(guò)程之間輸入、輸出、存儲(chǔ)的數(shù)據(jù)流,以及與外單位之間的數(shù)據(jù)輸入、輸出數(shù)據(jù)流。
(3)目錄編制:基于交通運(yùn)輸行業(yè)數(shù)據(jù)資源分類(lèi)標(biāo)準(zhǔn)和目錄編制指南,對(duì)省市兩級(jí)現(xiàn)有梳理的數(shù)據(jù)資源和服務(wù)資源提取特征,形成元數(shù)據(jù),編制省、市交通運(yùn)輸數(shù)據(jù)資源目錄。
(4)目錄著錄:將本部門(mén)目錄編目形成的所有元數(shù)據(jù)通過(guò)元數(shù)據(jù)注冊(cè)系統(tǒng)向省、市級(jí)目錄中心的管理機(jī)構(gòu)注冊(cè)。
數(shù)據(jù)資源管理用于協(xié)助交通運(yùn)輸行業(yè)各相關(guān)業(yè)務(wù)部門(mén)實(shí)現(xiàn)數(shù)據(jù)資源治理、檢索、管理和共享,有效梳理數(shù)據(jù)資源,高效利用數(shù)據(jù)資產(chǎn)。數(shù)據(jù)資源管理功能包括數(shù)據(jù)資源目錄管理和元數(shù)據(jù)管理兩部分,其中數(shù)據(jù)資源目錄管理包括目錄生成、目錄審核、目錄發(fā)布、目錄更新和目錄查詢(xún)等功能,元數(shù)據(jù)管理包括元數(shù)據(jù)生成、元數(shù)據(jù)審核、元數(shù)據(jù)發(fā)布、元數(shù)據(jù)更新、元數(shù)據(jù)一張圖展示、元數(shù)據(jù)查詢(xún)分析等功能。
3數(shù)據(jù)標(biāo)準(zhǔn)符合性檢測(cè)
數(shù)據(jù)標(biāo)準(zhǔn)符合性測(cè)試系統(tǒng)的基本思路是基于JT/T 697.1-14、JT/T 1058-2016、JT/T 1021-2016等國(guó)家、交通運(yùn)輸部數(shù)據(jù)標(biāo)準(zhǔn),將待檢系統(tǒng)(各業(yè)務(wù)應(yīng)用系統(tǒng))數(shù)據(jù)字典、數(shù)據(jù)庫(kù)結(jié)構(gòu)、數(shù)據(jù)與標(biāo)準(zhǔn)進(jìn)行對(duì)比,從而檢測(cè)各待測(cè)業(yè)務(wù)應(yīng)用系統(tǒng)數(shù)據(jù)的數(shù)據(jù)類(lèi)型、數(shù)據(jù)格式、數(shù)據(jù)值域、數(shù)據(jù)約束等是否滿(mǎn)足標(biāo)準(zhǔn)相關(guān)要求。
數(shù)據(jù)標(biāo)準(zhǔn)符合性檢測(cè)針對(duì)數(shù)據(jù)的類(lèi)型、格式、單位、值域、約束等多維度進(jìn)行檢測(cè),數(shù)據(jù)標(biāo)準(zhǔn)符合性檢測(cè)是確保各業(yè)務(wù)應(yīng)用系統(tǒng)按照國(guó)家、行業(yè)相關(guān)數(shù)據(jù)標(biāo)準(zhǔn)采標(biāo)、貫標(biāo)的重要支撐手段,是大數(shù)據(jù)平臺(tái)數(shù)據(jù)資源標(biāo)準(zhǔn)化、共享化和真正由數(shù)據(jù)資源轉(zhuǎn)變?yōu)閿?shù)據(jù)資產(chǎn)的保障。
各業(yè)務(wù)應(yīng)用系統(tǒng)建設(shè)時(shí),在軟件系統(tǒng)數(shù)據(jù)字典編制、軟件開(kāi)發(fā)、驗(yàn)收準(zhǔn)備(試運(yùn)行)等階段應(yīng)進(jìn)行交通運(yùn)輸數(shù)據(jù)標(biāo)準(zhǔn)符合性檢測(cè)。
——軟件詳細(xì)設(shè)計(jì)階段:數(shù)據(jù)字典編制完成后,業(yè)務(wù)應(yīng)用系統(tǒng)建設(shè)單位應(yīng)組織利用標(biāo)準(zhǔn)符合性檢測(cè)系統(tǒng)對(duì)數(shù)據(jù)字典進(jìn)行標(biāo)準(zhǔn)符合性檢測(cè),檢測(cè)文檔中數(shù)據(jù)項(xiàng)的類(lèi)型、格式、單位、值域等的定義以及數(shù)據(jù)集的約束、出現(xiàn)次數(shù)等屬性是否滿(mǎn)足相關(guān)標(biāo)準(zhǔn)要求。軟件詳細(xì)設(shè)計(jì)階段數(shù)據(jù)字典通過(guò)標(biāo)準(zhǔn)符合性檢測(cè)后方可進(jìn)行軟件開(kāi)發(fā)階段;
——軟件開(kāi)發(fā)階段:應(yīng)嚴(yán)格按照軟件詳細(xì)設(shè)計(jì)階段數(shù)據(jù)字典的設(shè)計(jì),利用標(biāo)準(zhǔn)符合性檢測(cè)系統(tǒng)對(duì)數(shù)據(jù)庫(kù)表結(jié)構(gòu)進(jìn)行標(biāo)準(zhǔn)符合性檢測(cè),檢測(cè)數(shù)據(jù)庫(kù)中數(shù)據(jù)項(xiàng)的類(lèi)型、格式、單位、值域等的定義以及數(shù)據(jù)集的約束、出現(xiàn)次數(shù)等屬性是否滿(mǎn)足相關(guān)標(biāo)準(zhǔn)要求,生成數(shù)據(jù)庫(kù)表結(jié)構(gòu)的標(biāo)準(zhǔn)符合性檢測(cè)報(bào)告;
——驗(yàn)收準(zhǔn)備(試運(yùn)行):在業(yè)務(wù)應(yīng)用系統(tǒng)試運(yùn)行并積累一定數(shù)據(jù)量后(主要業(yè)務(wù)數(shù)據(jù)表記錄超過(guò)50條),應(yīng)用系統(tǒng)建設(shè)單位應(yīng)組織對(duì)系統(tǒng)數(shù)據(jù)庫(kù)表結(jié)構(gòu)和數(shù)據(jù)庫(kù)內(nèi)容(數(shù)據(jù)記錄)進(jìn)行標(biāo)準(zhǔn)符合性檢測(cè),生成數(shù)據(jù)庫(kù)內(nèi)容的標(biāo)準(zhǔn)符合性檢測(cè)報(bào)告。
標(biāo)準(zhǔn)符合性測(cè)試主要包括數(shù)據(jù)標(biāo)準(zhǔn)管理、檢測(cè)標(biāo)準(zhǔn)庫(kù)管理、檢測(cè)數(shù)據(jù)采集管理、標(biāo)準(zhǔn)符合性檢測(cè)和標(biāo)準(zhǔn)符合性檢測(cè)評(píng)估等功能。
4數(shù)據(jù)質(zhì)量管理
隨著交通行業(yè)信息化工程建設(shè)的不斷推進(jìn),交通運(yùn)輸行業(yè)對(duì)行業(yè)內(nèi)外各業(yè)務(wù)單位之間、與相關(guān)政府部門(mén)之間、相關(guān)省份之間信息共享與業(yè)務(wù)協(xié)同的需求越發(fā)迫切,對(duì)數(shù)據(jù)的完整性、準(zhǔn)確性、一致性、時(shí)效性、可訪問(wèn)性和安全性提出了更高的質(zhì)量要求。
——數(shù)據(jù)的完整性:數(shù)據(jù)覆蓋的空間范圍、數(shù)據(jù)內(nèi)容、時(shí)間范圍應(yīng)完整,滿(mǎn)足應(yīng)用需求;
——數(shù)據(jù)的準(zhǔn)確性:數(shù)據(jù)應(yīng)正確、真實(shí)、客觀地描述交通業(yè)務(wù)或?qū)ο蟮膶傩?
——數(shù)據(jù)的一致性:從多個(gè)渠道獲取的數(shù)據(jù)應(yīng)保持一致;
——數(shù)據(jù)的時(shí)效性:數(shù)據(jù)采集、更新應(yīng)符合規(guī)定要求;
——數(shù)據(jù)的可訪問(wèn)性:數(shù)據(jù)能被有效訪問(wèn);
——數(shù)據(jù)的安全性:數(shù)據(jù)在存儲(chǔ)、傳輸、處理過(guò)程中不被泄漏、破壞和免受未授權(quán)的修改。
數(shù)據(jù)質(zhì)量管理是根據(jù)定制的數(shù)據(jù)質(zhì)量校驗(yàn)規(guī)則對(duì)數(shù)據(jù)資源進(jìn)行檢查,形成質(zhì)量問(wèn)題數(shù)據(jù)記錄;同時(shí)實(shí)現(xiàn)數(shù)據(jù)質(zhì)量問(wèn)題發(fā)現(xiàn)登記、發(fā)布、修正反饋。
數(shù)據(jù)質(zhì)量管理主要功能包括數(shù)據(jù)質(zhì)量監(jiān)控、數(shù)據(jù)質(zhì)量問(wèn)題處理、數(shù)據(jù)質(zhì)量評(píng)估、數(shù)據(jù)質(zhì)量報(bào)告、數(shù)據(jù)質(zhì)量知識(shí)庫(kù)管理、數(shù)據(jù)質(zhì)量對(duì)外服務(wù)等6個(gè)功能。
5技術(shù)實(shí)現(xiàn)
如下圖2所示,通過(guò)對(duì)行業(yè)數(shù)據(jù)資源的整理,形成了全行業(yè)數(shù)據(jù)資源目錄管理體系。
圖2 交通運(yùn)輸行業(yè)數(shù)據(jù)資源目錄管理界面原型圖
基于行業(yè)數(shù)據(jù)標(biāo)準(zhǔn),實(shí)現(xiàn)了行業(yè)數(shù)據(jù)資源標(biāo)準(zhǔn)符合性檢測(cè),如下圖3所示。
圖3 交通運(yùn)輸行業(yè)數(shù)據(jù)標(biāo)準(zhǔn)符合性檢測(cè)界面原型圖
參考文獻(xiàn)
[1] 佚名.交通運(yùn)輸信息系統(tǒng)數(shù)據(jù)標(biāo)準(zhǔn)符合性檢測(cè)技術(shù)規(guī)程(報(bào)批稿)[ED/OL].https://wenku.baidu.com/view/9706872bcd84b9d528ea81c758f5f61fb736282f.html,2020-6-18.
作者簡(jiǎn)介
劉天須(1988-),男,河南人;專(zhuān)業(yè):交通運(yùn)輸信息化,學(xué)歷:碩士研究生,現(xiàn)就職單位:河南省交通通信中心。