王秀琴，梁中軍

(新疆氣象檔案館，新疆 830000)

0 引言

大數(shù)據(jù)時(shí)代的到來(lái)，引發(fā)了全球范圍的技術(shù)變革，數(shù)據(jù)已成為國(guó)家基礎(chǔ)性戰(zhàn)略資源，掌握豐富的高價(jià)值數(shù)據(jù)資源日益成為搶占未來(lái)發(fā)展主動(dòng)權(quán)的前提和保障。面對(duì)種類繁雜的數(shù)據(jù)信息，元數(shù)據(jù)在各類信息管理中得到廣泛應(yīng)用。

元數(shù)據(jù)(Metadate)又稱中介數(shù)據(jù)，是用來(lái)描述數(shù)據(jù)的數(shù)據(jù)。主要是指描述數(shù)據(jù)屬性的信息，用來(lái)支持指示存儲(chǔ)位置、歷史數(shù)據(jù)、文件的生成時(shí)間和數(shù)據(jù)源等。

元數(shù)據(jù)自身的特性，使其具有提高信息查詢效率，提升信息完整性，為用戶使用信息提供判斷依據(jù)，實(shí)現(xiàn)信息高效利用等功能。目前，元數(shù)據(jù)在各學(xué)科、各行業(yè)中也得到了廣泛應(yīng)用：元數(shù)據(jù)在信息系統(tǒng)中，通過(guò)說(shuō)明數(shù)據(jù)內(nèi)容、質(zhì)量和其他有關(guān)特征，實(shí)現(xiàn)數(shù)據(jù)的檢索、維護(hù)，使元數(shù)據(jù)成為了電子文件的“身份證”[1]；元數(shù)據(jù)是政府?dāng)?shù)據(jù)注冊(cè)管理和開放的重要基礎(chǔ)，通過(guò)建立多層級(jí)、易擴(kuò)展的元數(shù)據(jù)結(jié)構(gòu)體系，可提高不同政府部門與機(jī)構(gòu)間、政府部門與非政府機(jī)構(gòu)或組織間的互操作性，滿足不同的特定需求[2]；在圖書館資源管理中，元數(shù)據(jù)格式包括信息資源集合、網(wǎng)絡(luò)信息資源、數(shù)字圖像及文獻(xiàn)等，元數(shù)據(jù)對(duì)資源、數(shù)據(jù)的全方位描述，成為信息資源、數(shù)據(jù)的搜索目錄，也是信息組織管理及保存的一種先進(jìn)技術(shù)[3]；在地理國(guó)情普查數(shù)據(jù)成果的管理中，可利用元數(shù)據(jù)實(shí)現(xiàn)普查數(shù)據(jù)的選擇、識(shí)別、組織、管理、開發(fā)、利用和評(píng)價(jià)，以確保數(shù)據(jù)的真實(shí)性、完整性和安全性[4]。

1 氣象檔案數(shù)據(jù)面臨的問(wèn)題與挑戰(zhàn)

氣象檔案數(shù)據(jù)是為開展氣象業(yè)務(wù)布設(shè)的各類氣象臺(tái)站(含氣象衛(wèi)星)觀測(cè)并積累的，以及利用各種途徑收集、存檔的各種載體形式的氣象資料及其整編、分析成果等。氣象檔案數(shù)據(jù)具有顯著的時(shí)間性、空間差異性和地域差異性，是中國(guó)歷史年代最長(zhǎng)、保存最完整、最系統(tǒng)的地球信息資源[5]。而隨著氣象觀測(cè)技術(shù)的不斷發(fā)展，特別是高時(shí)空分辨力數(shù)據(jù)觀測(cè)技術(shù)的發(fā)展，氣象檔案數(shù)據(jù)多源頭、多種類、多格式和多處理環(huán)節(jié)等特點(diǎn)也日益凸顯，總體表現(xiàn)為以下幾個(gè)方面：

1)數(shù)據(jù)來(lái)源復(fù)雜：由于數(shù)據(jù)是在不同歷史時(shí)期由不同系統(tǒng)采集獲得，而傳統(tǒng)系統(tǒng)采用“煙筒”式建設(shè)，容易導(dǎo)致數(shù)據(jù)重復(fù)采集、不一致、不完整和準(zhǔn)確性不高的問(wèn)題，以及不同環(huán)節(jié)的數(shù)據(jù)管理缺失；

2)數(shù)據(jù)質(zhì)量沒(méi)有保障：氣象數(shù)據(jù)種類多、源頭多，目前只對(duì)個(gè)別種類個(gè)別站點(diǎn)數(shù)據(jù)進(jìn)行了有效的質(zhì)量控制，其他數(shù)據(jù)處于弱管理狀態(tài)，數(shù)據(jù)可靠性無(wú)法得到保證；

3)數(shù)據(jù)不能有效應(yīng)用：科研人員在實(shí)際工作中對(duì)數(shù)據(jù)的需求很大程度上得不到滿足，主要表現(xiàn)為數(shù)據(jù)匱乏，而這種匱乏，原因不在于缺少數(shù)據(jù)，而是數(shù)據(jù)很難被發(fā)現(xiàn)、獲取和認(rèn)識(shí)，可用性得不到保障。

元數(shù)據(jù)是解決以上數(shù)據(jù)問(wèn)題的有效途徑。元數(shù)據(jù)的本質(zhì)與目標(biāo)就是建立數(shù)據(jù)的聯(lián)系信息，對(duì)數(shù)據(jù)進(jìn)行描述，實(shí)現(xiàn)快速檢索，提升數(shù)據(jù)質(zhì)量的同時(shí)，為服務(wù)對(duì)象發(fā)現(xiàn)匹配資源。

文章擬從元數(shù)據(jù)在檔案數(shù)據(jù)存儲(chǔ)和應(yīng)用中的作用出發(fā)，研究氣象檔案數(shù)據(jù)收集、管理和服務(wù)中元數(shù)據(jù)編制方法，提出元數(shù)據(jù)庫(kù)及元數(shù)據(jù)知識(shí)圖譜建設(shè)的應(yīng)用思路，為氣象檔案數(shù)據(jù)管理提供參考。

2 元數(shù)據(jù)設(shè)計(jì)

基于氣象檔案數(shù)據(jù)應(yīng)用的元數(shù)據(jù)設(shè)計(jì)遵循WMO(世界氣象組織)核心元數(shù)據(jù)標(biāo)準(zhǔn)，主要參考QX/T 514-2019《氣象檔案元數(shù)據(jù)》及QX/T 544-2020《氣象數(shù)據(jù)發(fā)現(xiàn)元數(shù)據(jù)》設(shè)計(jì)細(xì)則。

2.1 元數(shù)據(jù)設(shè)計(jì)框架

元數(shù)據(jù)作為管理信息，是數(shù)據(jù)及用戶之間的交流媒介，形成的元數(shù)據(jù)信息需具備可檢索查閱和可調(diào)用功能。元數(shù)據(jù)對(duì)數(shù)據(jù)準(zhǔn)確、詳細(xì)地描述，將有效支撐數(shù)據(jù)檢索，也更加有利于用戶理解[6，7]。中國(guó)氣象局于2009年發(fā)布了氣象行業(yè)標(biāo)準(zhǔn)《氣象資料分類與編碼》，對(duì)氣象觀、探測(cè)資料的分類方法、類別及其編碼，以及根據(jù)分類進(jìn)行氣象數(shù)據(jù)文件命名的方法進(jìn)行了描述，目前已應(yīng)用于氣象數(shù)據(jù)加工、交換、服務(wù)和存儲(chǔ)過(guò)程中。基于氣象資料分類編碼框架，參考?xì)庀髷?shù)據(jù)文件規(guī)則、規(guī)范，提取數(shù)據(jù)中包含的元數(shù)據(jù)信息，還原為直白描述，記錄為可擴(kuò)展的置標(biāo)語(yǔ)言(XML格式)的文件結(jié)構(gòu)體，同時(shí)形成元數(shù)據(jù)信息庫(kù)，與業(yè)務(wù)系統(tǒng)通過(guò)接口實(shí)現(xiàn)連接訪問(wèn)(圖1)。

圖1 元數(shù)據(jù)框架

2.2 元數(shù)據(jù)基本信息

以氣象應(yīng)用為基礎(chǔ)的元數(shù)據(jù)，包括管理型和描述型兩部分內(nèi)容。充分考慮氣象檔案數(shù)據(jù)的地域性、時(shí)間性等特點(diǎn)，以四級(jí)編碼中的一級(jí)和二級(jí)編碼為依據(jù)，建立管理型元數(shù)據(jù)清單，包括類別、內(nèi)容、結(jié)構(gòu)和命名方式等，用于了解整體數(shù)據(jù)。對(duì)管理型元數(shù)據(jù)進(jìn)一步擴(kuò)展分級(jí)，將各類別信息進(jìn)行細(xì)化，四級(jí)編碼擴(kuò)展到第三、四級(jí)，分別對(duì)每一種數(shù)據(jù)進(jìn)行詳細(xì)信息描述，包括四級(jí)編碼、資料名稱、收集時(shí)間、內(nèi)容說(shuō)明、生產(chǎn)或加工中心、編碼格式、簡(jiǎn)式報(bào)頭、文件名規(guī)則、頻次、時(shí)次、發(fā)布時(shí)間、資料覆蓋范圍、數(shù)據(jù)量、資料來(lái)源、入庫(kù)情況、服務(wù)方式、資料用戶、廣播通道和目錄等。

2.3 元數(shù)據(jù)實(shí)例

以原始格式氣象多普勒雷達(dá)基數(shù)據(jù)為例，對(duì)其元數(shù)據(jù)進(jìn)行整理，步驟如下：根據(jù)四級(jí)編碼規(guī)則，氣象雷達(dá)在氣象資料大類中的簡(jiǎn)碼是J，原始格式多普勒雷達(dá)基數(shù)據(jù)2級(jí)碼為J.0010，根據(jù)正則表達(dá)式匹配原則，對(duì)數(shù)據(jù)庫(kù)中的原始格式多普勒雷達(dá)基數(shù)據(jù)進(jìn)行解析統(tǒng)計(jì)，可形成該類文件的管理元數(shù)據(jù)信息，即四級(jí)編碼、資料名稱、觀測(cè)站點(diǎn)、頻次、起止時(shí)間、資料覆蓋范圍和數(shù)據(jù)量等內(nèi)容。

元數(shù)據(jù)詳細(xì)信息的整理步驟為：根據(jù)數(shù)據(jù)文件編碼格式和命名規(guī)范等相關(guān)說(shuō)明文件，整理原始格式多普勒雷達(dá)基數(shù)據(jù)的內(nèi)容說(shuō)明、生產(chǎn)或加工中心、編碼格式、簡(jiǎn)式報(bào)頭、文件名規(guī)則、資料來(lái)源、頻次、服務(wù)方式、資料用戶、廣播通道和目錄等。

將以上2類信息進(jìn)行整合，即可得到原始格式多普勒雷達(dá)基數(shù)據(jù)元數(shù)據(jù)信息。

3 元數(shù)據(jù)管理應(yīng)用

隨著信息社會(huì)對(duì)氣象業(yè)務(wù)需求的不斷增長(zhǎng)，氣象檔案數(shù)據(jù)信息化建設(shè)已成為氣象事業(yè)可持續(xù)發(fā)展的重中之重。元數(shù)據(jù)是氣象信息化建設(shè)的基礎(chǔ)，是氣象檔案數(shù)據(jù)管理過(guò)程中用于資源組織及數(shù)據(jù)服務(wù)的基本工具。根據(jù)元數(shù)據(jù)的特征及其在氣象檔案數(shù)據(jù)管理中的必要性及可操作性，提出應(yīng)用參考。

3.1 元數(shù)據(jù)信息庫(kù)的應(yīng)用

建立氣象檔案數(shù)據(jù)元數(shù)據(jù)庫(kù)是為更好地進(jìn)行數(shù)據(jù)管理，數(shù)據(jù)元數(shù)據(jù)庫(kù)、數(shù)據(jù)存儲(chǔ)管理及數(shù)據(jù)服務(wù)3者之間的關(guān)系如圖2所示。

圖2 元數(shù)據(jù)信息關(guān)系

其中，數(shù)據(jù)元數(shù)據(jù)庫(kù)即是各類氣象數(shù)據(jù)的描述信息，并將元數(shù)據(jù)提交到元數(shù)據(jù)管理系統(tǒng)中。同時(shí)，數(shù)據(jù)管理人員及時(shí)更新元數(shù)據(jù)，使用戶能夠進(jìn)行各類氣象數(shù)據(jù)的查詢；用戶根據(jù)查詢結(jié)果向數(shù)據(jù)管理人員提出數(shù)據(jù)申請(qǐng)。數(shù)據(jù)存儲(chǔ)管理系統(tǒng)根據(jù)用戶需求，檢索元數(shù)據(jù)信息，根據(jù)正則匹配原則，向用戶提供數(shù)據(jù)存儲(chǔ)系統(tǒng)中的相關(guān)數(shù)據(jù)。

3.2 氣象檔案數(shù)據(jù)元數(shù)據(jù)知識(shí)圖譜的建立

知識(shí)圖譜技術(shù)屬于人工智能技術(shù)的一個(gè)分支[8]。2012年，谷歌首先提出知識(shí)圖譜的概念，知識(shí)圖譜作為一個(gè)知識(shí)庫(kù)，旨在提高其搜索引擎的能力。知識(shí)圖譜本質(zhì)上是一種語(yǔ)義網(wǎng)，旨在描述真實(shí)世界中存在的各種實(shí)體或者概念，以及他們之間的關(guān)系[9]。

知識(shí)圖譜以圖為基本結(jié)構(gòu)，各實(shí)體或者概念是圖譜的各節(jié)點(diǎn)結(jié)構(gòu)，而實(shí)體或概念的屬性及其之間的相互關(guān)系構(gòu)成各節(jié)點(diǎn)的邊結(jié)構(gòu)。對(duì)于元數(shù)據(jù)知識(shí)圖譜而言，不同類型的數(shù)據(jù)就是一個(gè)實(shí)體，這些實(shí)體構(gòu)成實(shí)體結(jié)點(diǎn)，數(shù)據(jù)的屬性構(gòu)成語(yǔ)義節(jié)點(diǎn)，屬性值構(gòu)成各節(jié)點(diǎn)的邊結(jié)構(gòu)。將各節(jié)點(diǎn)關(guān)聯(lián)到一起，就會(huì)形成一個(gè)三元組的組合，如：雷達(dá)觀測(cè)數(shù)據(jù)—基數(shù)據(jù)—J.001.*。一個(gè)實(shí)體可以有多種屬性，相對(duì)應(yīng)有多個(gè)屬性值，如地面氣象觀測(cè)日數(shù)據(jù)，可以有多種屬性，如頻次、資料來(lái)源、資料覆蓋范圍和服務(wù)方式等(圖3)。

圖3 地面氣象觀測(cè)日數(shù)據(jù)元數(shù)據(jù)知識(shí)圖譜

知識(shí)圖譜是元數(shù)據(jù)信息的圖形化展示，利用知識(shí)圖譜檢索技術(shù)，可提高元數(shù)據(jù)的查詢效率。用戶根據(jù)數(shù)據(jù)本身可查詢到數(shù)據(jù)的多種屬性，圖3中，用戶點(diǎn)擊地面氣象觀測(cè)日數(shù)據(jù)，即可同時(shí)獲取其多種屬性展示，根據(jù)需要，可查看相關(guān)內(nèi)容。而不同數(shù)據(jù)也可能存在相同的屬性值，圖3中，通過(guò)懸浮的知識(shí)圖譜屬性值“文件分發(fā)”，就可查詢到通過(guò)文件分發(fā)方式獲取的氣象數(shù)據(jù)。通過(guò)元數(shù)據(jù)知識(shí)圖譜獲取相關(guān)數(shù)據(jù)信息，可提高氣象數(shù)據(jù)智能應(yīng)用效率，極大地促進(jìn)了氣象數(shù)據(jù)應(yīng)用人員在實(shí)際工作中及時(shí)發(fā)現(xiàn)、認(rèn)識(shí)數(shù)據(jù)。

4 結(jié)束語(yǔ)

文章針對(duì)信息時(shí)代，氣象檔案數(shù)據(jù)海量增加，傳統(tǒng)檔案數(shù)據(jù)管理方式已無(wú)法滿足信息處理和利用的需求問(wèn)題，得出通過(guò)建立元數(shù)據(jù)信息庫(kù)及知識(shí)圖譜，實(shí)現(xiàn)檔案數(shù)據(jù)的有序存儲(chǔ)及查詢建議，為氣象檔案數(shù)據(jù)管理提供了參考。