□ 中國民航局 馬 駿 中國民航大學(xué) 陳 芳 劉玲莉 馬 媛/文

資料圖片

當前，中國民航處于高質(zhì)量發(fā)展“轉(zhuǎn)段進階”的關(guān)鍵階段，在規(guī)劃與改革“雙引擎驅(qū)動”的工作格局下，民航局把“完善航空安全管理體系” 作為“十四五”時期深化改革工作的第一專項部署加以推進?？梢灶A(yù)見，到2025年，中國民航將通過完善SMS，在安全監(jiān)督管理模式上實現(xiàn)突破，形成具有適應(yīng)性、引領(lǐng)性和前瞻性的行業(yè)安全治理體系。為此，2021年初中國民航局發(fā)布文件，初步建立起了一致規(guī)范性的行業(yè)SMS審核管理制度，下一步，改進完善現(xiàn)有的審核評估工具顯得尤為迫切。

在《國際民航SMS效能評估實施進展》一文中（詳見本刊2021年第7期），對比了相關(guān)區(qū)域（領(lǐng)域）官方（半官方）國際性組織、主要國家民航當局的SMS評估工具，包括歐盟航空安全局（EASA）、安全管理國際協(xié)作小組（SMICG）、澳大利亞民用航空安全局（CASA）、英國民用航空局（CAA）等發(fā)布的《EASA管理體系評估工具》、《SMICG SMS評估工具》、《CASA SMS評估工具》、《CAA SMS評估工具》，以及中國民航局《民航安全管理體系（SMS）審核管理辦法》、《民航空管安全管理體系（SMS）審核管理辦法》。研究發(fā)現(xiàn)，國內(nèi)外評估工具在“依據(jù)”、“使用方”以及“結(jié)果的運用”等方面存在區(qū)別。為了探索設(shè)計符合我國現(xiàn)階段SMS建設(shè)需求的效能評估工具，本文以國外典型SMS評估工具中的同一要素——“危險源識別”為例，展示、分析不同評估工具的評估架構(gòu)、設(shè)計思路和核心要素，對比其異同，提出我國民航SMS效能審核（或評估）工具架構(gòu)的設(shè)想。

國際民航SMS效能評估構(gòu)架設(shè)計

（一）EASA管理體系評估架構(gòu)設(shè)計

在使用《EASA管理體系評估工具》進行效能評估時，按照“安全方針和目標”、“安全風(fēng)險管理”、“安全保證”、“安全促進”以及“需要考慮的其他項目”進行評估。檢查表按照評估內(nèi)容包括“要素”、“要素PSOE級別”、“尋找什么”和相應(yīng)的歐盟或EASA要求等內(nèi)容，其設(shè)計樣式見圖1。

（二） SMICG SMS評估架構(gòu)設(shè)計

檢查表按照評估內(nèi)容包括“符合性+績效指標”、“PSOE級別選擇”、“如何實現(xiàn)”、“指標評價”、“尋找什么”以及“要素PSOE級別”等內(nèi)容，其設(shè)計樣式見圖2。

（三）CASA SMS評估架構(gòu)設(shè)計

《CASA SMS評估工具》中的檢查表按照評估內(nèi)容可分為“要素”、“符合性+績效指標”、“PSOE級別選擇”、“如何實現(xiàn)”、“指標評價”、“要素整體效能”以及“要素整體效能級別選擇和評價”等內(nèi)容，其設(shè)計樣式見圖3。

（四）CAA SMS評估架構(gòu)設(shè)計

《CAA SMS評估工具》中的檢查表按照評估內(nèi)容可分為“要素”、“符合性+績效指標”、“PSOE級別選擇”、“如何實現(xiàn)”、“尋找什么”、“指標評價”、“要素整體效能”以及“要素整體效能級別選擇和評價”等內(nèi)容，其設(shè)計樣式見圖4。

國際民航SMS效能評估架構(gòu)對比

（一）使用對象設(shè)計分析

圖1：EASA管理體系評估架構(gòu)

圖2：SMICG SMS評估架構(gòu)

圖3： CASASMS評估架構(gòu)

按照檢查單的使用對象劃分，國際上典型SMS效能評估工具檢查單的內(nèi)容包括關(guān)于要素要點以及審核證據(jù)等的描述、被評估組織填寫的內(nèi)容以及監(jiān)管當局填寫的內(nèi)容?！懊枋觥卑ā耙亍?、“符合性+績效指標”、“要素PSOE級別”、“尋找什么”以及“要素整體效能”。“被評估組織填寫的內(nèi)容”由被評估組織根據(jù)組織SMS實施情況，對照“描述”中的內(nèi)容，選擇每個指標目前實施所達到的級別，在“如何實現(xiàn)”中詳細闡述組織是如何實施該指標并達到所選擇的PSOE級別，包括“PSOE級別選擇”和“如何實現(xiàn)”。“監(jiān)管當局填寫的內(nèi)容”由監(jiān)管當局對每個要素下的指標以及要素整體效能進行評價，并說明對每個要素整體效能判斷的過程、評估理由、現(xiàn)場檢查情況等，包括“指標評價”、“要素整體效能級別選擇和評價”。對比情況見表1。

圖4：CAASMS評估架構(gòu)

從表1可以發(fā)現(xiàn)：

1.不同機構(gòu)或國家“描述”的內(nèi)容迥異

除《SMICG SMS評估工具》以外，其他三個典型SMS評估工具均包括“要素”，且都是來源于規(guī)章要求中的內(nèi)容，要素的描述也均以附件19中SMS的要求為主，是對被評估方在建設(shè)并保持該評估要素全面的要求。在此基礎(chǔ)上，《EASA管理體系評估工具》還詳細列出了每個要素對應(yīng)的組織遵守的規(guī)章文件。

“符合性+績效指標”是為了將要素轉(zhuǎn)變?yōu)楦阌诶斫夂蛯徍说木唧w指標，以便于更加全面且詳細地評估SMS效能，除《EASA管理體系評估工具》以外，其他三個評估工具均對此有不同詳略程度的“符合性+績效指標”的描述。

“要素PSOE級別”和“尋找什么”的設(shè)置上，《EASA管理體系評估工具》和《SMICG SMS評估工具》是一致的?！耙豍SOE級別”可以幫助評估工具的使用方將級別描述與被評估方的情況對照以做出正確的級別判斷，“尋找什么”給出了便于被評估組織或監(jiān)管當局判斷本要素所處級別的審核證據(jù)的提示。此外，《CAA SMS評估工具》也設(shè)置了“尋找什么”，而《CASA SMS評估工具》和《CAA SMS評估工具》均設(shè)置了“要素整體效能”。

2.不同機構(gòu)或國家“被評估組織填寫的內(nèi)容”和“監(jiān)管當局填寫的內(nèi)容”基本一致

表1：典型SMS效能評估工具對比

除《EASA管理體系評估工具》以外，其他三個評估工具均涵蓋由“被評估組織”填寫的內(nèi)容，包括“PSOE級別選擇”和“如何實現(xiàn)”；同時，均包括了“指標評價”。這是因為《EASA管理體系評估工具》沒有將每個評估要素劃分為對應(yīng)的“符合性+績效指標”，也就沒有了針對每個指標的評價部分，“指標評價”是依據(jù)“描述”中的內(nèi)容而進行的。

只有《CASA SMS評估工具》和《CAA SMS評估工具》具有“要素整體效能級別選擇和評價”，這是因為這兩個評估工具具有要素整效能評估的內(nèi)容。但二者對于每個要素整體效能判斷等級的劃分不同，其中，《CASA SMS評估工具》將評估要素的整體效能分為“沒有達到效能”和“達到效能”；《CAA SMS評估工具》將評估要素的整體效能分為初始的、存在并合適的、正在運行中的（但無效的）、取得成效的以及卓越五個級別。“要素整體效能級別選擇和評價”是依據(jù)“描述”以及被評估組織填寫完成后的內(nèi)容，再結(jié)合監(jiān)管當局評估的實際情況而填寫的。

（二）功能設(shè)計對比分析

SMS效能評估工具的檢查單功能設(shè)計框架包括“要素描述層”、“評估指導(dǎo)層”、“指標評估層”以及“效能評估層”。

對比國際民航SMS效能評估工具的檢查單架構(gòu)，可以發(fā)現(xiàn)：

1.除《SMICG SMS評估工具》以外，其他三個評估工具都包括“要素描述層”。

2.只有《EASA管理體系評估工具》和《SMICG SMS評估工具》包括“評估指導(dǎo)層”，均是為評估給出一定的參考，無需評估方或被評估方填寫。

3.除《EASA管理體系評估工具》以外，其他三個評估工具均包括“指標評估層”中的“符合性+績效指標”、“PSOE級別選擇”、“如何實現(xiàn)”以及“指標評價”四個評估要素，這是因為《EASA管理體系評估工具》中沒有將要素劃分為要點以及相對應(yīng)的“符合性+績效指標”。且只有《CAA SMS評估工具》中有“尋找什么”，盡管此處的“尋找什么”與“評估指導(dǎo)層”中的“尋找什么”的出現(xiàn)位置不同，但所起到的功能是相同的。

4.只有《CASA SMS評估工具》以及《CAA SMS評估工具》中有“效能評估層”，用于對要素的效能進行整體性評估。

我國民航SMS效能評估架構(gòu)設(shè)計構(gòu)想

為了滿足我國民航生產(chǎn)運行單位組織SMS效能自評、監(jiān)管單位對民航生產(chǎn)運行單位開展行政性評估的需要，并促進運行單位與監(jiān)管單位在SMS效能相關(guān)認識上進一步趨于一致，筆者通過對國際民航SMS效能評估工具的使用對象設(shè)計以及功能設(shè)計的分析，設(shè)計了我國民航SMS效能評估工具的架構(gòu)，見圖5。

圖5：我國民航SMS效能評估工具樣例

從圖5可以看出，我國民航SMS效能評估工具，在設(shè)計時參照了國際SMS效能評估工具檢查單的功能設(shè)計框架，其框架包括“要素描述層”、“評估指導(dǎo)層”、“指標評估層”以及“效能評估層”四個層級。按照檢查單的使用對象劃分的“描述”在四個層級中都有體現(xiàn)，“監(jiān)管當局填寫的內(nèi)容”體現(xiàn)在“效能評估層”以及“指標評估層”；“被評估組織填寫的內(nèi)容”體現(xiàn)在“指標評估層”。

1.要素描述層

該層級用于描述被評估要素，包括附件19《安全管理》SMS的12個“要素”的描述。

2.效能評估層

該層級用于說明附件19《安全管理》SMS的12個“要素”中的每一個要素的整體效能。該層級包括每一個要素的整體效能描述、PSOE的等級的選項和“評價”三部分。要素“PSOE”等級的選擇和“評價”內(nèi)容的撰寫由監(jiān)管當局根據(jù)該要素下設(shè)的所有“指標評估層”的效能審核要點的PSOE等級及實現(xiàn)情況綜合評定。

3.指標評估層

該層級用于從符合性和績效描述每一個評估指標“效能審核要點”，由被評估組織填寫的該指標“PSOE”等級的選擇、“如何實現(xiàn)”該指標效能的描述，以及由監(jiān)管當局填寫的該指標的效能水平的“評價”。

4.評估指導(dǎo)層

該層級為每一個評估指標提供其分別隸屬于存在的（P）、合適的（S）、運行中的（O）、有效的（E）的“效能審核提示”，包括“效能審核提示”和“PSOE級別”。

筆者認為，按照本文框架設(shè)計的SMS效能評估工具不僅能夠為評估提供詳細指導(dǎo)，也能夠?qū)崿F(xiàn)對要素整體效能的評估，同時也能為下一步設(shè)計出體現(xiàn)我國民航安全新發(fā)展理念的效能評估單、效能評估要點、效能評估審核提示以及效能審核等級判定等功能模塊打下基礎(chǔ)。