李文全，徐素萍，彭新東

（韶關學院 信息工程學院，廣東 韶關 512005）

高校信息化項目是以促進信息技術與教育教學深度融合為理念，以現(xiàn)代信息技術為手段，旨在全面促進高校教學改革和教育發(fā)展的新建、擴建的工程項目［1］.由于高校信息化項目建設過程中存在機構改革、需求變更、資源調整等風險因素，常常導致項目進度超期和成本超支，難于達到預期效果，造成資源浪費和大量的重復建設［2］.開展高校信息化項目實施績效評價，找出制約教育信息化發(fā)展的因素，為信息化建設提供改進依據(jù)和發(fā)展導向，是當前高校教育信息化工作的核心內容.

信息化項目績效評價的重要性已經引起了關注，并提出了相關的信息化績效評價體系［3］.但研究多是側重于企業(yè)信息化項目的評價，沒有結合高校教育領域特點，存在評價指標不明確、結果難量化的問題，不能直接運用于高校信息化項目實施績效的評價.筆者在詳細分析信息化項目建設各階段的特點基礎上，找出影響項目績效的關鍵因素，構建了基于項目立項、項目過程、項目成效、項目發(fā)展的高校信息化項目實施績效的評價模型，并采用了層次分析法確定了各評價指標權重，利用模糊綜合評價法對評價結果進行了量化，最后通過具體實例驗證了模型的有效性.

1 模糊綜合評價模型

高校信息化項目實施績效評價的目的是通過科學的方法，客觀地評價項目實施績效，使決策者及時掌握項目實施的成效，為優(yōu)化教育信息化發(fā)展策略提供依據(jù).高校信息化項目實施績效評價過程分為兩步：一是構建科學的評價指標體系；二是采用模糊數(shù)學方法綜合評價.

1.1 評價指標體系的構建

1.1.1 評價內容

高校信息化項目實施過程分為項目立項、項目過程、項目成效、項目發(fā)展等4個階段.評價項目實施的績效需要對每個階段進行科學合理地評價.

（1）項目立項.項目立項是項目實施之前的階段，需要評價項目的來源和項目的意義，包括項目必要性、程序規(guī)范性、需求充分性.項目必要性指當前信息化項目建設的重要性和開發(fā)任務的迫切性；程序規(guī)范性指項目立項流程的合規(guī)性，主要評價立項依據(jù)，專家評審意見、招投標流程；需求充分性指項目用戶對信息化項目需求的明確程度，包括功能的完整性和技術的可行性.

（2）項目過程.項目過程是指項目開始到正式投入使用的過程，需要評價項目的實施質量，包括投資控制、質量控制、進度控制.投資控制指在項目投資預算條件下，評價各種費用開支的合理性；質量控制指在達到項目目標的要求下，評價采取的技術措施和管理措施的有效性；進度控制指對工作進度進行時間的控制，評價項目計劃執(zhí)行的合理性.

（3）項目成效.項目成效是指項目投入使用后，分析項目運行的關鍵指標監(jiān)測數(shù)據(jù)，評價項目的應用效果，包括用戶滿意度、系統(tǒng)性能、業(yè)務集成、決策輔助、穩(wěn)定性和安全性.用戶滿意度是評價項目對流程優(yōu)化、效率提高、成本節(jié)約、服務改進、工作條件改善而使用用戶滿意的程度；系統(tǒng)性能是評價項目的響應時間、可靠性、易用性、技術成熟性和硬件利用率；業(yè)務集成是評價項目與內外部業(yè)務系統(tǒng)的協(xié)同程度，包括數(shù)據(jù)采集規(guī)范性和數(shù)據(jù)共享的便利性；決策輔助是評價項目輔助各層決策的科學性和準確性；安全性是評價項目的安全等級、數(shù)據(jù)災備和數(shù)據(jù)加密情況.

（4）項目發(fā)展.項目發(fā)展是指項目的可持續(xù)性發(fā)展的能力，需要評價項目運行維護、可擴充性、組織保障和廠商質量.運行維護是根據(jù)項目日常運行情況，評價項目可維護性，主要包括日常運行的穩(wěn)定性、維護的及時性、工作日志的規(guī)范性和項目文檔的完整性；可擴充性是評價項目適應新環(huán)境和新業(yè)務的能力，包括功能擴展、技術擴展和業(yè)務擴展；組織保障是評價項目管理機構的完整程度和人員配置的健全程度；廠商質量是評價實施項目廠家的質量，包括廠家資質、響應時間、問題解決能力.

1.1.2 構建評價指標體系

在詳細分析影響各階段績效關鍵因素的基礎上，遵循科學性、全面性和可操作性原則，提出了高校項目實施績效的評價指標，并通過信息化項目管理者和使用者的訪談和調研，修正與完善了指標體系，見表1.

表1 高校信息化項目績效評價指標體系

1.2 綜合評價指標體系權重

為了科學、全面地評價高校信息化項目實施績效，需要確定各指標的權重.評價指標權重的合理與否很大程度上影響綜合評價的正確性和科學性［4-6］.

1.2.1 基于層次分析法的指標權重方法

層次分析法是一種定性與定量相結合的系統(tǒng)分析和決策的方法，它將影響項目實施績效的各指標，劃分為相互關聯(lián)的層次結構，并對每一層次的各指標進行相對重要性的比較，計算出各層次指標的權重，進而得到相對目標的權重［7-8］.其基本步驟主要有幾個方面［9-10］.

（1）根據(jù)指標屬性分類，建立評價指標的層次結構.

（2）構造各層成對比較矩陣.采用兩兩比較法，在同一目標下評價兩個指標之間的重要性，并用1~9分制標示重要度，從而構造各層成對比較矩陣A=（aij）n×n，其中各標度含義為（同等重要、稍微重要、明顯重要、強烈重要、極端重要），對應的標度值為（1、3、5、7、9），標度2、4、6、8表示重要性介于兩奇數(shù)之間的中值.

（3）計算層次權重；采用和積法，分別計算各個成對比較矩陣的最大特征根和對應特征向量.計算步驟如下：

Step1：將成對比較矩陣按列進行歸一化處理，得到矩陣B：

Step2：將歸一化處理后的矩陣B按行相加，得到向量元素ri：

Step3：對向量R=（r1，r2，…rn）T歸一化處理，得到向量元素wi：

其中，向量W=（w1，w2，…wn）T即為成對比較矩陣的特征向量.

Step4：計算最大特征根λmax：

Step5：為了減少不同人員對重要性的評判差異，確保評判結果與實際相符，需要對結果進行一致性檢驗，其檢驗公式為：

其中，RI為平均隨機一致性指標，它與矩陣階數(shù)n有關，當n為3，4，5時，對應的RI值為0.58，0.89，1.12.當CR＜0.1時，則檢驗通過；否則修正成對比較矩陣.

1.2.2 確定綜合評價指標體系權重

采用多輪匿名調查方式，利用層次分析法計算出了高校信息化項目實施績效評價指標的層次權重和相對目標層權重，具體結果見表1.在相對評價目標的權重中，用戶滿意度（0.218）、投資控制（0.152）、系統(tǒng)性能（0.096）、項目必要性（0.088）、決策輔助（0.087）是權重最大且最重要的5個評價指標，是影響高校信息化項目績效的關鍵指標.為了提高信息化項目實施績效，可重點加強關鍵指標內容的管理，優(yōu)化關鍵指標的實施水平.

1.3 模糊綜合評價

模糊綜合評價是以模糊數(shù)學為基礎的綜合評價方法，能較好地解決指標難于量化的問題，比較適用于高校信息化項目實施績效涉及到的非確定因素［11-12］.主要步驟如下：

（1）建立評價對象指標集U，假設當前評價對象的指標有m個，則指標集U＝｛U1，U2，…，Um｝.

（2）建立評價等級集V＝｛V1，V2，…，Vn｝＝｛高，較高，一般，較低，低｝，各等級對應的測量標度為G＝｛5，4，3，2，1｝.

（3）確定各層指標的模糊隸屬度矩陣D=（dij）m×n，表示第i個指標評為第j個等級的隸屬程度，即：

（4）綜合評價：根據(jù)各指標層的模糊隸屬矩陣右乘權重向量，得到各級指標的模糊綜合評價集：Mi=（mij）1×n=W1×mDm×n.

（5）量化結果：將模糊綜合評價集與等級標度值相乘，得到指標的量化結果S=MiGT.

2 模型應用

2.1 評價過程

為了驗證高校信息化項目實施績效評價模型的有效性，以某高校辦公自動化項目實施為例，邀請了3名項目管理者、3名行業(yè)專家和4名學者共10人，對項目實施績效進行打分，得到二級指標的模糊隸屬度，見表2.

表2 指標的模糊隸屬度表

根據(jù)公式Mi=（mij）1×n=W1×mDm×n計算一級指標的模糊隸屬度，其中項目立項的隸屬度為（0.437，0.289，0.174，0.1，0），項目過程的隸屬度為（0.397，0.279，0.145，0.1，0.079），項目成效的隸屬度為（0.479，0.266，0.157，0.098，0），項目發(fā)展的隸屬度為（0.382，0.255，0.2，0.163，0）.同樣方法，計算出目標層的模糊隸屬度為（0.443，0.272，0.159，0.104，0.022）.最后，根據(jù)公式S=MiGT，得到最終評價結果為4.010 4.

2.2 評價結果分析

針對評價結果進行分析，首先，該校辦公自動化項目實施績效綜合評價得分為4.010 4，達到“較高”水平.同時，目標層的模糊評價為“高，較高，一般，較低，低”的隸屬度分別為0.443，0.272，0.159，0.104，0.022，根據(jù)最大隸屬度原則，該項目實施績效評價結果為“高”水平，因此，綜合分析可以得出該高校辦公自動化項目實施績效達到“較高”等級，但還有優(yōu)化空間；其次，影響目標層的項目立項、項目過程、項目成效、項目發(fā)展的綜合評價得分為4.064、3.815、4.127、3.855，說明項目立項和項目成效階段的績效水平達“較高”等級，而項目過程和項目發(fā)展的績效水平則處于一般和較高等級之間；最后，根據(jù)綜合評價結果可知，該項目實施偏弱環(huán)節(jié)在于項目過程，如需進一步提高信息化項目實施績效，應著重提高項目過程管理，尤其是要加強具有較大權重的投資控制環(huán)節(jié)的管理.

3 結語

開展高校信息化項目實施績效評價，有利于準確把握信息化項目的應用現(xiàn)狀和存在問題，找出制約信息化發(fā)展的關鍵因素，對促進高校教育信息化發(fā)展具有重要意義.在分析高校信息化項目實施的特點的基礎上，構建了模糊綜合評價模型.采用層次分析法確定了評價指標的權重，采用模糊評價方法，實現(xiàn)了評價結果的量化.最后結合具體實例開展評價，結果表明，該模型簡單實用，不僅能夠評價高校信息化項目的各階段實施績效水平，還能夠為優(yōu)化高校信息化建設提供指導建議.