王 軍，張 坤，張淑華，鄧明俊，張 華

(北京協(xié)和醫(yī)學院 1.繼續(xù)教育學院； 2.教學服務中心， 北京 100730)

近年來，中國教育信息化進入新發(fā)展新階段，教育現(xiàn)代化改革迎來新機遇，教育信息化“十三五”規(guī)劃的總體部署和教育部關于加強高等學校在線開放課程建設應用與管理的意見等，均強調教育信息化對教育改革發(fā)展的引領作用，指出要深化在線教育資源開發(fā)應用和供給服務，由此產(chǎn)生了較大規(guī)模的在線教育資源。

1 在線教學資源評價研究的現(xiàn)狀

1.1 背景

優(yōu)質在線教育資源充分地流動和利用，對促進教育資源應用與共享，全面提高教學質量意義重大。而評判在線教育資源的優(yōu)質或否，則需要建立一定的標準?！督逃畔⒒臧l(fā)展規(guī)劃(2011—2020年)》指出需制定在線教學資源建設與共享的基本標準，建立在線教學資源評價與審查制度[1]。國家教育信息化“十三五”發(fā)展規(guī)劃也強調在線教育資源建設需建立準入、評價指標體系、評估方法及監(jiān)管機制。隨著在線教學資源的規(guī)模化擴增，迫切需要評估、評價指標體系保證教學資源的質量。

1.2 在線教學資源評價中存在的問題及原因

關于在線教學資源及評價模型的相關研究，主要為在線教學資源的設計、建設及應用[2]，及提出構建課程建設的相關評價指標體系。涉及到評價的內容，則主要是從服務質量評價展開[3]。具體方式通常是首先建設在線課程，再使用服務評價、學生學習效果評價方法等。而針對醫(yī)學在線教學資源的評價的相關研究較少，尚無一套具有綜合評價體系的模型，教學績效評價也較局限，導致投入很多資源建設的醫(yī)學課程并沒有充分發(fā)揮其應有的作用。

分析其主要原因一是教學資源建設投入和產(chǎn)出難以量化，尤其是醫(yī)學教學資源，其利用效率統(tǒng)計涉及多方面，如學生的滿意度、醫(yī)學學科資源布局合理程度、師生對大量的臨床實踐課需求是否滿足，課程自身的醫(yī)學或科普價值和使用后的效果等，必須通過長期追蹤才能獲取較準確的反饋數(shù)據(jù)；二是現(xiàn)代化教學資源迭代更新速度快，數(shù)量成指數(shù)級增長，同時醫(yī)學教育需要臨床指導教師多、實踐教學占比高、臨床教學的實際操作感替代難度大等特點使教學資源呈現(xiàn)出種類的復雜性和多樣性，因此相應的評價體系就需要有不同的標準和要求，用統(tǒng)一的標準來評價資源的有效性難度較大。

2 在線教學資源評價研究的框架

2.1 評價目標

教學資源評價目標需指向明確，使最終指向不僅應包括對在線教學資源在教學性等方面的質量的檢驗，同時也可對教學資源進行發(fā)展方向的引導?？上葘⒔虒W資源具體化為視頻資料類、微課類、課件類、手術示教類、機能實驗類、試卷類、互動答疑類等具體的素材資源；再細化、量化素材的視頻數(shù)量(個數(shù))、時間(分鐘)，學科系統(tǒng)化的課程的門數(shù)、題庫數(shù)、互動次數(shù)；最后是要和授課教師、學生需求相匹配，設計指標可包括用戶活躍度、反復觀看的視頻段、建設完成率、教師的在線課程復建率等，并逐項說明目標設立績效。

2.2 評價體系基本要素

評價指標體系的三要素包括評價主體、評價方法及評價指標。

評價主體：因參與評價的不同主體的觀念和立場不同，評價標準則不盡相同。需要根據(jù)專業(yè)主體評價者的身份設計不同的類別。目前根據(jù)實際使用情況可分為系統(tǒng)管理員、授課(示教)教師、醫(yī)學專家、在校醫(yī)學生或者醫(yī)學繼續(xù)教育等其他使用者等幾類。在評價的時候，根據(jù)不同的需要，可以進行單獨或者多個個體的組合。

評價方法：通過定量和定性相結合的方法對教學資源的價值進行判斷。定性的評價方法存在較強的主觀性，可在主觀評價上引入精確的技術手段，將復雜問題分解成若干個小問題，并充分利用人們分析、判斷綜合問題的能力，對復雜問題進行量化分析，將定性問題進行量化處理，主流的方法有層次分析法、回歸分析法、模糊綜合評判法、數(shù)據(jù)包絡分析方法EDA等[4]。

評價指標：評價指標是評價目標的可操作化分解，需要根據(jù)評價對象和主體設計，重點反映教學資源質量的優(yōu)劣，并有利于未來教學資源的優(yōu)化發(fā)展。

3 醫(yī)學在線教學資源評價指標體系

3.1 評價指標體系構建原則

針對不同學科類型的教學資源建立分類評價指標，是科學地開展教學資源評價的基本原則。醫(yī)學教育資源可按照教學學科專業(yè)性的不同進行分類管理，現(xiàn)階段教學資源類型主要包括臨床教學素材、教學課件、在線課程、教學案例、手術示教、病案資料、機能實驗、虛擬仿真和科普知識等，并根據(jù)教學技術的發(fā)展不斷擴充和深入。

3.2 分類評價指標體系構建

在線教學資源評價因受多種因素的影響，需融合成綜合評價系統(tǒng)，系統(tǒng)主要由評價指標、評價標準和權重系數(shù)三個要素有機組合而成，同時根據(jù)不同的評價目標，可建立不同的評價指標體系。根據(jù)醫(yī)學教育特點，初步構建了醫(yī)學在線教學資源評價指標體系，將指標設置為教學資源使用量、使用滿意度、相關活動均衡性、產(chǎn)出數(shù)量等4個大類的一級指標，再設置多個二級指標完善數(shù)據(jù)統(tǒng)計。具體見表1。

表1 醫(yī)學在線教學資源評價指標體系Table 1 Evaluation index system for online medical teaching resources

續(xù)表1

3.3 評價方式機制和策略

3.3.1 定性評價與定量評價相結合方式L通過充分應用專家、管理者、師生的主觀評價和以數(shù)學模型定量分析相結合的手段，從多個角度分析教學資源的應用情況和存在不足。在資源開發(fā)上線應用時成立評價專家小組，對教學資源進行全面的主觀定性評價，在資源發(fā)布后通過師生在線訪問教學資源情況，利用數(shù)學模型和統(tǒng)計方法自動化定量評價相應的教學資源，最終采用一定的軟件工具將專家組的意見和線上行為量化的指標綜合，形成一份可視化的評價報表，通過此信息來評估教學資源的整體情況。

3.3.2 運用PDCA循環(huán)理論優(yōu)化評價指標的方式:教學資源的建設、應用和評價分析需充分考慮資源利用的全過程周期的整體情況，設計一個評價管理體系非常重要[5]。PDCA(戴明循環(huán))是按Plan(計劃)、Do(執(zhí)行)、Check(檢查)、Act(糾正)的順序進行質量管理，建立動態(tài)的評建結合的機制，可以使在線教學資源的建設逐步優(yōu)化到一個良性循環(huán)的狀態(tài)，實現(xiàn)“資源評價→建設→反饋→優(yōu)化→建設”的機制，不斷完善評價指標的范圍和質量，推動教學資源建設評價的良性循環(huán)。

3.3.3 以學習者為中心的評價策略:醫(yī)學教育不僅包括大量的理論課程，還有復雜的實驗、解剖、手術示教等課程，學習者在使用在線教學資源學習時，與教學者互動的部分難以完全達到傳統(tǒng)教學中的面對面?zhèn)魇谥R的效果。因此在建設在線教學資源時，應充分以“學習者為中心”，充分發(fā)揮學習者的學習主觀能動性，調動學習者的積極性和主動性[6]，進而跨越時空對學習者進行指導，突破教學平臺、教學方式等變化及課程學科孤立等障礙,對課程進行階段性、持續(xù)性評價。讓醫(yī)學學習者在學習全過程中積極使用、反饋意見，扭轉傳統(tǒng)課堂教學只針對認識的評價，重視非認知的評價，進而在完成在線教學資源學習過程后進行討論，對指標體系進行優(yōu)化整理。

3.3.4 強調教學專家評判策略:制定教學醫(yī)學專家評價體系非常重要。醫(yī)學教育是精英教育，作為醫(yī)學學習者，其被傳授的教育內容跟國家衛(wèi)生安全、人民生命健康息息相關，教學資源內容必須嚴謹，慎之又慎。不同領域醫(yī)學學科專家的授課經(jīng)驗和指導意見充分發(fā)揮了醫(yī)學教育“傳、幫、帶”的重要作用，能從不同的工作領域及高層次醫(yī)學思維角度對相關研究提出全面的客觀建議[7]，因此在線教學資源效果評價中尤其需重視征詢醫(yī)學專家的意見及態(tài)度。一般可采用德爾菲法征求專家意見，并根據(jù)其經(jīng)驗和主觀判斷對涉及的在線教學資源的內容、應用、理論知識點的合理性、實用性等進行評判。

4 討論

醫(yī)學教育是理論知識繁復、實踐性強、資源投入巨大的教學過程，利用在線教學資源可以不受時空限制地展示實踐活動，不但方便有效地提高理論知識的教學效果，而且有助于教學成本的控制。目前中國優(yōu)質醫(yī)學教育資源稀缺，加強在線教學資源的建設與評價控制，構建一套在線教學資源使用的評價體系，不僅可以擴大優(yōu)質醫(yī)學資源的受眾范圍，為課程學習者提供高質量的學習服務，提高醫(yī)學教學的影響力和社會價值，還可為其他同類課程進行在線開放教學資源建設提供借鑒，促進教學資源利用的良性發(fā)展。本文初步建立包含4個一級指標和48個二級指標的醫(yī)學在線教學課程績效評價指標體系，在具體評價時，根據(jù)醫(yī)學課程及應用特點設計不同的評價手段和方法，先梳理清楚在線教學資源建設的相關要素，再選擇建立合理的指標體系，并在實踐中不斷地優(yōu)化完善，明確評價主體的范圍，形成一種建設的長效機制，指導評價教學活動的開展，為提高教學質量提供科學的建設參考。