劉金華，陳振國

（大連教育學(xué)院）

2018年，教育部等五部門印發(fā)《教師教育振興行動計(jì)劃（2018—2022）》，明確提出“建立教師培養(yǎng)培訓(xùn)質(zhì)量監(jiān)測機(jī)制”，“建立健全教師培訓(xùn)質(zhì)量評估制度”。在教師培訓(xùn)“提質(zhì)增效”背景下，加強(qiáng)教師培訓(xùn)質(zhì)量評估管理是教師培訓(xùn)專業(yè)化的內(nèi)在追求。然而，評估乏力是教師培訓(xùn)領(lǐng)域公認(rèn)的“短板”，在目的、層次、指標(biāo)等方面存在諸多問題，比如缺少連續(xù)貫通的設(shè)計(jì)，忽視培訓(xùn)與績效的關(guān)聯(lián)，僅關(guān)注滿意度、參與度等相對容易衡量的指標(biāo)，對評估結(jié)果應(yīng)用不足，等等。如何通過創(chuàng)新的評估設(shè)計(jì)，激勵、引導(dǎo)、規(guī)范培訓(xùn)的實(shí)施來消除“痛點(diǎn)”，已然是教師培訓(xùn)工作者需要研究的重要主題。大連教育學(xué)院研究團(tuán)隊(duì)開展了持續(xù)八年的研究與探索，從標(biāo)準(zhǔn)訂立到模型建構(gòu)，逐步構(gòu)建了可復(fù)制、可推廣的區(qū)域教師培訓(xùn)評估體系，其實(shí)踐成果在2021 年度遼寧省基礎(chǔ)教育教學(xué)成果評選中獲獎。

一、第一階段：績效導(dǎo)向，研制評估標(biāo)準(zhǔn)

2014年起，團(tuán)隊(duì)在綜合相關(guān)理論與實(shí)踐成果、比較分析不同評估模型的基礎(chǔ)上，結(jié)合大連市教師培訓(xùn)項(xiàng)目評估實(shí)踐，以柯氏模型與CIPP 模型為原型，構(gòu)建了一種貫穿培訓(xùn)項(xiàng)目全過程的評估體系，研制了《大連市教師培訓(xùn)項(xiàng)目績效評估標(biāo)準(zhǔn)》（以下簡稱《標(biāo)準(zhǔn)》）（見下頁表1）。大連市教育局以文件形式印發(fā)并在區(qū)域內(nèi)推廣使用。

表1 大連市教師培訓(xùn)項(xiàng)目績效評估標(biāo)準(zhǔn)（部分）

（一）評估標(biāo)準(zhǔn)指標(biāo)體系

《標(biāo)準(zhǔn)》包括項(xiàng)目計(jì)劃、項(xiàng)目組織、項(xiàng)目實(shí)施和項(xiàng)目結(jié)果四個一級指標(biāo)。其中，項(xiàng)目計(jì)劃是決定教師培訓(xùn)項(xiàng)目績效高低的關(guān)鍵因素，包括需求調(diào)研、方案設(shè)計(jì)、課程計(jì)劃、經(jīng)費(fèi)預(yù)算、項(xiàng)目審批五個二級指標(biāo)；項(xiàng)目組織是教師培訓(xùn)項(xiàng)目實(shí)施的前提和保障，包括團(tuán)隊(duì)組建、培訓(xùn)保障兩個二級指標(biāo)；項(xiàng)目實(shí)施是教師培訓(xùn)項(xiàng)目取得良好績效的決定性因素，包括項(xiàng)目啟動、課程實(shí)施、培訓(xùn)管理、項(xiàng)目總結(jié)四個二級指標(biāo)；培訓(xùn)項(xiàng)目結(jié)果是培訓(xùn)項(xiàng)目實(shí)施后取得的成果，包括學(xué)員學(xué)習(xí)效果和培訓(xùn)機(jī)構(gòu)水平提升兩個二級指標(biāo)。

（二）評估標(biāo)準(zhǔn)細(xì)節(jié)構(gòu)成

一是評估要素?！稑?biāo)準(zhǔn)》中呈現(xiàn)的評估要素是對二級指標(biāo)的詳細(xì)分解，它確定了教師培訓(xùn)項(xiàng)目績效評估的具體內(nèi)容，是自學(xué)院各級各類培訓(xùn)項(xiàng)目中提煉出的常態(tài)的、基本的和共性的環(huán)節(jié)或內(nèi)容。

二是評估方法。依據(jù)項(xiàng)目類型、評估目標(biāo)與評估要素，綜合運(yùn)用問卷調(diào)查、座談訪談、實(shí)地觀摩、資料查閱、作品分析等定量、定性方法收集評估證據(jù)。

三是數(shù)據(jù)來源?！稑?biāo)準(zhǔn)》中的數(shù)據(jù)來源代表了對項(xiàng)目各要素進(jìn)行績效評估時的參考材料，具體包括各種文檔材料、調(diào)研數(shù)據(jù)、訪談結(jié)果、培訓(xùn)檔案等。

四是指標(biāo)權(quán)重?！稑?biāo)準(zhǔn)》綜合了主觀賦權(quán)法（德爾菲法、層次分析法）和客觀賦值法（主成分分析法、均方差法），分別為一級指標(biāo)與二級指標(biāo)完成了量化賦分。

二、第二階段：三環(huán)四步，優(yōu)化培訓(xùn)流程

在《標(biāo)準(zhǔn)》研究與應(yīng)用基礎(chǔ)上，研究團(tuán)隊(duì)深入論證了“項(xiàng)目績效”與“行為改進(jìn)”之間的關(guān)系，開發(fā)了基于行為改進(jìn)的“三環(huán)節(jié)四步驟”培訓(xùn)項(xiàng)目設(shè)計(jì)模型（見圖1），按照培訓(xùn)前、培訓(xùn)中、培訓(xùn)后的時間邏輯，將培訓(xùn)過程分解為學(xué)習(xí)準(zhǔn)備、學(xué)習(xí)體驗(yàn)、學(xué)習(xí)應(yīng)用、學(xué)習(xí)轉(zhuǎn)化四個關(guān)鍵步驟，并定義了每一步驟中的設(shè)計(jì)要素與重點(diǎn)。

圖1 “三環(huán)四步”——基于行為改進(jìn)的教師培訓(xùn)項(xiàng)目設(shè)計(jì)模型

（一）設(shè)計(jì)學(xué)習(xí)準(zhǔn)備

一是訂立預(yù)期。在訓(xùn)前，培訓(xùn)者需留意兩點(diǎn)，一是培訓(xùn)中的關(guān)鍵行為指標(biāo)是什么；二是培訓(xùn)所帶來的業(yè)務(wù)結(jié)果是什么。

二是喚醒動機(jī)。有需求才有動機(jī)，準(zhǔn)確的需求分析需要創(chuàng)新的方式。例如，在名師培養(yǎng)對象培訓(xùn)項(xiàng)目中，團(tuán)隊(duì)通過采集參訓(xùn)教師的專業(yè)發(fā)展規(guī)劃，全面且創(chuàng)新性地了解他們的需求。

三是挖掘經(jīng)驗(yàn)。參訓(xùn)之前教師能做什么、不能做什么、分別到什么程度，這些都是參訓(xùn)者的經(jīng)驗(yàn)，它可以帶出真正的問題，這正是學(xué)習(xí)設(shè)計(jì)的起點(diǎn)。

（二）設(shè)計(jì)學(xué)習(xí)體驗(yàn)

一是明確目標(biāo)。“一致”是培訓(xùn)目標(biāo)的設(shè)置要和業(yè)務(wù)預(yù)期（即績效結(jié)果）相一致，不能僅有“學(xué)習(xí)目標(biāo)”而沒有“業(yè)務(wù)目標(biāo)”，可參考“SMART”原則，采用“ABCD”式目標(biāo)表述，確保目標(biāo)清晰、可達(dá)、可測。

二是優(yōu)化內(nèi)容。在課程層面，要確保課程與主題的關(guān)聯(lián)、專題與專題的關(guān)聯(lián)，避免“拼盤式”課程。

三是創(chuàng)新方式。所謂“參與”，既包括個體在認(rèn)知與情感方面的投入，也包括個體與其他個體及環(huán)境的互動。真正的參與離不開良好的體驗(yàn)，它是參與者獲取知識、轉(zhuǎn)變態(tài)度、改進(jìn)行為的原動力。

（三）設(shè)計(jì)學(xué)習(xí)應(yīng)用

一是設(shè)計(jì)任務(wù)?！白觥笔亲詈玫膶W(xué)習(xí)方法，培訓(xùn)中，可依據(jù)目標(biāo)與主題，設(shè)計(jì)相關(guān)、連續(xù)、遞進(jìn)的“過關(guān)任務(wù)”，為參訓(xùn)者提供大量的練習(xí)機(jī)會。

二是設(shè)計(jì)對話。賦予參訓(xùn)者權(quán)利與責(zé)任，培訓(xùn)中鼓勵他們以個人或小組形式分享智慧，在培訓(xùn)課堂建立多方互動。

三是設(shè)計(jì)復(fù)盤。學(xué)習(xí)是一個持續(xù)的過程，而不僅僅是一次培訓(xùn)活動，培訓(xùn)者可將“復(fù)盤”的理念與實(shí)踐納入培訓(xùn)之中。

（四）設(shè)計(jì)學(xué)習(xí)轉(zhuǎn)化

一是跟蹤職場。通過調(diào)查問卷、訪談、行為觀察、作品分析等方法，持續(xù)關(guān)注教師訓(xùn)后行為變化情況。

二是持續(xù)支持。借助復(fù)盤、531行動計(jì)劃書等方式與工具，通過學(xué)員和專家面對面的分享、建立在線學(xué)習(xí)群組等方式，為教師訓(xùn)后行為改進(jìn)提供持續(xù)性支持。

三是認(rèn)可改進(jìn)。要行為改進(jìn)，除了發(fā)現(xiàn)改進(jìn)，更要認(rèn)可改進(jìn)、獎勵改進(jìn)。

三、第三階段：四層五步，建構(gòu)評估模型

依據(jù)培訓(xùn)項(xiàng)目設(shè)計(jì)流程與關(guān)鍵要素，研究團(tuán)隊(duì)進(jìn)一步開發(fā)了基于行為改進(jìn)的“四層次五步驟”教師培訓(xùn)評估模型、框架與流程，并將之初步應(yīng)用于區(qū)域教師培訓(xùn)評估實(shí)踐（見圖2）。

圖2 基于行為改進(jìn)的教師培訓(xùn)效果評估模型

（一）經(jīng)驗(yàn)層評估

1.評估內(nèi)容與關(guān)鍵指標(biāo)

將參訓(xùn)教師的知識、技能、態(tài)度、行為等情況進(jìn)行“摸底性”評估，充分掌握參訓(xùn)教師的學(xué)習(xí)經(jīng)驗(yàn)及培訓(xùn)期待。本層次評估關(guān)鍵指標(biāo)有以下三個。

一是認(rèn)知現(xiàn)狀，即參訓(xùn)教師在訓(xùn)前對培訓(xùn)主題所涉事實(shí)、概念、原理、理論等的認(rèn)知狀況。

二是能力現(xiàn)狀，即參訓(xùn)教師在訓(xùn)前對培訓(xùn)主題所涉策略方法、重要技能、關(guān)鍵能力方面的掌握程度。

三是行為現(xiàn)狀，即參訓(xùn)教師在訓(xùn)前對培訓(xùn)主題所涉關(guān)鍵議題方面的行為表現(xiàn)。

2.數(shù)據(jù)來源與評估方法

本層級評估數(shù)據(jù)來源包括：參訓(xùn)教師、學(xué)校管理者、參訓(xùn)教師同伴、學(xué)生?，F(xiàn)實(shí)操作中，可以參訓(xùn)教師和學(xué)校管理者為主，以參訓(xùn)教師同伴和學(xué)生為輔。評估方法有以下三種。

一是前測問卷法。依據(jù)培訓(xùn)主題，精心設(shè)計(jì)結(jié)構(gòu)化或半結(jié)構(gòu)化的前測問卷，重點(diǎn)收集教師訓(xùn)前認(rèn)知方面的數(shù)據(jù)信息。

二是訓(xùn)前訪談法。在培訓(xùn)開始前，對參訓(xùn)教師、學(xué)校管理者、參訓(xùn)教師同伴、學(xué)生等培訓(xùn)相關(guān)人員進(jìn)行訪談，重點(diǎn)收集教師訓(xùn)前能力方面的數(shù)據(jù)信息。

三是觀察分析法。在培訓(xùn)開始前，通過觀察、記錄、分析參訓(xùn)教師的教學(xué)現(xiàn)場、教學(xué)錄像、教學(xué)作品等方式，收集教師訓(xùn)前行為方面的數(shù)據(jù)信息。

（二）體驗(yàn)層評估

1.評估內(nèi)容與關(guān)鍵指標(biāo)

主要是指培訓(xùn)或課程結(jié)束時，征詢學(xué)員對培訓(xùn)的主觀看法，包括對培訓(xùn)要素（目標(biāo)、課程、師資、服務(wù)等）參與程度、收獲大小等的反應(yīng)與感受。本層次評估關(guān)鍵指標(biāo)有以下三個。

一是工作相關(guān)度，指培訓(xùn)的目標(biāo)、內(nèi)容與崗位要求、個體需求之間的關(guān)聯(lián)程度。

二是學(xué)習(xí)參與度，指培訓(xùn)是否創(chuàng)造了足夠多、足夠有吸引力、足夠有效的互動與對話機(jī)會。

三是培訓(xùn)滿意度，指培訓(xùn)在課程設(shè)置、課程實(shí)施、授課專家、培訓(xùn)服務(wù)等方面是否提供了積極的情緒體驗(yàn)。

2.數(shù)據(jù)來源與評估方法

本層級評估數(shù)據(jù)來源主要是參訓(xùn)教師，評估方法可采用以下兩種。

一是反應(yīng)量表法。運(yùn)用紙質(zhì)或網(wǎng)絡(luò)形式的里克特五分制量表，以了解參訓(xùn)教師對培訓(xùn)各要素的反應(yīng)與感受。

二是抽樣訪談法。通過個別面談或集體訪談的形式，針對培訓(xùn)的全過程要素，收集參訓(xùn)者對培訓(xùn)的看法與意見?？紤]到現(xiàn)實(shí)情況，可以抽取一定比例的參訓(xùn)教師代表進(jìn)行訪談。

（三）學(xué)習(xí)層評估

1.評估內(nèi)容與關(guān)鍵指標(biāo)

在培訓(xùn)結(jié)束后，通過對教師訓(xùn)前和訓(xùn)后知識、技能、態(tài)度的比較，測量參訓(xùn)教師對培訓(xùn)課程所涉原理、事實(shí)、技能的掌握程度以及在工作中應(yīng)用所學(xué)的信心與承諾。本層評估關(guān)鍵指標(biāo)有以下三個。

一是知識習(xí)得。對參訓(xùn)教師對培訓(xùn)課程所涉事實(shí)、概念、理論、觀念等知識的認(rèn)知和理解的程度進(jìn)行衡量與分析。

二是技能掌握。對參訓(xùn)教師對培訓(xùn)課程所涉主要方法策略、操作技能的掌握情況進(jìn)行衡量與分析。

三是態(tài)度轉(zhuǎn)變。態(tài)度主要指在工作中運(yùn)用新知識、新技能的“信心”與“承諾”。

2.數(shù)據(jù)來源與評估方法

本層級評估數(shù)據(jù)來源是參訓(xùn)教師、授課專家。評估方法可采用以下四種。

一是測驗(yàn)法。通過紙筆作答或在線測試對參訓(xùn)教師的知識掌握情況進(jìn)行評估。測驗(yàn)法可獲取量化數(shù)據(jù)，效度較高。不過，測驗(yàn)法對命題要求很高，需覆蓋培訓(xùn)核心的知識點(diǎn)與技能點(diǎn)，培訓(xùn)管理者可與授課專家共同完成該項(xiàng)工作。

二是作品分析法。對參訓(xùn)教師在學(xué)習(xí)過程中的“作品”，如筆記、作業(yè)、日志等進(jìn)行分析研究，以了解參訓(xùn)教師知識、技能、態(tài)度方面的所得。

三是訪談法。由授課專家或團(tuán)隊(duì)在課程進(jìn)行過程中，通過訪談或提問參訓(xùn)教師來了解他們對培訓(xùn)內(nèi)容的掌握情況。現(xiàn)實(shí)中，訪談還可采用“行動計(jì)劃表”形式，除了可以了解培訓(xùn)所學(xué)，還能在學(xué)習(xí)與下一步的行為轉(zhuǎn)化之間建立聯(lián)系。

四是模擬法。通常以現(xiàn)場操作或模擬為主，由參訓(xùn)教師操作、模擬，由培訓(xùn)專家指導(dǎo)打分?，F(xiàn)場評估結(jié)束后，可輔以追蹤觀察。

（四）行為層評估

1.評估內(nèi)容與關(guān)鍵指標(biāo)

行為評估是在培訓(xùn)結(jié)束一段時間后（3～6個月），對參訓(xùn)教師的工作行為和職場表現(xiàn)方面發(fā)生的變化進(jìn)行評估，確定參訓(xùn)教師在多大程度上應(yīng)用了培訓(xùn)所學(xué)，或發(fā)生了行為改進(jìn)。本層次評估關(guān)鍵指標(biāo)有以下三個。

一是應(yīng)用機(jī)會。對參訓(xùn)教師培訓(xùn)所學(xué)知識與實(shí)際工作相結(jié)合的行動進(jìn)行評估。評估預(yù)期行為出現(xiàn)的場景、頻次與質(zhì)量，即衡量參訓(xùn)教師運(yùn)用培訓(xùn)課程內(nèi)容和方法工具解決工作中的疑慮和困難的有效程度。

二是轉(zhuǎn)化支持。影響參訓(xùn)教師學(xué)習(xí)轉(zhuǎn)化的兩大核心變量為：來自培訓(xùn)方的專業(yè)指導(dǎo)和來自學(xué)校管理層的管理支持。在訓(xùn)后，重點(diǎn)就此兩方面評估參訓(xùn)教師訓(xùn)后績效支持系統(tǒng)。

三是行為激勵。要讓評估落地，很重要的一個方法就是將參訓(xùn)教師行為改進(jìn)與績效掛鉤，這類評估常見于晉升培訓(xùn)考核、轉(zhuǎn)崗培訓(xùn)考核等。在教師培訓(xùn)中，我們也可以采用類似的獎懲措施。

2.數(shù)據(jù)來源與評估方法

本層級評估數(shù)據(jù)來源是學(xué)校管理者、參訓(xùn)教師、參訓(xùn)教師同伴、培訓(xùn)專家、學(xué)生等。評估方法可采用以下三種。

一是行為觀察法。具體是指跟蹤觀察法，即項(xiàng)目組在訓(xùn)后親自到工作現(xiàn)場或采用觀看錄像，借助“關(guān)鍵事件記錄表”觀察并記錄參訓(xùn)教師在教育教學(xué)實(shí)踐中的行為表現(xiàn)，并與教師以往經(jīng)驗(yàn)進(jìn)行比較。

二是行為報告法。行為報告法包括多種形式，其中常見的有工作日志、關(guān)鍵事件、成功故事。其操作重點(diǎn)是邀請參訓(xùn)教師參照行動計(jì)劃，結(jié)合培訓(xùn)內(nèi)容，梳理行為改進(jìn)的承諾事項(xiàng)、具體措施、資源支持、完成情況等。

三是360 度訪談法。通過開展面向參訓(xùn)教師、參訓(xùn)教師伙伴、學(xué)校管理者、學(xué)生等的訪談來收集有關(guān)行為的資料，借助“職場追蹤訪談表”，了解訓(xùn)后的預(yù)期行為表現(xiàn)及其發(fā)生前后的情境與條件。

（五）四層次的評估步驟

1.界定關(guān)鍵行為

確定評估什么是培訓(xùn)效果評估過程中最重要的決策?？紤]到成本、時間、指標(biāo)的易理解性，可以將培訓(xùn)評估指標(biāo)縮減至可量化的幾個關(guān)鍵行為指標(biāo)。

2.形成評估證據(jù)

評估人員先確定比較標(biāo)準(zhǔn)，充分利用經(jīng)驗(yàn)層評估所提供的原始數(shù)據(jù)；再依據(jù)評估內(nèi)容、數(shù)據(jù)類型與數(shù)據(jù)來源，選擇相應(yīng)的采集時間、采集方式與采集工具；最后運(yùn)用適宜的數(shù)據(jù)編碼、匯總與統(tǒng)計(jì)方法，對評估數(shù)據(jù)進(jìn)行綜合評析。

3.撰寫評估報告

在對培訓(xùn)相關(guān)數(shù)據(jù)和信息進(jìn)行整理、分析后，評估人員應(yīng)再結(jié)合培訓(xùn)項(xiàng)目背景與目標(biāo)等，撰寫培訓(xùn)評估報告。報告核心內(nèi)容包括：評估工作概述、四層級分析結(jié)果、評估結(jié)論建議等。

4.反饋評估結(jié)果

一旦評估有了結(jié)果，評估機(jī)構(gòu)有義務(wù)將結(jié)果匯報給培訓(xùn)管理者以及培訓(xùn)關(guān)鍵利益相關(guān)方，推動培訓(xùn)活動的優(yōu)化與改進(jìn)。

5.推動持續(xù)改進(jìn)

尋求改進(jìn)建議前，需知曉問題出現(xiàn)的真正原因。接著采取漸進(jìn)行動?，F(xiàn)實(shí)中，很難一次性對培訓(xùn)進(jìn)行“徹底改造”，可以先選擇一或兩個問題進(jìn)行處理，或從那些相對簡單的問題開始。在每日培訓(xùn)結(jié)束后，可組織項(xiàng)目團(tuán)隊(duì)成員就培訓(xùn)流程要素進(jìn)行反思研討，針對問題及時調(diào)整。

四、區(qū)域教師培訓(xùn)評估體系的應(yīng)用效果

（一）落地標(biāo)準(zhǔn)，保障質(zhì)量

2017 年，《標(biāo)準(zhǔn)》正式印發(fā)并進(jìn)入應(yīng)用階段?！笆濉逼陂g，已累計(jì)完成12 個區(qū)縣市縣示范項(xiàng)目和13 個市本級干部教師培訓(xùn)項(xiàng)目的評估。《標(biāo)準(zhǔn)》的使用對指導(dǎo)和規(guī)范大連市教師培訓(xùn)工作起到很好的引領(lǐng)作用，使各區(qū)市縣的教師培訓(xùn)工作有章可循、有制可依，進(jìn)一步提高了中小學(xué)教師培訓(xùn)項(xiàng)目的質(zhì)量。

（二）應(yīng)用模型，迭代項(xiàng)目

研究團(tuán)隊(duì)綜合運(yùn)用基于行為改進(jìn)的教師培訓(xùn)項(xiàng)目設(shè)計(jì)與評估模型，不斷迭代“領(lǐng)雁工程——培訓(xùn)者培訓(xùn)”項(xiàng)目。近年來，“領(lǐng)雁工程”圍繞政策理解、項(xiàng)目設(shè)計(jì)、課程開發(fā)等培訓(xùn)者必備的核心能力，通過通識培訓(xùn)、主題研修、在線學(xué)習(xí)等方式對市、區(qū)兩級進(jìn)修院校教研員開展多主題專項(xiàng)培訓(xùn)。目前，已累計(jì)完成4000多人次的培訓(xùn)。

（三）擴(kuò)大影響，輻射全國

研究團(tuán)隊(duì)曾先后4 次在國培計(jì)劃——示范項(xiàng)目培訓(xùn)管理者培訓(xùn)中介紹大連教師培訓(xùn)項(xiàng)目績效評估的設(shè)計(jì)思路和實(shí)踐探索；“基于行為改進(jìn)的教師培訓(xùn)質(zhì)量評估思考與實(shí)踐”先后亮相2019 年、2020 年教師培訓(xùn)者聯(lián)盟年會；“基于行為改進(jìn)的‘三環(huán)四步’培訓(xùn)項(xiàng)目設(shè)計(jì)經(jīng)驗(yàn)”“基于行為改進(jìn)的‘四層五步’教師培訓(xùn)效果評估探索”先后入選中國教育學(xué)會教師培訓(xùn)者聯(lián)盟2020年度、2021年度實(shí)踐案例。