黃寧生

摘 要：教師培訓(xùn)效果評價(jià)對改進(jìn)培訓(xùn)工作，提高培訓(xùn)質(zhì)量十分重要。探尋便捷的培訓(xùn)效果評價(jià)方法是培訓(xùn)機(jī)構(gòu)的亟需。即時改變度評價(jià)法從描繪學(xué)員自身的即時改變程度入手，以定量衡量的辦法評價(jià)學(xué)員的即時培訓(xùn)效果，在一定程度上彌補(bǔ)了目前普遍運(yùn)用的學(xué)員滿意度評價(jià)的不足。因其可操作性較強(qiáng)，故可幫助培訓(xùn)機(jī)構(gòu)及時反思工作，提高培訓(xùn)設(shè)計(jì)、實(shí)施與組織管理水平。

關(guān)鍵詞：教師培訓(xùn)；培訓(xùn)效果；培訓(xùn)質(zhì)量；評估；評價(jià)

中圖分類號：G726 文獻(xiàn)標(biāo)識碼：A

教師培訓(xùn)研究者們在探究提高教師培訓(xùn)質(zhì)量的途徑與方法時，對改善培訓(xùn)效果的評價(jià)給予很大關(guān)注。許多文章對此作了專門討論，希冀以改進(jìn)培訓(xùn)效果評價(jià)為突破口，促進(jìn)培訓(xùn)內(nèi)容與方法的改變，促進(jìn)培訓(xùn)管理水平的提升，提高教師培訓(xùn)的質(zhì)量。

一、完備的教師培訓(xùn)效果評價(jià)面臨“想到而做不到”的困難，探尋簡單易行的培訓(xùn)效果評價(jià)方法成為培訓(xùn)機(jī)構(gòu)的共同訴求

（一）利用柯克帕特里克“四層次”培訓(xùn)效果評估模型評價(jià)教師培訓(xùn)效果存在實(shí)際操作困難

美國學(xué)者柯克帕特里克（下簡稱柯氏）在1959年提出了著名的培訓(xùn)效果評估“四層次”模型，從受訓(xùn)者的反應(yīng)（學(xué)員對培訓(xùn)的感受怎樣）、學(xué)習(xí)（學(xué)員學(xué)到了什么知識和技能）、行為（學(xué)員返崗后有什么行為改變）和結(jié)果（學(xué)員返崗改變后的效果是什么）四個層次分別對培訓(xùn)效果進(jìn)行評估。它成為培訓(xùn)評估理論中最經(jīng)典的模型之一。

對于教師培訓(xùn)效果的評價(jià)，研究者們借助柯氏培訓(xùn)效果評估模型提出了許多方法。例如考試、現(xiàn)場評價(jià)、問卷、訓(xùn)后座談、訓(xùn)后訪談、觀察參訓(xùn)者在培訓(xùn)前后的變化以及變化帶來的實(shí)際效果等。但是除了涉及反應(yīng)層、學(xué)習(xí)層的評價(jià)以外，那些關(guān)于行為層和結(jié)果層評價(jià)的方法操作成本往往都很高?，F(xiàn)實(shí)中如果不是為了做研究，絕少有培訓(xùn)機(jī)構(gòu)能在培訓(xùn)結(jié)束一段時間后，為每一個項(xiàng)目投入人力和財(cái)力，跟蹤到每一位學(xué)員的單位，用問卷、測試、觀察、座談、個別訪談等方法去調(diào)查學(xué)員返崗后的行為改變情況以及因這些改變而產(chǎn)生的教育教學(xué)成效。一般情況下，培訓(xùn)機(jī)構(gòu)是沒有條件獲得這種訓(xùn)后跟蹤評價(jià)信息的。并且，就算偶爾對某一個培訓(xùn)項(xiàng)目實(shí)施了這樣的跟蹤評價(jià)，所得的評價(jià)結(jié)論也不能用于所有培訓(xùn)項(xiàng)目。而且，在培訓(xùn)項(xiàng)目結(jié)束幾個月甚至半年或更長時間后才獲得的培訓(xùn)效果評價(jià)報(bào)告對于培訓(xùn)機(jī)構(gòu)改進(jìn)自身工作的迫切需要來說也顯得過于滯后。

（二）柯氏“四層次”培訓(xùn)評估模型依賴的背景條件在如今的教育現(xiàn)實(shí)中很少存在

柯氏“四層次”評估模型其實(shí)有一個隱性假設(shè)作為依賴背景，即參訓(xùn)者在培訓(xùn)結(jié)束返回工作崗位后至接受跟蹤評價(jià)之前，不再有其他的學(xué)習(xí)行為，并且其工作對象、工作環(huán)境、專業(yè)發(fā)展外部條件等與培訓(xùn)之前相比未發(fā)生變化（否則，無論參訓(xùn)者在教育教學(xué)行為上發(fā)生什么改變，后又有怎樣的效果，都沒有理由認(rèn)為一定是參加此次培訓(xùn)所致）。然而，這個假設(shè)在現(xiàn)實(shí)中是很難實(shí)際存在的。

在信息傳播方式和傳播速度迅猛發(fā)展的今天，人們的學(xué)習(xí)渠道和學(xué)習(xí)方式已經(jīng)多樣化。隨著終身學(xué)習(xí)的理念為人們普遍認(rèn)同，教師的學(xué)習(xí)行為不會僅存在于一個培訓(xùn)項(xiàng)目。事實(shí)上，有的教師在參訓(xùn)前后還用其他渠道和形式參加培訓(xùn)或進(jìn)行學(xué)習(xí)。例如校本培訓(xùn)就常常發(fā)生在教師的生活中。教師在返崗一段時間后發(fā)生的變化，是歷次學(xué)習(xí)和實(shí)踐累積起來的效果，除了教師本人，他人很難分清這種變化是哪一次學(xué)習(xí)的貢獻(xiàn)。再加上教師每天都在接觸學(xué)生、家長、同行、領(lǐng)導(dǎo)等等，每天都在演繹各種教學(xué)故事和生活故事，這些人和事也時時可能對教師的思想、理念、行為的改變發(fā)生作用。

因此，如果沒有“隔開”諸如此類的種種“干擾”因素，我們就不能斷言，訓(xùn)后幾個月、半年或者更長時間中教師發(fā)生的教育行為改變一定只是“那一次”培訓(xùn)的“功勞”。而如果不能確認(rèn)“改變”是“那一次”培訓(xùn)的“功勞”，則對“那一次”培訓(xùn)所作的行為層和結(jié)果層評價(jià)的結(jié)論就沒有了說服力。

再說，如果一個參訓(xùn)教師在訓(xùn)后一段時期未發(fā)生良性的行為改變，也未必是這次培訓(xùn)的“罪過”。就像有時教師對某個學(xué)生苦心教育初見成效，卻可能被社會或?qū)W生家庭的負(fù)面影響抵消效果一樣，參訓(xùn)教師也可能因培訓(xùn)以外的其他環(huán)境因素——例如學(xué)校的制度或文化因素干擾而妨礙了他的改變，抵消了培訓(xùn)的積極效果。而且，參訓(xùn)教師自身的動力因素甚至更為關(guān)鍵，有的教師“聽了激動，想了感動，回去沒動”，是其本人惰性的負(fù)向干擾。所以說，很難保證行為層和結(jié)果層評價(jià)的結(jié)果對培訓(xùn)效果的評判是客觀的。

（三）探尋簡單易行的培訓(xùn)效果評價(jià)方法成為亟需

諸多原因使得一些培訓(xùn)效果評價(jià)方法僅成為教師培訓(xùn)界沙龍中熱議的話題，有些在理論上看似完備的培訓(xùn)效果評價(jià)方法僅成為專門性研究時的概念性“樣品”，難以在實(shí)際評價(jià)中普及運(yùn)用。因此，探尋既能客觀判斷培訓(xùn)效果，又簡單易操作的常態(tài)評價(jià)辦法顯得十分必要。

近年來，南京曉莊學(xué)院教師研修學(xué)院從培訓(xùn)項(xiàng)目管理實(shí)際出發(fā)，探索試行了一種易于操作的學(xué)員培訓(xùn)效果評價(jià)方法——“四層面”即時改變度測量，將其結(jié)果與學(xué)員滿意度測評結(jié)果綜合起來，對培訓(xùn)工作的成敗得失作出有依據(jù)的判斷，為及時改進(jìn)工作，提升培訓(xùn)質(zhì)量提供有用的參考。

二、“四層面”即時改變度測量是教師培訓(xùn)效果評價(jià)的可行思路

（一）“四層面”即時改變度測量是考量培訓(xùn)效果的便捷方法

一般情況下，參加一次培訓(xùn)對自己有沒有幫助，學(xué)習(xí)收效怎樣，學(xué)員自己最有發(fā)言權(quán)。在培訓(xùn)結(jié)束之際，學(xué)員在專業(yè)理念和師德、專業(yè)知識、專業(yè)能力等方面正在發(fā)生的改變，是培訓(xùn)效果的初步體現(xiàn)。相對于返崗后的改變，這是一種即時改變。即時改變在很大程度上是有知覺的改變，即學(xué)員本人能夠覺察到的改變。利用一定形式，讓學(xué)員對自己的即時改變情況作自我判斷，可以幫助培訓(xùn)機(jī)構(gòu)獲得評價(jià)培訓(xùn)效果的參考信息。

我們用“即時改變度”來表達(dá)學(xué)員參加培訓(xùn)的效果強(qiáng)弱，從四個層面分別衡量學(xué)員的改變狀況：

知識層面：衡量學(xué)員是否掌握了新知識，獲取了新信息，開闊了眼界，提高了認(rèn)識，化解了疑惑。

方法層面：衡量學(xué)員是否學(xué)會一些技能和方法，明白方法的道理；是否準(zhǔn)備返崗后進(jìn)行移植或借鑒；是否打算對自己的教育教學(xué)方法作出改變。

理念層面：衡量學(xué)員的理念、觀念有無改變；是否能理解教育教學(xué)之原理，掌握其規(guī)律；有無打算返崗后遵循規(guī)律、運(yùn)用理念、探索創(chuàng)新。

情感層面：衡量培訓(xùn)內(nèi)容是否對學(xué)員的思想產(chǎn)生積極影響；是否增強(qiáng)了學(xué)員的教育信念；學(xué)員的職業(yè)情感、態(tài)度有無發(fā)生良性改變，精神面貌是否煥新。

在全部培訓(xùn)課程結(jié)束之后，對學(xué)員以問卷調(diào)查形式作測量，統(tǒng)計(jì)測量結(jié)果，按公式（1）計(jì)算出每位學(xué)員的即時改變度，獲得學(xué)員即時培訓(xùn)效果的評價(jià)依據(jù)。

為衡量整個培訓(xùn)項(xiàng)目的即時效果，我們建立“即時改變率”的概念。所謂即時改變率是指上述每個層面處在某個即時改變度的人數(shù)占全班人數(shù)的百分比。下面作具體說明。

（二）即時改變度測量問卷

（三）即時改變度的定義及計(jì)算方法

我們把培訓(xùn)結(jié)束之時，學(xué)員個體在知識、方法、理念、情感等四個層面中某一層面發(fā)生改變的程度叫做他在該層面的即時改變度，用Ci表示，定義即

其中，i等于1、2、3、4時，依次是這個學(xué)員知識層面、方法層面、理念層面、情感層面的即時改變度。Xij是第i層面第j個問題被學(xué)員選中的系數(shù)。

例如某學(xué)員對方法層面的4個問題分別選了程度系數(shù)5、4、3、2，則有

這表明他在方法層面的即時改變度是0.7。

把學(xué)員個體在四個層面的即時改變度的均值叫做該學(xué)員的總體即時改變度，用 表示，

一個學(xué)員的總體即時改變度反映了他在四個層面的改變情況的綜合信息，可以用來描述該學(xué)員總體的即時培訓(xùn)效果。例如，某學(xué)員在知識、方法、理念、情感層面的即時改變度依次是C1=0.7，C2=0.8，C3=0.3，C4=0.7，則他的總體即時改變度

從即時改變度的定義可知，Ci的值在0到1之間，即

（ ）。 的值也在0到1之間，即 ?？梢钥闯?，Ci越接近1，表明學(xué)員在第i方面即時改變程度越大；Ci越接近0，表明學(xué)員在第i方面即時改變程度越小。與之相仿， 越接近1，表明學(xué)員總體即時改變程度越大； 越接近0，表明學(xué)員總體即時改變程度越小。

在評價(jià)學(xué)員改變情況時，有時需要關(guān)心即時改變度達(dá)到某一確定數(shù)值時的人數(shù)占全班人數(shù)的比例。因此給出即時改變率的定義。把即時改變度為C0的學(xué)員人數(shù)與全班人數(shù)的比稱為即時改變度為C0的全班即時改變率，用 表示，

例如：全班學(xué)員共50人，在知識層面即時改變度為0.8的學(xué)員人數(shù)為15人，這時C0=0.8，則即時改變度為0.8的全班即時改變率

這表明該班學(xué)員在知識層面即時改變度為0.8的即時改變率是0.3。顯然，在即時改變度C0較大（高）時，相應(yīng)的全班即時改變率 越接近1越好。

用這個方法我們也可以計(jì)算出總體即時改變度為

的全班即時改變率。例如，全班學(xué)員共50人，總體即時改變度在0.9以上的學(xué)員人數(shù)為32，則總體即時改變度0.9以上的全班即時改變率為

還可以通過計(jì)算各層面全班學(xué)員即時改變度的平均數(shù)來對本班的即時培訓(xùn)效果作出判斷。對比幾個培訓(xùn)班的這組數(shù)據(jù)——各層面即時改變度平均數(shù)和即時改變率，亦能看出班與班之間即時培訓(xùn)效果的差異。

三、從即時改變度測量結(jié)果看培訓(xùn)工作的改進(jìn)

（一）四個層面培訓(xùn)效果的主要影響因素

總的說來，培訓(xùn)的課程設(shè)計(jì)、教學(xué)過程、管理服務(wù)、學(xué)員態(tài)度等是影響培訓(xùn)效果的主要因素。但是，當(dāng)我們細(xì)致地分析，從微觀上分別審視四個層面的培訓(xùn)效果時，可以比較“精確地”找到影響培訓(xùn)效果的具體因素，這將幫助我們有針對性地改進(jìn)培訓(xùn)工作。

從長期培訓(xùn)實(shí)踐來看，對知識層面培訓(xùn)效果影響較大的因素主要是培訓(xùn)的教學(xué)內(nèi)容，特別是培訓(xùn)中的理論性學(xué)習(xí)；對方法層面的培訓(xùn)效果影響較大的因素主要是培訓(xùn)的教學(xué)內(nèi)容、教學(xué)方法、培訓(xùn)中的實(shí)踐性學(xué)習(xí)、學(xué)員的背景；對理念層面培訓(xùn)效果影響較大的因素主要是教學(xué)內(nèi)容、教學(xué)方法、培訓(xùn)中的理論學(xué)習(xí)和實(shí)踐性學(xué)習(xí)，培訓(xùn)的管理與服務(wù)、學(xué)員的背景；對情感層面培訓(xùn)效果影響較大的因素主要是培訓(xùn)教學(xué)方法、培訓(xùn)環(huán)境、培訓(xùn)的管理與服務(wù)等。對這四個層面培訓(xùn)效果影響都較明顯的還有學(xué)員的態(tài)度等（如表1）。

（二）利用即時改變度測量結(jié)果分析培訓(xùn)項(xiàng)目的得失

以下是我院承辦的某省國培項(xiàng)目某骨干教師培訓(xùn)班的即時改變度測量數(shù)據(jù)統(tǒng)計(jì)（如表2），該班在教育部匿名評估中的評價(jià)結(jié)果位列該省同類項(xiàng)目前列。

從表2可見，學(xué)員在方法層面的即時改變情況略弱于其他幾個層面。我們反思該班課程安排后發(fā)現(xiàn)，雖涉及教育教學(xué)技能與方法的內(nèi)容并不少，但在學(xué)習(xí)形式上，學(xué)員實(shí)踐性學(xué)習(xí)的量仍顯不足，到一線課堂里現(xiàn)場觀察與研討的機(jī)會比起學(xué)員的期待來說還顯不夠。在情感層面存在個別學(xué)員即時改變度低的情況，表明培訓(xùn)過程還要更加強(qiáng)調(diào)面向全體，關(guān)注每一位學(xué)員。

一般地，如果即時改變度較高時的即時改變率偏低，可以從以下角度分析存在的問題：

知識層面——審視培訓(xùn)內(nèi)容是不是緊密結(jié)合教育教學(xué)實(shí)際，有無充分介紹相關(guān)方面的改革信息和創(chuàng)新成果，學(xué)習(xí)內(nèi)容是否接近學(xué)員的最近發(fā)展區(qū)，專家講課是不是生動，講課案例是不是貼合實(shí)際等。

方法層面——審視培訓(xùn)內(nèi)容與形式的安排是不是與教育教學(xué)密切相關(guān)，有沒有讓學(xué)員充分參與，是不是在實(shí)踐現(xiàn)場中學(xué)習(xí)，現(xiàn)場考察和討論交流是否充分等。

理念層面——審視是不是體現(xiàn)了用教育事實(shí)來說明問題，是不是把理念融入在知識與方法的學(xué)習(xí)中，是不是讓學(xué)員在實(shí)踐中體悟理念等。

情感層面——審視有沒有發(fā)揮好基地學(xué)校名師、團(tuán)隊(duì)的作用，是否有效地運(yùn)用基地學(xué)校和名師的影響效應(yīng)，培訓(xùn)管理是否無可挑剔，是否實(shí)現(xiàn)了用培訓(xùn)團(tuán)隊(duì)的優(yōu)良培訓(xùn)行為來浸潤和感染學(xué)員等。還應(yīng)檢視在培訓(xùn)過程中是否存在對學(xué)員服務(wù)或關(guān)心不到位的情況。

在作分析時，如果將即時改變度數(shù)據(jù)與學(xué)員滿意度測評數(shù)據(jù)結(jié)合起來，則可更為準(zhǔn)確地判斷學(xué)員的參訓(xùn)效果及效果形成的原因，進(jìn)而準(zhǔn)確把握培訓(xùn)工作的得失，找到改進(jìn)的方向。

四、用即時改變度評價(jià)學(xué)員培訓(xùn)效果的信度與效度

（一）即時改變度測量問卷的設(shè)計(jì)是合理的

在即時改變度測量問卷設(shè)計(jì)中，除了關(guān)注學(xué)員學(xué)到知識與學(xué)到方法兩方面的情況，還應(yīng)關(guān)注學(xué)員在正確理念建立和積極情感形成方面的成效。正確理念和積極情感是學(xué)員回到崗位后發(fā)生教育教學(xué)行為改變的重要基礎(chǔ)和不竭的動力源泉。有理由推斷，學(xué)員的正確理念建立了，其教育教學(xué)行為一定會有改變；學(xué)員的積極情感增強(qiáng)了，其師德水平一定更高，敬業(yè)精神一定更強(qiáng)，教育創(chuàng)新意識一定更濃。

由于學(xué)員的教育教學(xué)能力變化情況要經(jīng)過實(shí)踐才能判斷（在返崗實(shí)踐之前學(xué)員憑個人主觀感覺是無法預(yù)知能力變化大小的），所以在問卷中未對能力層面的即時變化情況作測量。

（二）即時改變度測量數(shù)據(jù)是可以采信的

在培訓(xùn)機(jī)構(gòu)為了提高項(xiàng)目水平而進(jìn)行自我診斷的意圖之下，培訓(xùn)者告知學(xué)員本問卷測量結(jié)果只用作對培訓(xùn)項(xiàng)目評價(jià)而不與學(xué)員個人學(xué)習(xí)成績掛鉤。這樣，在無記名的條件下，思想顧慮和心理干擾較少，絕大多數(shù)學(xué)員會將學(xué)習(xí)效果的自我判斷真實(shí)表達(dá)出來，提供可靠的信息。因此，即使存在不同學(xué)員的自我判斷尺度或許不一的可能性，從統(tǒng)計(jì)學(xué)意義來說，測量所得數(shù)據(jù)總體是可以采信的。

（三）即時改變度對判斷學(xué)員培訓(xùn)效果具有一定說服力

因?yàn)榧磿r改變度的測量主要依賴于學(xué)員的自我評價(jià)信息，所以它還不是十分全面的觀測，但它從學(xué)員主觀感受的角度反映了學(xué)員在訓(xùn)期間的習(xí)得狀況和思想、理念、情感變化狀況，在一定程度上解決了培訓(xùn)效果評價(jià)中及時獲取評價(jià)信息的操作問題。它幫助我們判斷學(xué)員培訓(xùn)即時效果，這比僅憑感覺的印象評價(jià)更理性，也比僅看學(xué)員對培訓(xùn)項(xiàng)目的滿意度來評價(jià)更合理。它由一組量化的參數(shù)來表現(xiàn)學(xué)員培訓(xùn)效果，比反應(yīng)層和學(xué)習(xí)層的評價(jià)信息更直觀、清晰，便于培訓(xùn)管理者作比較和分析，具有一定說服力。若能把它與學(xué)員參訓(xùn)的表現(xiàn)、完成作業(yè)的情況等考核結(jié)合起來，則可為評價(jià)學(xué)員的參訓(xùn)效果提供更為豐富的依據(jù)。

（四）評價(jià)對象主要是學(xué)員，真正關(guān)注學(xué)員參加培訓(xùn)的成效

即時改變度測量問卷所關(guān)注的問題聚集于學(xué)員自身有怎樣的變化，使評價(jià)的注意力真正放在學(xué)員這個學(xué)習(xí)主體上來，從學(xué)員的即時變化看培訓(xùn)項(xiàng)目的得失，進(jìn)而找到項(xiàng)目改進(jìn)的抓手，打破了以往培訓(xùn)效果測評僅僅關(guān)注學(xué)員對培訓(xùn)項(xiàng)目及培訓(xùn)機(jī)構(gòu)是否滿意的模式，減少了因?qū)W員在某件事上對培訓(xùn)機(jī)構(gòu)不滿意而過度否定整體項(xiàng)目或?qū)ε嘤?xùn)機(jī)構(gòu)的服務(wù)很滿意而過譽(yù)整體項(xiàng)目的可能性。例如我院承擔(dān)的某國培項(xiàng)目的即時改變度數(shù)據(jù)和項(xiàng)目滿意度測評結(jié)果顯示，學(xué)員對培訓(xùn)的住宿和餐飲滿意度并非很高，但是四個層面即時改變度和即時改變率數(shù)據(jù)卻非常好，這表明即使學(xué)員對培訓(xùn)生活服務(wù)評價(jià)不太高，但其培訓(xùn)收效感是很強(qiáng)的。

（五）即時改變度測量的評價(jià)方法雖不完備但很適用

用測量即時改變度的方法，培訓(xùn)機(jī)構(gòu)可以及時獲得學(xué)員參訓(xùn)效果的反饋，即使它尚不夠完備，但也為我們開啟了一種評價(jià)教師培訓(xùn)效果的簡易方法。事實(shí)上，如果過于強(qiáng)調(diào)培訓(xùn)效果評價(jià)方法的全面性、完備性，其結(jié)果是遲遲找不到可行的評價(jià)方法，往往使常態(tài)的培訓(xùn)效果評價(jià)落空。

（六）即時改變度不宜用來評價(jià)學(xué)員個體的參訓(xùn)效果

對全班的即時改變度測量結(jié)果進(jìn)行統(tǒng)計(jì)，可以對本培訓(xùn)項(xiàng)目的學(xué)員整體培訓(xùn)效果作出評價(jià)。但因無記名答卷的原因，不宜依此對每一個學(xué)員個體的培訓(xùn)效果作出評價(jià)。

參考文獻(xiàn)

[1]王冬凌.建構(gòu)教師培訓(xùn)效果評估模式：內(nèi)涵與策略——兼論教師培訓(xùn)機(jī)構(gòu)走向?qū)I(yè)化的路徑[J].大連教育學(xué)院學(xué)報(bào)，2011（12）.

[2]汪文華.“滿意度”高≠培訓(xùn)效果好——教師培訓(xùn)效果評估思考[J].教育科學(xué)論壇，2011（9）.

[3]賀安溪，胡惠明.農(nóng)村中小學(xué)教師培訓(xùn)評價(jià)研究[J].當(dāng)代教育理論與實(shí)踐，2012（1）.