李曉紅

【摘 要】為了檢驗(yàn)和改善教師培訓(xùn)講座的效果，需要對(duì)培訓(xùn)進(jìn)行科學(xué)的評(píng)估。日本各個(gè)縣立教育研究所在評(píng)價(jià)體系中采用的“關(guān)鍵詞評(píng)價(jià)法”，可以有效檢測(cè)參訓(xùn)教師對(duì)培訓(xùn)知識(shí)和技能的理解與掌握程度。廣島縣教育研究中心通過(guò)實(shí)踐檢驗(yàn)證明了“關(guān)鍵詞評(píng)價(jià)法”作為評(píng)價(jià)手段對(duì)“理解度”檢測(cè)的恰當(dāng)性，同時(shí)還驗(yàn)證了對(duì)培訓(xùn)內(nèi)容高度的“理解力”是“行動(dòng)力”的基礎(chǔ)?！瓣P(guān)鍵詞評(píng)價(jià)法”作為切實(shí)可行的評(píng)價(jià)方式，可以作為我國(guó)當(dāng)前培訓(xùn)評(píng)估的重要補(bǔ)充手段。

【關(guān)鍵詞】培訓(xùn) 關(guān)鍵詞 評(píng)價(jià) 檢測(cè)

日本教育基本法第九條規(guī)定，教育公務(wù)員必須不斷努力提高個(gè)人能力和素養(yǎng)，每一個(gè)教師都有不斷參加培訓(xùn)學(xué)習(xí)、不斷充實(shí)自我的內(nèi)在和外在要求。日本每年都舉行各種主題的教師培訓(xùn)，其培訓(xùn)水平的發(fā)達(dá)與先進(jìn)的評(píng)估體系密切相關(guān)。判斷一個(gè)培訓(xùn)是否真的有效必須對(duì)其效果進(jìn)行評(píng)估，培訓(xùn)效果的評(píng)價(jià)和檢測(cè)不僅是為了檢驗(yàn)投入成本是否有價(jià)值，更重要的是為了改善培訓(xùn)效果，提高培訓(xùn)的質(zhì)量和效率。美國(guó)密歇根大學(xué)丹尼爾·斯塔弗爾比姆教授曾說(shuō)過(guò)，“評(píng)價(jià)最主要的不是為了證明，而是為了改進(jìn)”。日本各個(gè)縣立教育研究所是為教育公務(wù)員提供培訓(xùn)服務(wù)的專門機(jī)構(gòu)，在教師培訓(xùn)方面做了很多工作。除了提供培訓(xùn)設(shè)施、制訂培訓(xùn)計(jì)劃、研究獎(jiǎng)勵(lì)政策等常規(guī)的工作內(nèi)容以外，還一直致力于提高教師培訓(xùn)講座的質(zhì)量。其中，以“關(guān)鍵詞評(píng)價(jià)法”為中心的培訓(xùn)評(píng)估手段，是各個(gè)教育研究所廣為采用的評(píng)估方式之一。

一、培訓(xùn)評(píng)價(jià)和效果檢測(cè)概述

日本培訓(xùn)專家平松陽(yáng)一認(rèn)為，檢測(cè)和評(píng)價(jià)是兩個(gè)不同的概念。檢測(cè)追求客觀的數(shù)字化的定量的尺度，培訓(xùn)效果的檢測(cè)就是通過(guò)客觀數(shù)字來(lái)顯示培訓(xùn)效果的一種方式。[1]評(píng)價(jià)則是參照某種價(jià)值體系，根據(jù)參訓(xùn)人的狀況和研修的實(shí)施情況進(jìn)行判斷的一種評(píng)估手段。根據(jù)柯克帕特里克的理論，常用的培訓(xùn)檢測(cè)方法有六種：培訓(xùn)后問(wèn)卷調(diào)查、培訓(xùn)前后小測(cè)驗(yàn)、面談（當(dāng)面聽(tīng)取參訓(xùn)教師的心得體會(huì)和感受）、對(duì)照試驗(yàn)（接受培訓(xùn)群體和未接受培訓(xùn)群體實(shí)際工作效果的對(duì)比測(cè)試）、360度意見(jiàn)反饋（針對(duì)參訓(xùn)教師的態(tài)度和行動(dòng)，培訓(xùn)前后對(duì)其周圍的人進(jìn)行問(wèn)卷調(diào)查）、回報(bào)率分析（培訓(xùn)所需費(fèi)用與產(chǎn)生的業(yè)績(jī)之間的比率）。[2]

日本各個(gè)教育研究所的培訓(xùn)效果評(píng)價(jià)方法都參考了柯克帕特里克提出的理論，把培訓(xùn)分為四個(gè)層次，即反應(yīng)（reaction）、學(xué)習(xí)（learning）、行動(dòng)（behavior）、結(jié)果（results）。

第一層次的反應(yīng)是指參訓(xùn)教師對(duì)參加培訓(xùn)的感受，是否認(rèn)為來(lái)參加培訓(xùn)很好，培訓(xùn)內(nèi)容對(duì)今后工作是否有效果。第二層次是學(xué)習(xí)階段，參訓(xùn)教師是否能夠理解培訓(xùn)內(nèi)容，對(duì)講授知識(shí)和技能的掌握情況如何。第三層次的行動(dòng)階段，是指參訓(xùn)教師是否能把在培訓(xùn)中學(xué)到的內(nèi)容在實(shí)際工作中運(yùn)用，其行動(dòng)和態(tài)度在培訓(xùn)前后是否有較大改變。第四層次是成果階段，指參訓(xùn)教師在培訓(xùn)后通過(guò)個(gè)人努力，作用于學(xué)生之后產(chǎn)生的效果如何，即教師業(yè)績(jī)是否有所提高。其中第二層次即教師學(xué)習(xí)理解和達(dá)成度的評(píng)價(jià)是后兩個(gè)階段的基礎(chǔ)，沒(méi)有教師對(duì)培訓(xùn)內(nèi)容的理解就不可能有教師付諸實(shí)踐的行動(dòng)，也就不可能帶來(lái)作用于學(xué)生之后業(yè)績(jī)的變化。

一般來(lái)講，“反應(yīng)”階段的評(píng)價(jià)方式是四個(gè)層次中最簡(jiǎn)單的。通過(guò)培訓(xùn)后問(wèn)卷調(diào)查、培訓(xùn)前后小測(cè)驗(yàn)、面談等方式就可以迅速得出參訓(xùn)教師的滿意度數(shù)據(jù)。第二層次“學(xué)習(xí)”階段的評(píng)價(jià)方式中，日本各個(gè)縣的教育研究所主要采用“關(guān)鍵詞評(píng)價(jià)法”來(lái)進(jìn)行評(píng)價(jià)；第三、四層次的評(píng)估較為復(fù)雜，可以運(yùn)用跟蹤問(wèn)卷調(diào)查、對(duì)照試驗(yàn)、360度意見(jiàn)反饋等多種方法進(jìn)行科學(xué)評(píng)價(jià)。第二層次“學(xué)習(xí)”階段是第三、四階段的基礎(chǔ)，沒(méi)有對(duì)學(xué)習(xí)內(nèi)容的“理解和掌握”就沒(méi)有在實(shí)踐中的“運(yùn)用”，本文主要探討“關(guān)鍵詞評(píng)價(jià)法”在教師培訓(xùn)評(píng)價(jià)體系中的運(yùn)用和效果的檢驗(yàn)。

二、關(guān)鍵詞評(píng)價(jià)法

（一）“關(guān)鍵詞評(píng)價(jià)法”的內(nèi)涵

日本著名的教育培訓(xùn)專家平松提出了用“關(guān)鍵詞評(píng)價(jià)法”來(lái)評(píng)價(jià)培訓(xùn)效果。所謂“關(guān)鍵詞法”就是為了把握參訓(xùn)人員對(duì)講座內(nèi)容的理解程度，把培訓(xùn)內(nèi)容總結(jié)為幾個(gè)重要關(guān)鍵詞，通過(guò)選擇的關(guān)鍵詞和敘述關(guān)鍵詞選擇的理由，來(lái)大體了解參訓(xùn)人員的能力水平和講座的學(xué)習(xí)效果等情況的一種小測(cè)試。其理論根據(jù)是通過(guò)關(guān)鍵詞的敘述使人的認(rèn)知從“暗默知”轉(zhuǎn)向“形式知”，從而達(dá)到鞏固知識(shí)的目的。所謂“暗默知”，在日本著名的知識(shí)創(chuàng)造的研究者野中郁次郎著作的《知識(shí)創(chuàng)造的經(jīng)營(yíng)》一書(shū)中有詳細(xì)解釋，是指人們基于個(gè)人生活體驗(yàn)，扎根于內(nèi)心的個(gè)體知識(shí)、信念以及對(duì)事物的看法、價(jià)值體系等無(wú)形要素。由于是特定情況下個(gè)人的知識(shí)或者體驗(yàn)，所以很難傳達(dá)給別人?！靶问街笔侵赴涯切﹥?nèi)在的知識(shí)變成用語(yǔ)言表達(dá)的形式，比如符合語(yǔ)法的文章、數(shù)學(xué)的表達(dá)、技術(shù)方法的闡述、指南性的手冊(cè)等。通過(guò)形式化的表達(dá)，使之變成易于傳達(dá)的知識(shí)?！瓣P(guān)鍵詞評(píng)價(jià)法”就是基于這一知識(shí)，試圖把“暗默知”轉(zhuǎn)化成“形式知”，通過(guò)檢驗(yàn)其轉(zhuǎn)化的程度了解教師對(duì)培訓(xùn)內(nèi)容掌握的程度，同時(shí)這個(gè)轉(zhuǎn)化過(guò)程也可以加深教師對(duì)知識(shí)的理解和傳承。[4]

根據(jù)“關(guān)鍵詞評(píng)價(jià)法”的特性，教育研究所主要用“關(guān)鍵詞評(píng)價(jià)法”檢驗(yàn)第二層次，即“學(xué)習(xí)階段”教師對(duì)知識(shí)和技能的理解與掌握程度。他們的目的不是僅僅讓參訓(xùn)教師記住幾個(gè)關(guān)鍵詞，而是想通過(guò)關(guān)鍵詞讓教師掌握相關(guān)的知識(shí)和必要的技能。教師在報(bào)名培訓(xùn)的時(shí)候，會(huì)領(lǐng)到一本《培訓(xùn)講座指南》的小冊(cè)子，通過(guò)指南了解講座的目的和概要。在講座開(kāi)始時(shí)提前對(duì)講座內(nèi)容有大體的認(rèn)識(shí)，從而能夠更加集中精力投入培訓(xùn)講座。

（二）“關(guān)鍵詞評(píng)價(jià)法”的具體運(yùn)用

1.“關(guān)鍵詞評(píng)價(jià)法”適用的培訓(xùn)講座

“關(guān)鍵詞評(píng)價(jià)法”作為評(píng)價(jià)手段并不適用一切講座，平松把講座類型大致分為“能力開(kāi)發(fā)型”和“課題達(dá)成型”兩種?！澳芰﹂_(kāi)發(fā)型”講座是指重點(diǎn)在于提供知識(shí)、技巧、技術(shù)等的培訓(xùn)，代表性的講座有公司的新入員工培訓(xùn)、中高層骨干員工培訓(xùn)、管理層培訓(xùn)等。在當(dāng)今社會(huì)環(huán)境不斷變化的情況下，這一類培訓(xùn)有減少的趨勢(shì)。還有一類是“課題達(dá)成型”講座，這一類型的講座主要針對(duì)當(dāng)前面臨的具體問(wèn)題展開(kāi)培訓(xùn)，不僅僅是提供知識(shí)和技能，更重要的是利用培訓(xùn)中的知識(shí)和技能解決當(dāng)前職場(chǎng)棘手問(wèn)題，即注重培訓(xùn)的實(shí)效性?！靶?nèi)培訓(xùn)的運(yùn)用度講座”之類就屬于“課題達(dá)成型講座”的范疇?！瓣P(guān)鍵詞評(píng)價(jià)法”作為檢驗(yàn)參訓(xùn)教師理解和運(yùn)用能力的評(píng)估手段，對(duì)評(píng)價(jià)此類講座的效果具有較強(qiáng)的適用性。

2.設(shè)定實(shí)施步驟

使用“關(guān)鍵詞評(píng)價(jià)法”評(píng)價(jià)“學(xué)習(xí)內(nèi)容理解度”的培訓(xùn)效果，需要事先檢驗(yàn)其作為評(píng)價(jià)手段的合理性。為此廣島縣教育研究所確定了“關(guān)鍵詞評(píng)價(jià)法”在實(shí)證檢驗(yàn)中的步驟：（1）分析培訓(xùn)內(nèi)容，由講座指導(dǎo)教師根據(jù)核心內(nèi)容確定重要關(guān)鍵詞，在這個(gè)基礎(chǔ)上展開(kāi)培訓(xùn)（以上內(nèi)容對(duì)參訓(xùn)教師保密）。為了提高關(guān)鍵詞的精密度，還要設(shè)定關(guān)鍵詞群以供參訓(xùn)教師選擇（在問(wèn)卷調(diào)查時(shí)對(duì)教師公開(kāi)）。設(shè)定時(shí)要注意：重要關(guān)鍵詞的有無(wú)及其個(gè)數(shù)；關(guān)聯(lián)關(guān)鍵詞的有無(wú)及其個(gè)數(shù)；關(guān)鍵詞的說(shuō)明及其選擇的根據(jù)；能夠在本校付諸實(shí)踐的可能性。（2）培訓(xùn)結(jié)束后，實(shí)施及時(shí)問(wèn)卷調(diào)查。內(nèi)容主要考查參訓(xùn)教師對(duì)關(guān)鍵詞的選擇和相應(yīng)理由。如果寫出的關(guān)鍵詞與培訓(xùn)講師提前設(shè)定的一致的話，就可以充分說(shuō)明講座的有效性。所以“關(guān)鍵詞評(píng)價(jià)法”不僅可以檢驗(yàn)第二階段的評(píng)估效果，在策劃講座、改善講座效果方面也有一定的功效。（3）把大家選擇的關(guān)鍵詞排序。根據(jù)排序結(jié)果進(jìn)行分析總結(jié)，檢驗(yàn)講座效果。（4）講座結(jié)束一段時(shí)間以后，對(duì)參訓(xùn)人員進(jìn)行跟蹤問(wèn)卷調(diào)查。通過(guò)跟蹤問(wèn)卷調(diào)查，對(duì)參訓(xùn)教師回到工作崗位之后對(duì)培訓(xùn)內(nèi)容的運(yùn)用度進(jìn)行大致的了解和分析，并進(jìn)行分類整理，從而對(duì)培訓(xùn)效果進(jìn)行評(píng)估（檢驗(yàn)第三層次）。（5）對(duì)每一位教師的第二層次和第三層次的評(píng)價(jià)結(jié)果進(jìn)行比對(duì)分析，從而驗(yàn)證“理解度”的高低對(duì)“行動(dòng)力”大小的影響。得出“關(guān)鍵詞法”在評(píng)估體系中的是否有效的結(jié)論。[5]

3.具體實(shí)施內(nèi)容

以“校內(nèi)培訓(xùn)推進(jìn)者的作用”為例，在培訓(xùn)中，講座指導(dǎo)教師首先提前確定多個(gè)培訓(xùn)內(nèi)容中的核心關(guān)鍵詞（為了檢驗(yàn)推論的正確，對(duì)聽(tīng)講教師事先不公布關(guān)鍵詞），在這個(gè)基礎(chǔ)上展開(kāi)指導(dǎo)。一天的講座結(jié)束后，讓參訓(xùn)教師從各研修主題的關(guān)鍵詞群（35個(gè)）中選擇一個(gè)跟培訓(xùn)內(nèi)容最直接相關(guān)的關(guān)鍵詞，并闡述選擇理由。

經(jīng)過(guò)問(wèn)卷調(diào)查統(tǒng)計(jì)的結(jié)果，把各培訓(xùn)講座內(nèi)容的關(guān)鍵詞作一個(gè)排名，公示排名靠前的關(guān)鍵詞及其選擇理由，并對(duì)這些結(jié)果進(jìn)行分析?！靶?nèi)培訓(xùn)推進(jìn)者的作用”講座的及時(shí)問(wèn)卷調(diào)查88名教師中，有23名（26%）選擇“激勵(lì)機(jī)制”作為關(guān)鍵詞，有38名（43%）認(rèn)為關(guān)鍵詞是“動(dòng)機(jī)推動(dòng)”和“動(dòng)機(jī)阻斷”。從他們的選擇理由可以看出參訓(xùn)教師對(duì)培訓(xùn)內(nèi)容有什么樣的期待，同時(shí)也從理論上證明了學(xué)校開(kāi)展激發(fā)教師工作動(dòng)力的工作的必要性。通過(guò)“關(guān)鍵詞評(píng)價(jià)法”，各個(gè)講座中教師可以對(duì)培訓(xùn)的核心內(nèi)容有一個(gè)大致了解，從而檢測(cè)整個(gè)培訓(xùn)的目標(biāo)是否基本達(dá)成。從參訓(xùn)教師對(duì)選擇關(guān)鍵詞理由的敘述，研究所也大致可以整體把握教師對(duì)培訓(xùn)內(nèi)容的理解程度。[6]為了驗(yàn)證“關(guān)鍵詞評(píng)價(jià)法”的有效性，還必須對(duì)“學(xué)習(xí)”和“行動(dòng)”兩階段評(píng)價(jià)結(jié)果進(jìn)行分析。第三階段中把培訓(xùn)內(nèi)容大幅度付諸行動(dòng)的人的關(guān)鍵詞，和幾乎沒(méi)有采取任何行動(dòng)的人在第二階段選擇的關(guān)鍵詞進(jìn)行對(duì)比分析，考查培訓(xùn)中設(shè)定關(guān)鍵詞的恰當(dāng)性。從而檢驗(yàn)關(guān)鍵詞在培訓(xùn)效果檢測(cè)中是否能成為一個(gè)有效的評(píng)價(jià)指標(biāo)。

三、結(jié)語(yǔ)

問(wèn)卷調(diào)查法是培訓(xùn)評(píng)價(jià)中最常見(jiàn)的方法，但是問(wèn)卷的問(wèn)題設(shè)計(jì)一般都是圍繞“你認(rèn)為效果如何？”“你是否有所收獲？”“你的理解力是否得到加深？”等泛泛的主觀的問(wèn)題為主，無(wú)法客觀地把握參訓(xùn)人員真實(shí)的掌握情況。事實(shí)上，面對(duì)此類問(wèn)題，有時(shí)候參訓(xùn)人員自身也無(wú)法給出科學(xué)的答案。通過(guò)“關(guān)鍵詞評(píng)價(jià)法”的引入，使參訓(xùn)教師在問(wèn)卷中有章可循，可以更為科學(xué)、客觀地判斷知識(shí)理解程度，檢驗(yàn)培訓(xùn)的實(shí)施效果。

評(píng)價(jià)是一個(gè)極其復(fù)雜的綜合過(guò)程，僅靠一種手段很難對(duì)培訓(xùn)進(jìn)行全面的科學(xué)的綜合評(píng)價(jià)，“教師培訓(xùn)評(píng)價(jià)是一項(xiàng)具有連續(xù)性、動(dòng)態(tài)發(fā)展性的過(guò)程，單一的評(píng)價(jià)方式無(wú)法滿足教師培訓(xùn)的評(píng)價(jià)工作，需要多種評(píng)價(jià)方式間的相互配合、互補(bǔ)有無(wú)，在實(shí)踐中不斷磨合、改進(jìn)，生成綜合性教師培訓(xùn)評(píng)價(jià)方式的范式?！盵8]通過(guò)借鑒日本的“關(guān)鍵詞評(píng)價(jià)法”，在此基礎(chǔ)上與其他多種方式相結(jié)合，使我們的評(píng)價(jià)手段更加健全，將有利于教師培訓(xùn)效果的檢驗(yàn)和質(zhì)量上的提升。

參考文獻(xiàn)：

[1]平松陽(yáng)一.教育研修の効果測(cè)定と評(píng)価の仕方[M].日興企畫，2006：16.

[2]淺野良一.『教育の企畫·実行と効果測(cè)定』 [M].

教育開(kāi)發(fā)研究所，2007：95.

[3]堀內(nèi)秀規(guī).研修の効果測(cè)定―研修講座の工夫·改善に向けて[J].奈良県立教育研究所，2009[2016-1-28]. http：//www.nara-c.ed.jp/gakushi/kiyou/h19/data/a/01/.

[4]羽村昭彥.教員研修評(píng)価·改善システムの開(kāi)発に関する研究[J].広島教育センター，2008[2016-1-18].http：//www.hiroshima-c.ed.jp/web/

publish/ki/pdf1/kk35/.

[5]松栄建吾.教職員専門研修講座改善のための評(píng)価システムの開(kāi)発に関する研究[J].廣島縣立教育研究所，2010[2016-1-20].http：//www.hiroshima-c.ed.jp/web/publish/ki/pdf1/kk36/.

[6]広島教育センター.教員研修評(píng)価·改善システムの開(kāi)発に関する研究[J].廣島縣立教育中心研究紀(jì)要34號(hào)，2007[2016-1-20].http：//www.hiroshima-c.ed.jp/web/publish/ki/pdf1/kk35/.

[7]三宅啓介.「教員研修評(píng)価·改善システムの開(kāi)発に関する研究-研修効果測(cè)定の方法とその評(píng)価指標(biāo)の構(gòu)築や検証を通して-」[J].奈良縣立教育研究所，2008[2016-1-20].http：//www.hiroshima-c.ed.jp/web/publish/ki/pdf1/kk34/.

[8]孟夢(mèng)，裴田霏.教育改革綜合視域下中小學(xué)教師培訓(xùn)評(píng)價(jià)研究[J].中小學(xué)教師培訓(xùn).2015（6）.

（河南師范大學(xué)外國(guó)語(yǔ)學(xué)院 453000）