高 云，朱龍杰

(南京財(cái)經(jīng)大學(xué) a. 科研處； b. 經(jīng)濟(jì)學(xué)院，江蘇 南京 210023)

非學(xué)歷教育培訓(xùn)效果監(jiān)督與評(píng)價(jià)體系研究

高 云a，朱龍杰b

(南京財(cái)經(jīng)大學(xué) a. 科研處； b. 經(jīng)濟(jì)學(xué)院，江蘇 南京 210023)

非學(xué)歷教育是我國(guó)教育體系中的重要組成部分，通過非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)，可以增強(qiáng)培訓(xùn)的針對(duì)性與有效性，提高培訓(xùn)質(zhì)量。從我國(guó)非學(xué)歷教育培訓(xùn)的實(shí)際出發(fā)，基于訓(xùn)前準(zhǔn)備、訓(xùn)中監(jiān)控、訓(xùn)后評(píng)價(jià)、跟蹤反饋等環(huán)節(jié)，提出由培訓(xùn)各方利益相關(guān)者共同參與的培訓(xùn)效果監(jiān)督與評(píng)價(jià)體系；基于上述研究，形成培訓(xùn)效果的評(píng)價(jià)指標(biāo)體系，運(yùn)用模糊綜合評(píng)價(jià)法，實(shí)現(xiàn)培訓(xùn)效果的綜合評(píng)判。

非學(xué)歷教育；培訓(xùn)效果；綜合評(píng)價(jià)

與常規(guī)教育相比，非學(xué)歷教育培訓(xùn)是更加側(cè)重于人們的素質(zhì)、技能、文化興趣等需要的一種教育形式，其特點(diǎn)在于形式靈活、內(nèi)容多樣、周期較短等[1]。隨著我國(guó)經(jīng)濟(jì)發(fā)展和創(chuàng)新型社會(huì)的構(gòu)建，非學(xué)歷教育培訓(xùn)呈現(xiàn)快速增長(zhǎng)態(tài)勢(shì)，從家政、美容等專業(yè)技能型培訓(xùn)，到考研、考公務(wù)員等應(yīng)試培訓(xùn)，以及企業(yè)經(jīng)理人的高端培訓(xùn)，培訓(xùn)已滲透到我們工作生活的各個(gè)方面，非學(xué)歷教育培訓(xùn)也成為我國(guó)教育體系的重要組成部分。由于大多數(shù)非學(xué)歷教育培訓(xùn)進(jìn)入的門檻較低、經(jīng)營(yíng)風(fēng)險(xiǎn)較小、利潤(rùn)空間較大，越來越多的人加入非學(xué)歷教育培訓(xùn)市場(chǎng)， 這在促進(jìn)市場(chǎng)繁榮發(fā)展的同時(shí)，也出現(xiàn)了培訓(xùn)機(jī)構(gòu)數(shù)量眾多、規(guī)模偏小、管理松散等問題；同時(shí)，機(jī)構(gòu)之間惡性競(jìng)爭(zhēng)，培訓(xùn)宣傳浮夸、虛假承諾等失信現(xiàn)象也屢有發(fā)生，培訓(xùn)監(jiān)管不到位、培訓(xùn)質(zhì)量良莠不齊，嚴(yán)重制約非學(xué)歷教育培訓(xùn)市場(chǎng)的健康、可持續(xù)發(fā)展。因而，需要構(gòu)建一套完整的非學(xué)歷教育培訓(xùn)監(jiān)督評(píng)價(jià)體系，通過對(duì)培訓(xùn)效果監(jiān)督與評(píng)價(jià)，改善培訓(xùn)方式、方法，提高培訓(xùn)質(zhì)量，增強(qiáng)培訓(xùn)的針對(duì)性與有效性，促進(jìn)非學(xué)歷教育培訓(xùn)市場(chǎng)規(guī)范、有序地發(fā)展。

1 非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)

關(guān)于培訓(xùn)效果評(píng)價(jià)內(nèi)涵的理解，主要有兩種觀點(diǎn)： 一種觀點(diǎn)側(cè)重于對(duì)培訓(xùn)項(xiàng)目自身的評(píng)價(jià)，如Bramley認(rèn)為培訓(xùn)效果評(píng)價(jià)就是評(píng)價(jià)一個(gè)培訓(xùn)項(xiàng)目是否有價(jià)值、是否能夠取得良好的效果[2]。另一種觀點(diǎn)將培訓(xùn)效果評(píng)價(jià)理解為對(duì)培訓(xùn)結(jié)果的評(píng)價(jià)，如英國(guó)管理服務(wù)委員會(huì)(MSC)將培訓(xùn)效果評(píng)價(jià)定義為通過評(píng)估來判斷培訓(xùn)是否達(dá)到既定目標(biāo)的過程[3]23。國(guó)內(nèi)學(xué)者對(duì)培訓(xùn)效果內(nèi)涵的理解主要傾向于第二種觀點(diǎn)，如楊杰將培訓(xùn)效果評(píng)價(jià)理解為“依據(jù)組織目標(biāo)和需要，運(yùn)用科學(xué)的理論、方法和程序，從培訓(xùn)項(xiàng)目中收集數(shù)據(jù)，以確定培訓(xùn)的價(jià)值和質(zhì)量的過程”[4]35；郭洋認(rèn)為培訓(xùn)效果評(píng)價(jià)是通過全面收集培訓(xùn)信息、數(shù)據(jù)與成果，運(yùn)用科學(xué)的方式方法，對(duì)培訓(xùn)是否滿足需求進(jìn)行判定的過程[5]。培訓(xùn)結(jié)果的好壞直接體現(xiàn)了培訓(xùn)項(xiàng)目的價(jià)值，所以本研究關(guān)于培訓(xùn)效果內(nèi)涵的理解更傾向于對(duì)培訓(xùn)結(jié)果的評(píng)價(jià)。所謂非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)，就是根據(jù)一定的非學(xué)歷教育培訓(xùn)目標(biāo)，通過系統(tǒng)收集培訓(xùn)活動(dòng)信息資料，運(yùn)用科學(xué)的評(píng)價(jià)方法，對(duì)教育培訓(xùn)活動(dòng)、培訓(xùn)過程、培訓(xùn)結(jié)果進(jìn)行價(jià)值判斷。

關(guān)于培訓(xùn)效果評(píng)價(jià)方法的研究，國(guó)內(nèi)外運(yùn)用較為廣泛的是基于Kirkpatrick提出的四級(jí)評(píng)價(jià)模型[6]294-312，從反映層、學(xué)習(xí)層、行為層、結(jié)果層等四個(gè)層次解釋如何評(píng)價(jià)培訓(xùn)效果，并構(gòu)建每一層級(jí)的評(píng)價(jià)指標(biāo)體系，運(yùn)用綜合評(píng)價(jià)方法，實(shí)現(xiàn)對(duì)非學(xué)歷教育培訓(xùn)效果的評(píng)價(jià)[5,7-8]。另外，國(guó)內(nèi)將非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)貫穿培訓(xùn)過程，從培訓(xùn)前、培訓(xùn)中和培訓(xùn)后3個(gè)方面，構(gòu)建評(píng)價(jià)指標(biāo)體系，定量評(píng)價(jià)非學(xué)歷教育培訓(xùn)效果，也較為常見[9]。 綜觀國(guó)內(nèi)現(xiàn)有的非學(xué)歷教育培訓(xùn)效果的研究成果，可以發(fā)現(xiàn)主要存在以下兩點(diǎn)不足：

1) 更多地關(guān)注培訓(xùn)后效果的評(píng)價(jià)研究，缺少培訓(xùn)過程中一系列管理、監(jiān)督、控制手段以及必要的反饋機(jī)制的研究。

2) 培訓(xùn)效果評(píng)價(jià)涉及用人單位、培訓(xùn)單位(機(jī)構(gòu))、講師、學(xué)員等培訓(xùn)相關(guān)者，但現(xiàn)有的培訓(xùn)效果評(píng)價(jià)研究重點(diǎn)是基于用人單位的角度對(duì)培訓(xùn)的有效性或經(jīng)濟(jì)性進(jìn)行測(cè)評(píng)，很大程度上忽略了其他培訓(xùn)相關(guān)者在此評(píng)價(jià)中的作用[10]。本研究是在研究與分析國(guó)際勞工組織(ILO)開發(fā)的MES(Modules of Employable Skills，模塊式技能培訓(xùn))與SIYB(Start and Improve Your Business，創(chuàng)辦和改善你的企業(yè))培訓(xùn)模式基礎(chǔ)上，結(jié)合我國(guó)非學(xué)歷教育培訓(xùn)實(shí)際，從訓(xùn)前準(zhǔn)備、訓(xùn)中監(jiān)控、訓(xùn)后評(píng)價(jià)、跟蹤反饋等環(huán)節(jié)，構(gòu)建由各培訓(xùn)相關(guān)者共同參與的培訓(xùn)效果監(jiān)督與評(píng)價(jià)體系。

2 非學(xué)歷教育培訓(xùn)效果監(jiān)督與評(píng)價(jià)體系構(gòu)建

2.1工作流程

非學(xué)歷教育培訓(xùn)效果監(jiān)督與評(píng)價(jià)可劃分為4個(gè)階段，并且這4個(gè)階段在項(xiàng)目實(shí)施中是一個(gè)循環(huán)往復(fù)的過程，具體為：

第一階段為訓(xùn)前準(zhǔn)備階段，主要任務(wù)有： 1) 培訓(xùn)宣傳； 2) 課室準(zhǔn)備； 3) 師資選擇； 4) 篩選學(xué)員； 5) 組織安排。

第二階段為訓(xùn)中監(jiān)控階段，主要任務(wù)有： 1) 每日(或階段)課程評(píng)價(jià)；2) 后勤服務(wù)保障落實(shí)。

第三階段為訓(xùn)后評(píng)價(jià)階段，主要任務(wù)有： 1) 培訓(xùn)活動(dòng)評(píng)價(jià)；2) 培訓(xùn)后續(xù)評(píng)價(jià)。

第四階段為跟蹤反饋階段，主要任務(wù)有： 1) 用人單位信息反饋； 2) 培訓(xùn)需求信息反饋。其監(jiān)督與評(píng)價(jià)的基本流程，如圖1所示。

圖1 非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)基本工作流程

2.2工具使用

在非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)中的每一階段，有著各自的工作任務(wù)與工作目的，需要培訓(xùn)效果監(jiān)督與評(píng)價(jià)所涉及培訓(xùn)相關(guān)者的協(xié)同作用，才能順利實(shí)施非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)，各階段具體的工作任務(wù)與工作目的，如表1所示。

表1 非學(xué)歷教育效果評(píng)價(jià)工具使用

非學(xué)歷教育培訓(xùn)效果監(jiān)督與評(píng)價(jià)工作是一項(xiàng)復(fù)雜的系統(tǒng)工程，需要根據(jù)具體培訓(xùn)項(xiàng)目設(shè)置詳細(xì)的評(píng)價(jià)工具，如每日(階段)意見反饋表中，可設(shè)置以下問題項(xiàng)： 1) 我喜歡的……； 2) 我不喜歡的……； 3) 我不理解的……； 4) 我的建議……； 5) 今天(近段時(shí)間)我所學(xué)到的最重要的課程……等。這樣，便于培訓(xùn)機(jī)構(gòu)、講師及時(shí)發(fā)現(xiàn)培訓(xùn)過程中的問題，并加以解決。同時(shí)，需要利益相關(guān)者的協(xié)同配合。在實(shí)際運(yùn)用中，需根據(jù)培訓(xùn)的內(nèi)容、對(duì)象、條件等選擇適當(dāng)?shù)姆椒ǎ赃_(dá)到效果評(píng)價(jià)目的，如在進(jìn)行培訓(xùn)后的學(xué)員信息反饋時(shí)，可采取抽樣的方式，對(duì)部分受訓(xùn)學(xué)員進(jìn)行回訪，減少信息搜集的工作量。

2.3評(píng)價(jià)指標(biāo)

訓(xùn)前準(zhǔn)備工作做得是否充分、訓(xùn)中監(jiān)控措施是否得力、培訓(xùn)質(zhì)量是否過硬，最終體現(xiàn)在學(xué)員對(duì)培訓(xùn)工作是否認(rèn)可以及用人單位對(duì)受訓(xùn)學(xué)員的評(píng)判上，通過對(duì)《培訓(xùn)課程結(jié)束評(píng)價(jià)表》(受訓(xùn)學(xué)員用)與《學(xué)員工作評(píng)價(jià)表》(用人單位用)的整理、分析，形成非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)表，并運(yùn)用專家評(píng)判法，得到各指標(biāo)的權(quán)重，具體如表2所示。

表2 非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)表

實(shí)際評(píng)價(jià)中，可根據(jù)評(píng)價(jià)工具設(shè)計(jì)與使用的具體情況，對(duì)《非學(xué)歷教育培訓(xùn)效果評(píng)價(jià)表》進(jìn)行修改與完善。

2.4評(píng)價(jià)方法

為能形成最終的評(píng)價(jià)結(jié)果，需要借助綜合評(píng)價(jià)方法進(jìn)行研究。由于實(shí)際評(píng)價(jià)中，各單項(xiàng)指標(biāo)往往以模糊語(yǔ)言的評(píng)價(jià)結(jié)果呈現(xiàn)比較常見，根據(jù)表2，可運(yùn)用二級(jí)模糊綜合評(píng)價(jià)法進(jìn)行分析，具體步驟如下：

1) 將評(píng)價(jià)因素集U={U1，U2}分為兩組：U1={U1，U2，…，U6}，U2={U7，U8，U9}。

2) 將評(píng)價(jià)集定義為v={非常滿意，滿意，一般，不滿意，非常不滿意}，對(duì)第二級(jí)因素集U1，U2的各因素進(jìn)行單因素評(píng)判，分別得到單因素評(píng)判矩陣

3 結(jié)束語(yǔ)

非學(xué)歷教育培訓(xùn)效果監(jiān)督與評(píng)價(jià)涉及培訓(xùn)活動(dòng)的全過程，需要相關(guān)利益方的共同努力，才能取得良好的培訓(xùn)效果。通過非學(xué)歷教育培訓(xùn)效果監(jiān)督與評(píng)價(jià)活動(dòng)，作為培訓(xùn)機(jī)構(gòu)可以及時(shí)發(fā)現(xiàn)并解決問題，基于培訓(xùn)的后續(xù)信息反饋，也可以發(fā)現(xiàn)新的培訓(xùn)項(xiàng)目，不斷創(chuàng)造自己的培訓(xùn)品牌；作為培訓(xùn)講師可以發(fā)現(xiàn)培訓(xùn)中自身的不足，不斷提高培訓(xùn)業(yè)務(wù)水平；作為受訓(xùn)學(xué)員能夠獲得必要的知識(shí)，提升自己的技能水平，更好地適應(yīng)工作崗位；作為用人單位能夠通過提高員工的工作績(jī)效，提升單位或部門的競(jìng)爭(zhēng)力。只有通過對(duì)非學(xué)歷教育培訓(xùn)活動(dòng)進(jìn)行全程監(jiān)督與評(píng)價(jià)，確保培訓(xùn)質(zhì)量，才能使培訓(xùn)各方共贏。

[1] 梁常勇. 我國(guó)非學(xué)歷教育培訓(xùn)機(jī)構(gòu)競(jìng)爭(zhēng)與發(fā)展戰(zhàn)略研究[D].長(zhǎng)沙： 長(zhǎng)沙理工大學(xué)，2005：9.

[2] BRAMLEY P. Evaluating training[R].London： Institute of Personnel and Development, 1996.

[3] LESLIE RAE. How to measure training effectiveness[M]. 牛雅娜，吳孟勝，張金普，譯，北京：中國(guó)勞動(dòng)社會(huì)保障出版社，2003.

[4] 楊杰. 組織培訓(xùn)[M]. 北京：中國(guó)紡織出版社，2003.

[5] 郭洋. 新生代員工職前培訓(xùn)效果評(píng)價(jià)研究[D].濟(jì)南：山東財(cái)經(jīng)大學(xué)，2014：36-49.

[6] KIRKPARTRICK D L. Evaluation ASTD training and development handbook[M].New York: McGraw-Hill, 1996.

[7] 郭恒源. 基于柯氏模型的非學(xué)歷教育培訓(xùn)有效性評(píng)價(jià)研究[J].知識(shí)經(jīng)濟(jì)，2011(18)：136-137.

[8] 何筠，張延峰，況芬. 公共就業(yè)培訓(xùn)效果評(píng)價(jià)[J].江西社會(huì)科學(xué)，2015(5)：214-217.

[9] 馬濤. 人力資源培訓(xùn)效果評(píng)估方法研究[J].全國(guó)商情，2007(8)：40-42.

[10] 李亞兵，胡建虹. 企業(yè)培訓(xùn)效果評(píng)價(jià)研究綜述[J].生產(chǎn)力研究，2010(3)：253-256.

〔責(zé)任編輯： 張 敏〕

Researchonsupervisionandevaluationsystemofnon-academiceducationtrainingeffectiveness

GAO Yuna, ZHU Longjieb

(a. Science and Technology Research Department, b. School of Economics, Nanjing University of Finance and Economics, Nanjing 210023, China)

Non-academic education is an important part of the education system in our country. Evaluation on non-academic education and training effectiveness can enhance the relevance and effectiveness of training and improve the quality of training.From the reality of non-academic education and training in China, based on the training preparation, monitoring, evaluation and follow-up after training in four aspects,this thesis puts forward a training effectiveness monitoring and evaluation system related to all stakeholders of participating in the training. Based on the above research, the final result is to form an evaluation index system of training effectiveness, by using fuzzy comprehensive evaluation method to achieve comprehensive evaluation of training effectiveness.

non-academic education; training effect; comprehensive evaluation

G77

A

1008-8148(2017)04-0087-03

2017-06-04

南京財(cái)經(jīng)大學(xué)繼續(xù)教育研究課題(Jg2015007)

高 云(1974—)， 女，安徽六安人，助理研究員，博士，主要從事高等教育研究；朱龍杰(1961—)，男，安徽黃山市人，副教授，主要從事統(tǒng)計(jì)學(xué)研究。