嚴向宏
摘 要 培訓效果評估是考察是否達到培訓目標、分析培訓體系是否有效的重要途徑?;诳率纤膶蛹壴u估理論構(gòu)建了企業(yè)安全培訓效果評估模型,同時結(jié)合模糊綜合評價的數(shù)學方法進行了應(yīng)用分析。模型的輸出定量描述了企業(yè)實施安全培訓的總體效果,并分層次識別了企業(yè)安全培訓中的潛在改進機會。
關(guān)鍵詞 安全培訓 培訓評估 柯氏評估模型
中圖分類號:C961 文獻標識碼:A DOI:10.16400/j.cnki.kjdks.2016.07.075
Abstract Training evaluation is a primary way of tracking the training performance and understanding the effectiveness of training system. The research initiated a safety training evaluation model which based on Kirkpatrick four-level method and fuzzy comprehensive assessment tool. As a result, the evaluation model outlined overall training performance with quantitative description, and identified improvement opportunities on the safety training for enterprise as well.
Key words Safety training; training evaluation; Kirkpatrick evaluation model
美國的事故統(tǒng)計表明僅有15%的事故是由不安全的環(huán)境和設(shè)備造成的,大約有85%的事故是由人的不安全行為所致。①然而人的大多數(shù)不安全的行為主要是由于自身的安全意識淡漠或欠缺安全知識技能所致,通過實施有效的安全培訓可以增強從業(yè)人員的安全意識,提升安全知識、技能;進而杜絕由人的不安全行為引發(fā)的安全生產(chǎn)事故。②因此在企業(yè)安全管理過程中策劃合理的安全培訓并不斷提升培訓的效果顯得尤為重要。
1 安全培訓效果評估現(xiàn)狀
1.1 國外培訓評估的研究情況
國外常用的培訓效果評估模型有柯氏四級評估模型,考夫曼的五級評估模型、CIRO評估方法、CIPP模型等。③這些評估理論或模型在基礎(chǔ)數(shù)據(jù)的確定、評估方法的選擇、指標體系的建立等方面并沒有結(jié)合特定的領(lǐng)域,大多聚焦于培訓對企業(yè)人力資源管理的影響。④在近20年的研究過程中很多學者引入了統(tǒng)計學和會計學的理論,側(cè)重于對培訓效益的定量分析。例如菲利普斯五級投資回報率模型(Five-Level ROI)。
1.2 國內(nèi)安全培訓效果評估進展
國內(nèi)學者在引進國外評估模型的基礎(chǔ)上對培訓目標的實現(xiàn)程度以及培訓給企業(yè)帶來的效益等進行了研究。例如2015年賀龍,彭恩澤等基于柯氏理論對安全培訓效果評估模型進行了研究。在國家相關(guān)部委也陸續(xù)發(fā)布了安全生產(chǎn)領(lǐng)域的很多培訓大綱及考核標準,如《安全生產(chǎn)監(jiān)察員培訓大綱》,《危險化學品經(jīng)營單位主要負責人和安全管理人員的培訓大綱及考核標準》,《特種作業(yè)人員安全技術(shù)培訓大綱及考核標準》等等; 這些標準在一定程度上提升了我國安全生產(chǎn)培訓標準化的程度,也為高危行業(yè)的主要負責人、企業(yè)安全管理人員、特種作業(yè)從業(yè)人員等群體提供了安全培訓及效果評估的基本依據(jù)。⑤
2 評估模型的建立及應(yīng)用
2.1 安全培訓評估模型
柯氏培訓評估模型在各類培訓中已得到廣泛應(yīng)用,根據(jù)美國行政管理部門對300多家企業(yè)和行政管理部門的統(tǒng)計表明有67%的機構(gòu)使用了柯氏模型來對組織的培訓效果進行評估。⑥柯氏模型包含了四個評估層次,即從反應(yīng)層、學習層、行為層、結(jié)果層四個層次對評估的效果進行評估,各評估層的主要要素如表1所示。⑦
反應(yīng)層評估主要是了解學員在培訓結(jié)束后對培訓課程的總體反應(yīng),包括學員對培訓內(nèi)容興趣程度,對講師的授課方法以及課程策劃的滿意程度,對培訓項目在今后的工作產(chǎn)生影響的預(yù)期等。在反應(yīng)評估層中應(yīng)用較多的是問卷調(diào)查法,問卷調(diào)查法最大的優(yōu)點是易于實施,講師可以在培訓結(jié)束后通過收集學員的反饋問卷直接掌握學員對培訓課程的反應(yīng);但問卷調(diào)查法也存在過于依賴學員主觀判斷的局限性,甚至會受到學員情感因素的影響。因而在設(shè)計問卷及實施調(diào)查時應(yīng)該充分考慮這些潛在的影響因素,例如設(shè)計更多層次的客觀選項,保留被調(diào)查人可以發(fā)表自由評論的欄目,明確調(diào)查的真實目的是為了不斷完善培訓項目等。
學習層評估主要是評估學員學習的獲得程度,包括評估學員對培訓項目中相關(guān)知識技能、態(tài)度等內(nèi)容的理解和掌握程度。學習層評估通常采用現(xiàn)場考試、情景模擬等方式來實現(xiàn)??荚囎畲蟮膬?yōu)勢在于可以直接獲得量化的結(jié)果,但也存在刻板、靈活性不足的缺點。為避免學習評估完全依賴于考試的不足可以在培訓過程中穿插一些小組討論、成果展示的環(huán)節(jié),并把學員在這些環(huán)節(jié)的表現(xiàn)作為評估結(jié)果的一部分。
行為層評估是指考察學員對所學知識技能、態(tài)度的運用程度,通常是來自學員周圍的同事,特別是上級主管對學員在培訓結(jié)束后行為發(fā)生變化的反應(yīng)。例如學員是否在工作中運用了培訓所學的內(nèi)容,培訓后學員的態(tài)度是否發(fā)生了變化等。行為層評估一個顯著的特點是一般基于第三方反饋或行為觀察的結(jié)果,結(jié)果相對客觀真實,但卻要在培訓結(jié)束一段時間后才能實施,不利于收集收據(jù)。
結(jié)果層評估是判斷所實施的培訓是否為組織創(chuàng)造出價值,既包括經(jīng)濟價值也包括社會價值。通常可以通過一系列指標來度量,如客戶滿意度、產(chǎn)品合格率、設(shè)備停機時間、傷害事故頻率等等。結(jié)果層評估要考察的不再是受訓者的情況,而擴展到整個大范圍的組織,對企業(yè)而言具有非常重要的意義。然而這些度量指標的績效水平通常都應(yīng)歸因于企業(yè)實施綜合管理手段的結(jié)果,因而這個階段的評估難度也是最大的。
在應(yīng)用柯氏四級模型的過程中結(jié)合了某企業(yè)安全生產(chǎn)的實際情況,按照適用性、導向性、多樣性、定量與定性相結(jié)合的原則構(gòu)建了企業(yè)安全生產(chǎn)培訓效果評估的模型。如表2所示。
評價模型的一部分數(shù)據(jù)來源于滿意度問卷調(diào)查,為更精確反映調(diào)查結(jié)果的特征,在問卷調(diào)查中共設(shè)計五個結(jié)果區(qū)間,如表3所示。選取反饋最多的結(jié)果作為評估模型的輸入。
評估模型輸出的安全培訓量化效果將按照如表4進行評定,并根據(jù)不同的評價等級采取相應(yīng)的措施。
2.2 培訓效果評估因子集
在研究過程中將柯氏模型的四個評價層次分別定義為綜合評價的四個一級評價因子,即 = {,,,}。在每個一級評價因子集中結(jié)合被評價組織的具體情況分別設(shè)置了若干二級評價因子。
2.3 因子權(quán)重
評估過程中要確定一級因子集和二級因子集各因子的權(quán)重,通??梢酝ㄟ^專家經(jīng)驗與AHP層次分析法結(jié)合的方式構(gòu)建因子權(quán)重系數(shù)。依據(jù)專家對各級因子的重要性進行定量評分描述,再采用加權(quán)平均的手段進行量化分析,最終可以得到因子集或評價因子的權(quán)重。
一級因子權(quán)重集:
= {,,,}
二級因子權(quán)重集合:
2.4 模糊綜合評價
模糊綜合評價即按每類因子集對培訓效果影響的貢獻程度進行綜合評價, 則對培訓效果(F)的綜合評級可以表示為:
以反應(yīng)層評估因子為例,在輸入因子權(quán)重和量化得分后可以得到該因子集合的量化得分:
再以學習層評價因子U2 為例,在輸入的各因素權(quán)重與量化得分后,可得到結(jié)果:
最后,對整個培訓的效果的計算如下:
由評估結(jié)果可以看出,各評估層次的得分從反應(yīng)層、學習層、行為層到結(jié)果層總體上呈現(xiàn)遞減的態(tài)勢。企業(yè)實施的安全培訓總體有效,但仍需進一步改善。
3 結(jié)論
將柯氏模型的四個層次作為綜合評價的四個子集;并運用模糊綜合評價法進行量化計算,最終根據(jù)量化的結(jié)果分析各培訓因素的有效性。該評估方法有幾個顯著的特點:(1)在反應(yīng)層、學習層、以及行為層的評估過程中采取了雙向評估模式,如學員對培訓的反饋、講師對學員的反饋;學員在車間研討會的表現(xiàn)、主管對學員安全表現(xiàn)的反饋等。雙向評估模式可以在一定程度上消除單向信息輸入在數(shù)據(jù)準確性方面的不足。(2)在行為表現(xiàn)層評估中引入了學員對組織安全管理的參與程度方面的指標作為定量評估指標,如現(xiàn)場標準化作業(yè)審核的結(jié)果、員工對安全合理化建議的數(shù)量等。(3)評估模型既可以對所實施安全培訓在反應(yīng)層、學習層、行為層以及結(jié)果層產(chǎn)生的影響分別進行量化評估,又可以對培訓效果進行綜合量化評價。根據(jù)各子項及綜合評價的結(jié)果分析安全培訓系統(tǒng)各因素的進一步改進機會。(4)在實施評價過程中,組織可以結(jié)合已有的管理手段靈活設(shè)計各評估子集的評估因子。根據(jù)每個因子的評價結(jié)果采取有針對性的管理措施。
4 模型應(yīng)用的注意事項
(1)安全培訓是一種間接的安全管理手段,而學員的主管或經(jīng)理卻往往要直接對學員的安全表現(xiàn)負責。評估后應(yīng)讓學員的主管或經(jīng)理充分了解安全培訓的效果,使他們能在日常管理過程中采取措施強化培訓效果。(2)組織不可能通過一兩次安全培訓或考核就能完全改善學員的安全意識,無論是安全培訓的策劃實施,還是對培訓效果的評估都應(yīng)該是長期連續(xù)的過程。(3)在應(yīng)用柯氏模型四個評估層次對安全培訓的效果進行評估時,獲得數(shù)據(jù)的過程從第一層次到第四層次由易到難。評估到第幾個層次,應(yīng)根據(jù)企業(yè)的實際需求而定。
注釋
① 彭城,徐志剛.世界發(fā)達國家安全培訓情況[J].當代礦工,2004(8):14.
② 傅貴,李志偉,扈天保等.改善企業(yè)安全文化技術(shù)手段的應(yīng)用研究[J].中國安全生產(chǎn)科學技術(shù),2009.5(2):121-124
③ 李燕萍.培訓與發(fā)展 [M].北京:北京大學出版社,2007.
④ 賀龍,彭恩澤,陳本偉等.基于柯氏理論的安全培訓效果評估模型研究[J].中國安全生產(chǎn)科學技術(shù),2015.3(11):186-187.
⑤ 黎艷珍.安全培訓效果評估體系研究 [D].長沙:中南大學,2009:5.
⑥ 張莉娜.S-E電力公司的培訓評估現(xiàn)狀與對策研究[D].天津:天津大學,2008:14.
⑦ (美)唐納德 · L ·柯克帕特里克,詹姆斯· D ·柯克帕特里克著.如何做好評估培訓:柯氏四級評估法(第3版)[M].奚衛(wèi)華,林祝君等譯.北京:機械工業(yè)出版社,2007.