張敏麗 張?zhí)鞁? 陳秀彬
[摘 要]為了研究情景判斷測(cè)驗(yàn)在保密工作勝任力領(lǐng)域的適應(yīng)性,文章采用李克特五分量法進(jìn)行問(wèn)卷調(diào)查,確定保密專業(yè)學(xué)生的勝任力因素,同時(shí)根據(jù)勝任力因素運(yùn)用情景判斷測(cè)驗(yàn)技術(shù)出題,驗(yàn)證研究表明根據(jù)勝任力因素編制的情景判斷測(cè)驗(yàn)題具有良好的區(qū)分度、信度和效度,研究也證明了情景判斷測(cè)驗(yàn)可測(cè)出保密工作能力和水平,對(duì)保密工作的發(fā)展有積極的推動(dòng)作用。
[關(guān)鍵詞]勝任力;情景判斷測(cè)驗(yàn);保密工作
[DOI]10.13939/j.cnki.zgsc.2018.16.115
1 引 言
隨著信息化的飛速發(fā)展,無(wú)論是國(guó)家還是企業(yè)之間的信息戰(zhàn)越來(lái)越激烈,培養(yǎng)適應(yīng)現(xiàn)代化的保密專業(yè)人才顯得極為重要。為了更好地評(píng)估保密專業(yè)學(xué)生勝任力,我們認(rèn)為需要采用情景判斷測(cè)驗(yàn)技術(shù),目前的研究中,關(guān)于保密專業(yè)學(xué)生的情景判斷測(cè)驗(yàn)題的研究較少,主要是從情景判斷測(cè)驗(yàn)技術(shù)的效度方面進(jìn)行研究。
效度研究主要分為效標(biāo)關(guān)聯(lián)效度、構(gòu)想效度和增量效度研究,馮明、王躍節(jié)(2008)通過(guò)實(shí)驗(yàn)表明情景判斷測(cè)驗(yàn)在制造業(yè)管理方面能夠測(cè)出認(rèn)知能力和工作經(jīng)驗(yàn);劉潤(rùn)香、戴海琦等在2010年增加了增量效度,并分析了試題特性、開發(fā)模式對(duì)測(cè)驗(yàn)效度的影響,最終得出情景判斷測(cè)驗(yàn)是否有好的效度主要取決于測(cè)驗(yàn)的開發(fā)過(guò)程。
總體來(lái)說(shuō),由于研究的深入,情景判斷測(cè)驗(yàn)已經(jīng)運(yùn)用到許多領(lǐng)域,但情景判斷測(cè)驗(yàn)主觀性較強(qiáng),測(cè)驗(yàn)結(jié)果容易受到很多因素的影響,因而現(xiàn)如今的研究方向主要是情景判斷測(cè)驗(yàn)的效度和信度問(wèn)題,文章以保密專業(yè)學(xué)生為研究對(duì)象,確定保密專業(yè)學(xué)生勝任力因素,結(jié)合情景判斷測(cè)驗(yàn)技術(shù),編制適合保密專業(yè)學(xué)生的情景判斷測(cè)驗(yàn)題,為學(xué)生自評(píng)、教學(xué)評(píng)估以及企業(yè)招聘提供依據(jù)。
2 保密工作勝任力要素確定
保密工作勝利力情景測(cè)試題依據(jù)保密工作勝任力要素設(shè)計(jì)與編制,以保證情景測(cè)試的試題廣度可以滿足保密工作在各個(gè)方面的要求。
2.1 初定勝任力要素
介于保密工作的特殊性,研究中參閱《中華人民共和國(guó)保守國(guó)家秘密法》《中華人民共和國(guó)保守國(guó)家秘密法實(shí)施條例》等有關(guān)規(guī)定并查閱公務(wù)員、情報(bào)分析師、行政管理人員等職業(yè)的勝任力構(gòu)成要素,初定保密工作勝任力要素。
2.2 勝任力要素問(wèn)卷
基于初定的保密工作勝任力要素設(shè)計(jì)了保密工作勝任力要素調(diào)查問(wèn)卷,問(wèn)卷采用李克特5分量法,即將每個(gè)構(gòu)成要素分為5個(gè)認(rèn)同等級(jí):從“非常不重要”到“非常重要”,分別對(duì)應(yīng)“1”到“5”分。調(diào)查對(duì)象是國(guó)家保密學(xué)院教師及各大保密局的中層領(lǐng)導(dǎo),共發(fā)放120份問(wèn)卷,回收116份,回收率約為96.67%。
2.2.1 問(wèn)卷效度分析
用SPSS統(tǒng)計(jì)分析得出,21個(gè)勝任力要素的平均得分最低為4.34,最高為5.00,標(biāo)準(zhǔn)誤差均低于0.062,體現(xiàn)極高的可靠性假設(shè)要素的得分與預(yù)期效果沒(méi)有顯著性差異,取檢驗(yàn)值為總體均值4.75,在進(jìn)行t檢驗(yàn)之后得到要素的Sig.(2-tailed)即p值的范圍是[0.000,0.060],因此每一個(gè)要素的P值均小于α(0.05),拒絕原假設(shè)H0,有顯著性差異且樣本平均得分均大于4.75。因此,不進(jìn)行要素的剔除。
2.2.2 問(wèn)卷信度分析
根據(jù)α信度系數(shù)法總量表的信度系數(shù)最好在0.8以上,0.7~0.8之間可以接受;分量表的信度系數(shù)最好在0.7以上,0.6~0.7還可以接受。Cronbach′s alpha系數(shù)如果在0.6以下就要考慮重新編問(wèn)卷。經(jīng)統(tǒng)計(jì)分析,問(wèn)卷的Cronbach′s alpha系數(shù)為0.774,表示問(wèn)卷可以接受。
2.3 確定勝任力要素
初定的保密工作勝任力因素通過(guò)問(wèn)卷調(diào)查及數(shù)據(jù)分析,無(wú)須剔除保密工作勝任力要素,但在問(wèn)卷最后的建議收集中,116份調(diào)查問(wèn)卷中共有8份問(wèn)卷建議我們?cè)诰幹祁}目時(shí),對(duì)環(huán)境適應(yīng)能力的考察應(yīng)該更加偏向于應(yīng)急處理能力。初定的保密工作勝任力因素最終經(jīng)過(guò)問(wèn)卷數(shù)據(jù)分析后加以改進(jìn),最終得出保密工作勝任力因素,共分為保密品格(忠誠(chéng)意識(shí)、安全意識(shí)、自律性、原則性、奉獻(xiàn)與犧牲精神、責(zé)任心)、綜合發(fā)展?jié)撃埽í?dú)立性、嚴(yán)謹(jǐn)性、自我認(rèn)知能力、創(chuàng)新實(shí)踐能力、學(xué)習(xí)能力、團(tuán)隊(duì)合作能力、人際溝通能力、環(huán)境適應(yīng)能力(偏向應(yīng)急處理能力))、保密專業(yè)技能(保密政策法規(guī)常識(shí)理解能力、定密知識(shí)技能、惡意代碼檢測(cè)與防范能力、保密檢查能力、信息安全技術(shù)能力、涉密載體管理能力、防泄密技術(shù)能力)三大類,共21個(gè)要素。
3 情景判斷測(cè)驗(yàn)題的設(shè)計(jì)
3.1 工作情景收集與獲取
通過(guò)到相關(guān)的保密單位實(shí)習(xí)、行為事件訪談和文獻(xiàn)查閱法,共收集了65個(gè)保密工作情景,包括在過(guò)去保密工作中確實(shí)發(fā)生過(guò)的、在目前保密工作中正在發(fā)生的、在未來(lái)保密工作中極有可能發(fā)生的行為情景,除此之外,還包括一些歷年來(lái)較為典型的保密工作案例。為了使情景測(cè)驗(yàn)題具有針對(duì)性的體現(xiàn)出不同勝任力在該情景下不同選擇,將65個(gè)情景分類歸入了三個(gè)勝任力維度中的共21個(gè)勝任力因素,并且根據(jù)不同的勝任力因素對(duì)原情景進(jìn)行修改和完善,部分情景在出題時(shí)可擴(kuò)展情景內(nèi)容形成多道測(cè)驗(yàn)題,經(jīng)過(guò)詳細(xì)描述相關(guān)的客觀條件和決策的判斷依據(jù),最后形成一套可用于保密工作勝任力評(píng)估的情景測(cè)驗(yàn)題,共包含105道題。
3.2 反應(yīng)選項(xiàng)的收集與計(jì)分方式
根據(jù)已獲取的保密工作情景,還需要對(duì)該情景下的不同勝任程度的行為人做出的不同反應(yīng)情況進(jìn)行收集。在確定反應(yīng)選項(xiàng)時(shí),應(yīng)當(dāng)要具有一定的區(qū)分鑒別性,在同一勝任力因素下,能力高與能力低的人員應(yīng)當(dāng)會(huì)做出不同的反應(yīng),并且能力低的人無(wú)法預(yù)知能力高的人會(huì)如何進(jìn)行決策。因此邀請(qǐng)保密專家、普通公務(wù)員、不熟悉保密工作的人員等對(duì)同一個(gè)保密工作情景下應(yīng)當(dāng)做的決策進(jìn)行回答,在獲取相關(guān)的行為反應(yīng)后,對(duì)不同類型的反應(yīng)進(jìn)行歸納和簡(jiǎn)化,得到該情景的不同反應(yīng)選項(xiàng)。在我們的105道測(cè)驗(yàn)題中,專家事先將確定好的4個(gè)選項(xiàng)計(jì)分標(biāo)準(zhǔn)進(jìn)行量化,得到每個(gè)選項(xiàng)相應(yīng)的分值,以此分值高低評(píng)價(jià)勝任力的高低。因此,在情景題與對(duì)應(yīng)選項(xiàng)形成之后,規(guī)定被試人員使用迫選法,在對(duì)不同的選項(xiàng)進(jìn)行權(quán)衡時(shí),只能選出一個(gè)最佳選項(xiàng),而該選項(xiàng)對(duì)應(yīng)的專家評(píng)分也就能夠體現(xiàn)著該被試人員對(duì)此勝任力因素的掌握情況。
4 情景判斷測(cè)驗(yàn)題的試題分析
4.1 情景判斷測(cè)驗(yàn)題區(qū)分度分析
4.1.1 試題區(qū)分度分析
在情景判斷測(cè)驗(yàn)中,區(qū)分度是區(qū)分被測(cè)者能力水平高度的指標(biāo)。本研究中對(duì)于情景判斷測(cè)驗(yàn)區(qū)分度的分析采用的是積差相關(guān)法。積差相關(guān)法適用于多級(jí)計(jì)分題,測(cè)驗(yàn)總分連續(xù)變量,計(jì)算公式為:
運(yùn)用SPSS分析得出105道情境判斷測(cè)驗(yàn)題的區(qū)分度系數(shù)(Pearson)相關(guān)系數(shù))均在0.5~0.8之間,依據(jù)1965年美國(guó)測(cè)量學(xué)家伊貝爾根據(jù)長(zhǎng)期經(jīng)驗(yàn)的出區(qū)分度評(píng)價(jià)標(biāo)準(zhǔn),均在0.4以上,可以較好地區(qū)分被測(cè)者實(shí)際水平。
4.1.2 區(qū)分度與信度關(guān)系
艾伯(R L Ebel)于1962年發(fā)布,當(dāng)全部試題的難度為0.50時(shí)由信度平均值所預(yù)測(cè)的信度系數(shù)表,如下表所示,當(dāng)試題的區(qū)分度信度平均值達(dá)到0.50時(shí),信度系數(shù)在0.949以上,本研究中情景判斷試題的區(qū)分度均在0.50以上,所以試題信度合格(見(jiàn)下表)。
4.2 情景判斷測(cè)驗(yàn)題效度分析
情景判斷測(cè)驗(yàn)題的效度指的就是它對(duì)于結(jié)果是否具有客觀準(zhǔn)確的有效性,體現(xiàn)著所測(cè)量到的結(jié)果能夠?qū)嶋H反映想要考察內(nèi)容的程度,測(cè)量結(jié)果與要考察的內(nèi)容越吻合,則效度越高;反之,則效度越低。在發(fā)放了30份情景判斷測(cè)驗(yàn)試題后,得到了105道題對(duì)應(yīng)的共3150個(gè)選項(xiàng)得分,將全部數(shù)據(jù)導(dǎo)入SPSS進(jìn)行球形檢驗(yàn)與因子分析,下表為數(shù)據(jù)分析結(jié)果,可以看出KMO值為0.708>0.7,顯著性為0.000<0.050,依照統(tǒng)計(jì)學(xué)上的標(biāo)準(zhǔn)可知該份試題的因子分析效果較好,效度顯著。
5 結(jié) 論
本研究獲得以下有意義的結(jié)論:通過(guò)李克特量表對(duì)勝任力要素進(jìn)行問(wèn)卷調(diào)查,得出21個(gè)勝任力要素,為情景判斷測(cè)驗(yàn)題的研究奠定基礎(chǔ);收集現(xiàn)實(shí)工作情景編制情景判斷測(cè)驗(yàn)題,之后驗(yàn)證了試題的效度和信度,能夠較好地同保密工作勝任力要素對(duì)應(yīng),是保密專業(yè)學(xué)生自評(píng)和相關(guān)企業(yè)招聘選拔的良好手段。本研究還有以下不足:①由于保密專業(yè)特殊性以及研究能力的限制,本研究的樣本量并不大,因此,可能會(huì)對(duì)問(wèn)卷結(jié)果產(chǎn)生一些細(xì)微影響。②本研究的情景判斷測(cè)驗(yàn)題所涉及的情景有限,無(wú)法囊括保密工作中的所有情景。針對(duì)這些不足,筆者將會(huì)在今后的研究中改進(jìn),同時(shí)下一步計(jì)劃進(jìn)一步擴(kuò)大被試數(shù)量,增強(qiáng)情景測(cè)驗(yàn)試題的可信度,并根據(jù)測(cè)驗(yàn)結(jié)果改進(jìn)試題;尋找一種算法,通過(guò)對(duì)被試的日常工作數(shù)據(jù)分析與情景測(cè)驗(yàn)結(jié)果比對(duì),進(jìn)一步提高測(cè)驗(yàn)的有效性。
參考文獻(xiàn):
[1]姚慶玲.企業(yè)中層管理者一般管理素質(zhì)情境判斷測(cè)驗(yàn)的編制[D].南昌:江西師范大學(xué),2009.
[2]馮明,王躍節(jié).制造業(yè)管理勝任力情景判斷測(cè)驗(yàn)的信效度研究[J].管理學(xué)報(bào),2008,5(6):876-882.
[3]陳萬(wàn)思.中國(guó)企業(yè)人力資源管理人員勝任力模型研究[D].廈門:廈門大學(xué),2004.
[4]王沛,董俊花.人力資源管理中情景判斷測(cè)驗(yàn)的開發(fā)與應(yīng)用[J].寧波大學(xué)學(xué)報(bào):教育科學(xué)版,2005,27(5):17-21.
[5]漆書青,戴海琦.情景判斷測(cè)驗(yàn)的性質(zhì)、功能與開發(fā)編制[J].心理學(xué)探新,2003,23(4):42-46.