張春輝,席衛(wèi)文,朱漢祎,耿景海,章戰(zhàn)士,文民剛
(南方醫(yī)科大學(xué) 教務(wù)處,中國(guó) 廣州 510515)
網(wǎng)絡(luò)化題庫(kù)可以讓試題管理的繼承性、成長(zhǎng)性充分顯現(xiàn),網(wǎng)絡(luò)化考試借助互聯(lián)網(wǎng)極大地拓展了考試的區(qū)域性、靈活性,并可促進(jìn)試題的自我生長(zhǎng)。網(wǎng)絡(luò)化題庫(kù)與考試系統(tǒng)擁有大量標(biāo)準(zhǔn)化試題,可以提供多種組卷模式、考試模式和防作弊措施,還可實(shí)現(xiàn)自動(dòng)閱卷、自動(dòng)分析,并為進(jìn)一步挖掘試題和考試數(shù)據(jù)提供了可能,代表了教育改革的一個(gè)重要發(fā)展方向。
國(guó)外在智能組卷和考試等方面已取得相應(yīng)成就,并在托福、GRE、微軟認(rèn)證等等許多領(lǐng)域應(yīng)用,已經(jīng)收到了明顯的經(jīng)濟(jì)效益和社會(huì)效益。其研究多集中在考試?yán)碚?、評(píng)價(jià)模型質(zhì)量等方面,且多為普適性的學(xué)科領(lǐng)域,考核內(nèi)容多傾向于認(rèn)知領(lǐng)域,鮮見關(guān)注反映主觀能動(dòng)性的精神運(yùn)動(dòng)領(lǐng)域。
國(guó)內(nèi)對(duì)題庫(kù)系統(tǒng)的研究起步較晚,但發(fā)展較快。自80年代中期開始啟動(dòng),90年代初已經(jīng)在全國(guó)100多所高校推廣使用工科、理科及醫(yī)學(xué)題庫(kù),多為單機(jī)版系統(tǒng)。21世紀(jì)初才開始借助網(wǎng)絡(luò)實(shí)施計(jì)算機(jī)應(yīng)用等級(jí)以及部分職稱考試。目前大多數(shù)研究大多集中在系統(tǒng)的研制和初步應(yīng)用的探討方面,對(duì)題型、多媒體試題的普適性支持卻鮮有討論,并且也鮮見大范圍、大批量的實(shí)際網(wǎng)絡(luò)考試的實(shí)證分析報(bào)道。
南方醫(yī)科大學(xué)歷來重視課程考核改革與題庫(kù)建設(shè),1992年就曾建成單機(jī)版題庫(kù)系統(tǒng)并在軍隊(duì)及全國(guó)醫(yī)科院校推廣。經(jīng)過多年積累,2010年春季升級(jí)成功的網(wǎng)絡(luò)版《考易題庫(kù)與考試系統(tǒng)》正式運(yùn)行,經(jīng)過短暫的2年多時(shí)間,南方醫(yī)科大學(xué)課程題庫(kù)建設(shè)、課程考核改革等工作均取得顯著進(jìn)展。為與廣大同行分享成功經(jīng)驗(yàn),現(xiàn)將2年來的工作做一系統(tǒng)回顧,希望能為各單位網(wǎng)絡(luò)題庫(kù)建設(shè)及考試工作提供有益的借鑒。
截止2012年7月,我校共有551名教師參與題庫(kù)建設(shè),經(jīng)過四個(gè)學(xué)期的不斷努力,已經(jīng)形成了232門課程,35萬多道的大型系列試題庫(kù),涉及醫(yī)學(xué)、藥學(xué)、英語(yǔ)、中醫(yī)、工程等多個(gè)學(xué)科領(lǐng)域。從正式推出系統(tǒng)計(jì)算,平均每天增加388道試題。其中22門課程是學(xué)校指定建設(shè)的題庫(kù)。其他課程均因系統(tǒng)能顯著提高教學(xué)工作效率,推動(dòng)教學(xué)質(zhì)量提高,由教師自發(fā)建設(shè)。試題數(shù)量最多的均為綜合考試題庫(kù),其中臨床醫(yī)師執(zhí)業(yè)考試綜合題庫(kù)擁有35709道試題。
將一道試題細(xì)分為題干、備選答案、標(biāo)準(zhǔn)答案、答案解析四部分組成。不同的題型,四部分組成略有變化,但不影響試題的結(jié)構(gòu)。然后按“①是否串題,②是否單選客觀、多選客觀、主觀題”兩個(gè)維度對(duì)各類題型進(jìn)行定位。這種處理方式基本可以將目前常見的各類題型進(jìn)行定義,并可定義新型試題,例如醫(yī)學(xué)職稱考試常見的串題多選題。
網(wǎng)絡(luò)技術(shù)的進(jìn)步為考試中使用多種媒體素材提供了平臺(tái),所以大量的圖片、音頻視頻題,正逐步取代傳統(tǒng)的文字試題。新型試題的廣泛應(yīng)用,使經(jīng)典、傳統(tǒng)的課程考試,煥發(fā)新的生機(jī),課程考試的信度、效度和區(qū)分度大大提高。網(wǎng)絡(luò)考試有效地引導(dǎo)學(xué)生不但要掌握基礎(chǔ)知識(shí)、基本理論,更要學(xué)會(huì)運(yùn)用所學(xué)理論知識(shí),去分析、解決相關(guān)問題。課程考試不再僅僅局限于認(rèn)知領(lǐng)域,精神運(yùn)動(dòng)領(lǐng)域也在課程考試中逐漸涉及,考試的診斷、反饋功能得到充分的發(fā)揮。
在已完成題庫(kù)建設(shè)的79門課程中,使用了多媒體素材(包括視頻、音頻、動(dòng)畫和圖片)為題干主要內(nèi)容的課程有18門,已實(shí)施的700多場(chǎng)次課程考試中,使用到媒體素材(包括音頻、照片、視頻、動(dòng)畫)的考試有175場(chǎng)次,占考試數(shù)量的25%,而且這一趨勢(shì)正在快速增加。
大約70%的課程嚴(yán)格按照規(guī)定的設(shè)置課程及其參數(shù)、設(shè)計(jì)三級(jí)主題詞、設(shè)定總題量題型、按不同主題詞分別錄入試題等步驟建設(shè)。一般的周期在2個(gè)月左右,最快的2周完成。快速建成的課程教研室原本基本都有電子版的試題。
還有30%的課程由于沒有足夠的試題資源,就鼓勵(lì)其采取邊網(wǎng)考、邊建庫(kù)的方法。即每次考試前,把AB兩套試卷的題庫(kù)錄入系統(tǒng)中,先實(shí)施網(wǎng)考,讓教師體會(huì)網(wǎng)考的優(yōu)越性,提高教師題庫(kù)建設(shè)的動(dòng)力,然后按照題庫(kù)建設(shè)規(guī)定的步驟,構(gòu)建題庫(kù)框架,再把網(wǎng)考的試題轉(zhuǎn)化為題庫(kù)中的試題,對(duì)題庫(kù)進(jìn)行補(bǔ)充和完善。這一方法促進(jìn)了題庫(kù)建設(shè)的廣泛性,提高了老師建設(shè)題庫(kù)的自覺性和動(dòng)力。
兩年來,先后實(shí)施700多場(chǎng)網(wǎng)絡(luò)考試,共有139095人次學(xué)生參加了網(wǎng)絡(luò)考試,每場(chǎng)考試的平均人數(shù)約為200人。網(wǎng)絡(luò)考試的人次占全校本??普n程考核總?cè)舜蔚谋壤?010年春季的2.77%迅速上升到2012年春季的40.34%。系統(tǒng)共生成139095份學(xué)生個(gè)人成績(jī)分析報(bào)告,700多份試卷分析和試題分析報(bào)告,對(duì)5萬多道試題進(jìn)行了實(shí)測(cè)分析。
在多年教育測(cè)量學(xué)研究基礎(chǔ)上,隨著不同類型課程的網(wǎng)考實(shí)踐,系統(tǒng)逐步增加了多種考試方式。
單向逐題限時(shí):試題分完全隨機(jī)和題型不隨機(jī)等方式,是主推的網(wǎng)考模式;
單向逐題整卷限時(shí):只限定總答題時(shí)間,每題不限時(shí),不能回做。
整卷顯示限時(shí):所有試題一個(gè)頁(yè)面顯示出來,可回做。
逐串題限時(shí):適合英語(yǔ)類考試,每組串題一個(gè)頁(yè)面顯示出來。
一人一卷模式:在試題質(zhì)量較高的基礎(chǔ)上,每人的試題都不完全相同,但難度等要求相同。
還針對(duì)形成性考核,增加了一種答完一題后可顯示正確答案的模式,便于組織內(nèi)部學(xué)習(xí)型考核,有效提高知識(shí)的掌握效果。
在已實(shí)施的700多場(chǎng)網(wǎng)絡(luò)課程考試中,有317場(chǎng)考試人數(shù)均在200人以上。其中2012年4月14日,同時(shí)有三門課程,1025名學(xué)生參加網(wǎng)考。系統(tǒng)運(yùn)行平穩(wěn)、流暢,教師和教務(wù)管理人員還可在系統(tǒng)后臺(tái)實(shí)時(shí)監(jiān)控考試過程,說明考易系統(tǒng)使用一臺(tái)服務(wù)器,可同時(shí)支持1000人在線考試。在2011年秋季,服務(wù)器故障,用一臺(tái)普通的雙核2G內(nèi)存的PC機(jī)代替承擔(dān)400多人同時(shí)在線考試,運(yùn)行也很順暢。
經(jīng)過700多場(chǎng)網(wǎng)絡(luò)考試,相關(guān)課程試題的難度、區(qū)分度、信度等測(cè)量學(xué)指標(biāo)基本穩(wěn)定,為試題的自動(dòng)或人工維護(hù)提供了客觀依據(jù)。同時(shí)也為驗(yàn)證不同考核方式及不同類型課程試題的難度、信度及區(qū)分度的標(biāo)準(zhǔn)化區(qū)間測(cè)定提供了數(shù)據(jù)基礎(chǔ)。例如,經(jīng)過測(cè)定,A1型試題平均作答時(shí)間不足30秒,A2型試題不足40秒。
兩年的實(shí)踐,充分證明了網(wǎng)絡(luò)題庫(kù)與實(shí)施網(wǎng)考的教學(xué)效益、質(zhì)量效益、經(jīng)濟(jì)效益和社會(huì)效益都非常顯著。
考務(wù)工作流程更加規(guī)范、科學(xué),教師不再來回奔波。教務(wù)人員也不再整天面對(duì)紙質(zhì)試卷進(jìn)行審核,老師無需趴在辦公桌上奮筆疾書評(píng)閱試卷。上上下下都認(rèn)可了網(wǎng)絡(luò)題庫(kù)與考試系統(tǒng)的優(yōu)越性??梢哉f利用網(wǎng)絡(luò)題庫(kù)與考試系統(tǒng)可以使院??紕?wù)工作產(chǎn)生革命性的變化。
考易系統(tǒng)形成的700多份試卷分析報(bào)告、試題分析報(bào)告、學(xué)生成績(jī)分析報(bào)告,有力的反饋了教學(xué),指導(dǎo)學(xué)生如何學(xué)習(xí)。這700多分分析報(bào)告,如果沒有應(yīng)用網(wǎng)絡(luò)題庫(kù)和考試系統(tǒng),其形成是不可想象的。
從教師角度分析,網(wǎng)絡(luò)題庫(kù)和考試系統(tǒng)可以讓教師把有限的時(shí)間用于研究教學(xué)工作,提高教學(xué)質(zhì)量上。從學(xué)生角度看,由于網(wǎng)絡(luò)考試采取了多重的防作弊措施,有效地促進(jìn)了學(xué)風(fēng)建設(shè),促使學(xué)生把有限精力用在學(xué)業(yè)上,可顯著地提高學(xué)習(xí)效果。
由于多年的題庫(kù)建設(shè)和教考分離,我校學(xué)生在國(guó)家大型考試中屢創(chuàng)佳績(jī),執(zhí)業(yè)醫(yī)師考試通過率從2006年的全國(guó)49名一路攀升到2011年的全國(guó)第5名;印度留學(xué)生回國(guó)參加的醫(yī)師執(zhí)照考試的通過率也高達(dá)73%,在招收印度留學(xué)生的中國(guó)醫(yī)學(xué)院校中名列前茅;大學(xué)英語(yǔ)四級(jí)考試平均成績(jī)一直保持在470分左右。
圖 南方醫(yī)科大學(xué)臨床醫(yī)學(xué)專業(yè)學(xué)生首次國(guó)家醫(yī)師執(zhí)考通過率情況(數(shù)據(jù)來源:國(guó)家醫(yī)學(xué)考試中心)
以我校為例,印刷一份試卷的平均成本為1.5元(我校采用施樂高速?gòu)?fù)印機(jī)印刷試卷),每份試卷平均12頁(yè)A4紙,計(jì)0.6元;印刷費(fèi)每張7分錢,計(jì)0.84元,每份試卷的裝訂費(fèi)用0.06元,合計(jì)為1.5元),加上一張答題卡0.3元,大約每個(gè)學(xué)生一次考試直接成本需要1.8元。照此計(jì)算,自我校開展網(wǎng)絡(luò)題庫(kù)與網(wǎng)考工作以來,共有139095人次的學(xué)生參加了網(wǎng)絡(luò)考試,直接節(jié)約試卷印刷費(fèi)25萬多元。如果把這些錢用于購(gòu)買學(xué)生用計(jì)算機(jī),足以更新80多臺(tái)學(xué)生用機(jī),網(wǎng)絡(luò)考試真正地促進(jìn)了教學(xué)基礎(chǔ)建設(shè)。
根據(jù)相關(guān)數(shù)據(jù),用傳統(tǒng)木纖維制漿造紙,每生產(chǎn)1噸紙:需消耗木材2.5立方米,耗水100立方米。一包500頁(yè)的A4紙大約重2.48公斤。這樣計(jì)算,我校5個(gè)學(xué)期共節(jié)約紙張168萬張,重約8333公斤。相當(dāng)于節(jié)約了20.8立方米的木材,保護(hù)了20畝林地免遭砍伐,節(jié)約用水800多立方米,減少了大量的污水排放。如此計(jì)算,院校實(shí)施網(wǎng)考的確是一項(xiàng)效益明顯的環(huán)保工程。
兩年的網(wǎng)絡(luò)題庫(kù)與考試系統(tǒng)的實(shí)際效果表明,廣大教師在親歷網(wǎng)絡(luò)題庫(kù)和考試的魅力后,建設(shè)題庫(kù)的積極性會(huì)更高。同時(shí)也感覺到,這次通過網(wǎng)絡(luò)構(gòu)建題庫(kù)和上世紀(jì)90年代的題庫(kù)建設(shè)有天壤之別。過去是我求教師做,現(xiàn)在是教師主動(dòng)做。
為更多地了解廣大教師和各院校對(duì)考試的需求,我校曾召開三次全國(guó)性題庫(kù)建設(shè)研討會(huì),有80多家單位共150多名代表參加,現(xiàn)場(chǎng)體驗(yàn)了考易網(wǎng)絡(luò)題庫(kù)與考試系統(tǒng)?,F(xiàn)在已有10多家院校安裝使用該系統(tǒng),并順利開展網(wǎng)絡(luò)題庫(kù)建設(shè)和網(wǎng)絡(luò)在線考試。
[1]耿景海,席衛(wèi)文,張春輝,文民剛.醫(yī)學(xué)網(wǎng)絡(luò)題庫(kù)與考試系統(tǒng)利弊分析——基于網(wǎng)絡(luò)考試的事實(shí)經(jīng)驗(yàn)[J].西北醫(yī)學(xué)教育,2012,20(1):159-161.
[2]宋麗,廖洪利,蔣慶琳.高校題庫(kù)建設(shè)中存在的問題及解決措施[J].中國(guó)醫(yī)學(xué)教育技術(shù),2010(5):507-509.
[3]張春輝,陳戈煜,文民剛等.醫(yī)科院校考試改革效果的實(shí)證分析[J].中華醫(yī)學(xué)教育探索,2012(4):415-418.