（浙江越秀外國(guó)語(yǔ)學(xué)院，浙江 紹興 312000）

一、引言

目前，我校的大學(xué)英語(yǔ)教學(xué)共開(kāi)設(shè)兩門(mén)課程，《綜合英語(yǔ)》和《英語(yǔ)聽(tīng)力》課程。英語(yǔ)聽(tīng)力課程已實(shí)現(xiàn)了由教師主導(dǎo)的傳統(tǒng)課堂轉(zhuǎn)向以聽(tīng)力平臺(tái)為基礎(chǔ)的自主聽(tīng)力學(xué)習(xí)的模式的成功改革。我校的大學(xué)英語(yǔ)聽(tīng)力課堂，已經(jīng)普遍使用各種計(jì)算機(jī)輔助教學(xué)設(shè)備，全校所有學(xué)生的聽(tīng)力課均在語(yǔ)音教室上課，這使得大學(xué)英語(yǔ)聽(tīng)力教學(xué)的個(gè)性化和自主化程度大大提高。

但是，作為大學(xué)英語(yǔ)聽(tīng)力課程教學(xué)的重要一環(huán)的學(xué)業(yè)評(píng)價(jià)，考試方式依然沿用傳統(tǒng)的筆試模式，存在著諸多弊端。傳統(tǒng)的考試要求教師出多套難度相同的試卷，同時(shí)給出試卷的參考答案和評(píng)分標(biāo)準(zhǔn)，然后拿到文印室進(jìn)行大批量復(fù)印、封裝，并送往各二級(jí)學(xué)院教科辦。此外還要求與學(xué)校廣播站合作，將錄制好的音頻在約定時(shí)間播出，學(xué)生在考試時(shí)必須帶上耳機(jī)收聽(tīng)?？荚嚱Y(jié)束后將試卷進(jìn)行拆卷、閱卷、核分、登分、分析試卷和再封裝。一次考試需要多個(gè)部門(mén)的教師和工作人員合作，耗費(fèi)了大量的人力、物力、財(cái)力和時(shí)間。這樣不僅給教師帶來(lái)巨大的工作量，也在一定程度上妨礙了大學(xué)英語(yǔ)教學(xué)質(zhì)量的提高。近年來(lái)我校十分重視大學(xué)英語(yǔ)教學(xué)改革，于2017年1月印發(fā)了關(guān)于進(jìn)一步推進(jìn)和深化大學(xué)英語(yǔ)教學(xué)改革的意見(jiàn)。依據(jù)國(guó)家頒布的《教學(xué)要求》，結(jié)合本校應(yīng)用型人才的培養(yǎng)定位，把教學(xué)目標(biāo)定為：培養(yǎng)學(xué)生的英語(yǔ)應(yīng)用能力，增強(qiáng)跨文化交際意識(shí)和交際能力，同時(shí)發(fā)展自主學(xué)習(xí)能力，提高綜合文化素養(yǎng)，使他們?cè)趯W(xué)習(xí)、生活以及未來(lái)的工作和國(guó)際交往中能夠有效地使用英語(yǔ)，滿足國(guó)家、社會(huì)、學(xué)校和個(gè)人發(fā)展的需要。同時(shí)，要逐步地從傳統(tǒng)的以讓學(xué)生“學(xué)會(huì)”為目標(biāo)轉(zhuǎn)變?yōu)橐允箤W(xué)生“會(huì)學(xué)”為目標(biāo)。大學(xué)英語(yǔ)聽(tīng)力課程評(píng)估方式的改革是大學(xué)英語(yǔ)教學(xué)改革的重要組成部分，從某種意義上講，筆試這一考試模式阻礙了大學(xué)英語(yǔ)教學(xué)改革的深入發(fā)展。大學(xué)英語(yǔ)聽(tīng)力課程考核應(yīng)該隨著大學(xué)英語(yǔ)聽(tīng)力教學(xué)方法的改變而發(fā)展。

同時(shí)，教育部大學(xué)英語(yǔ)四、六級(jí)考試改革研究，也為我們大學(xué)英語(yǔ)聽(tīng)力課程考試的評(píng)價(jià)手段的改革提供了重要的思路和方向。教育部從2006年起啟動(dòng)了大學(xué)英語(yǔ)四、六級(jí)考試改革研究，同時(shí)投入1000萬(wàn)研制四、六級(jí)無(wú)紙化機(jī)考系統(tǒng)?？荚嚫母镏饕譃閮刹糠?，即考試內(nèi)容與考試方法的改革?？荚噧?nèi)容的設(shè)計(jì)以促進(jìn)英語(yǔ)學(xué)習(xí)可持續(xù)發(fā)展為目的，考試方法改革以推進(jìn)計(jì)算機(jī)機(jī)考為主。對(duì)于這種新型考試模式已有學(xué)者對(duì)其設(shè)計(jì)原則（金艷，吳江，2009）、網(wǎng)考的意義和反撥作用（蔡基剛，2009）、網(wǎng)考的學(xué)生反饋調(diào)查（夏紀(jì)梅，楊毅，2011）等進(jìn)行研究。2008年12月在50所高校開(kāi)始實(shí)施大學(xué)英語(yǔ)四級(jí)的網(wǎng)絡(luò)無(wú)紙化測(cè)試，2009 年6月進(jìn)行了大學(xué)英語(yǔ)六級(jí)的網(wǎng)絡(luò)無(wú)紙化測(cè)試。大學(xué)英語(yǔ)四六級(jí)網(wǎng)絡(luò)考試的推行為大學(xué)英語(yǔ)聽(tīng)力教學(xué)的評(píng)估方式改革起到了巨大的促進(jìn)作用。

二、研究方案

在上述條件下，我們開(kāi)展了英語(yǔ)聽(tīng)力考試無(wú)紙化考試項(xiàng)目的研究。研究方案設(shè)計(jì)如下：

（一）考試平臺(tái)

本次機(jī)考采用了外語(yǔ)教學(xué)與研究出版社“ITEST”考試平臺(tái)，聽(tīng)力考試試題與筆試試題相同，重點(diǎn)觀察在機(jī)考過(guò)程中會(huì)遇到哪些問(wèn)題，機(jī)考結(jié)果是否會(huì)影響學(xué)生成績(jī)等。外研社“ITest”平臺(tái)能較好地承擔(dān)試題制作、試卷收發(fā)、考生答題、機(jī)器自動(dòng)及教師手動(dòng)閱卷、分?jǐn)?shù)顯示、試卷入庫(kù)等操作任務(wù),是本次機(jī)考的主要支持平臺(tái)。

（二）測(cè)試試卷

本次試卷分5個(gè)題型，分別為短對(duì)話、長(zhǎng)對(duì)話、篇章、新聞和單詞填空，滿分100分。試題來(lái)自聽(tīng)力期末考試試題庫(kù)。同時(shí)安排印刷相應(yīng)數(shù)量的紙質(zhì)試卷，和對(duì)照組同時(shí)進(jìn)行測(cè)試。其他所有因素一致，只有考試方式不同，這樣保證了試驗(yàn)的可控性和結(jié)果的客觀性。采用試題庫(kù)的同一套試卷，也可以避免個(gè)人命題容易出現(xiàn)的片面性、隨意性。這些安排和條件便于我們觀察和了解至少以下幾方面的情況：在與普通傳統(tǒng)考試安排類(lèi)似的情況下，無(wú)紙化考試過(guò)程是否會(huì)出現(xiàn)意外或其他情況？機(jī)考結(jié)果是否會(huì)出現(xiàn)顯著異常，比如與平行班筆考學(xué)生在考試結(jié)果方面是否會(huì)出現(xiàn)顯著的差異？在試卷相同考試方式不同的情況下，對(duì)無(wú)紙化機(jī)考持肯定態(tài)度的考生會(huì)占全部考生的幾成？如果過(guò)程和結(jié)果均未出現(xiàn)異常情況和顯著差異，加上如果持肯定態(tài)度的考生比例占七成及以上，則說(shuō)明聽(tīng)力課程的無(wú)紙化機(jī)考可以實(shí)行。反之，則說(shuō)明目前實(shí)施無(wú)紙化機(jī)考確實(shí)存在困難，會(huì)影響學(xué)生考試結(jié)果。下面就機(jī)考實(shí)施過(guò)程、結(jié)果分析、反饋三個(gè)方面展開(kāi)討論。

三、實(shí)施過(guò)程及觀察

我們將機(jī)考過(guò)程概括為考試對(duì)象、考前準(zhǔn)備工作、考試過(guò)程、考后閱卷及數(shù)據(jù)整理四大環(huán)節(jié)。下面依次闡述這些環(huán)節(jié)。

考試對(duì)象：

此次考試對(duì)象為大二第二學(xué)期筆者所教的4個(gè)自然班學(xué)生?？忌鷶?shù)共122人。這4個(gè)班級(jí),分別屬于酒店管理學(xué)院和國(guó)際商學(xué)院，分別為酒店管理1601班、1602班，國(guó)際貿(mào)易1601班、1602班。他們?cè)诖笠?、大二兩年里先修了英語(yǔ)聽(tīng)力1、英語(yǔ)聽(tīng)力2、英語(yǔ)聽(tīng)力3三門(mén)課程，三個(gè)學(xué)期都有大學(xué)英語(yǔ)聽(tīng)力網(wǎng)絡(luò)自主學(xué)習(xí)的經(jīng)歷，都由相同教師授課。至機(jī)考時(shí),兩個(gè)班都已完成四個(gè)學(xué)期的學(xué)習(xí)。

考前準(zhǔn)備工作

教師在考前應(yīng)依托ITEST測(cè)試平臺(tái)完成期末組卷工作，同時(shí)應(yīng)做好學(xué)生考前培訓(xùn)，加強(qiáng)學(xué)生機(jī)上練習(xí)。培訓(xùn)內(nèi)容包括：指導(dǎo)學(xué)生用用戶名和密碼登錄ITEST平臺(tái)，熟悉測(cè)試系統(tǒng)的網(wǎng)絡(luò)環(huán)境；熟悉各類(lèi)題型的答題形式，并完成英語(yǔ)聽(tīng)力模擬試卷；教師及時(shí)解答學(xué)生在平臺(tái)模擬測(cè)試中遇到的各種問(wèn)題。考試前，任課教師同時(shí)與學(xué)院相關(guān)部門(mén)進(jìn)行協(xié)調(diào)溝通，本次機(jī)考也得到了教務(wù)處、網(wǎng)教中心及二級(jí)學(xué)院的支持，主要有：第一，測(cè)試組學(xué)生的聽(tīng)力課程期末試卷和答題卷可不必為存檔而印刷；第二，學(xué)校教務(wù)處表示承認(rèn)聽(tīng)力無(wú)紙化機(jī)考成績(jī)；第三，聯(lián)系網(wǎng)絡(luò)與教育技術(shù)中心做好ITEST系統(tǒng)安裝工作，并在考試期間開(kāi)放語(yǔ)音室作為機(jī)考考場(chǎng)；第四，與相應(yīng)的二級(jí)學(xué)院達(dá)成共識(shí)，同意對(duì)照組班級(jí)采用相同試題進(jìn)行筆試的方式作為期末考試成績(jī)。除此以外，其他均照普通考試安排。

考試過(guò)程：

考試當(dāng)天，機(jī)考組與筆考組學(xué)生同時(shí)進(jìn)行考試，機(jī)考組安排在機(jī)房進(jìn)行，筆考組學(xué)生在普通教室進(jìn)行筆試。監(jiān)考教師提早半個(gè)小時(shí)到達(dá)考場(chǎng)，打開(kāi)網(wǎng)上測(cè)試系統(tǒng)，做好準(zhǔn)備工作。筆者在此時(shí)負(fù)責(zé)巡視各個(gè)機(jī)考考場(chǎng)，隨時(shí)準(zhǔn)備解答各種疑問(wèn)、解決出現(xiàn)的各種意外情況?？荚嚂r(shí)間一到，學(xué)生輸入各自的用戶名和密碼后開(kāi)始答題。與普通聽(tīng)力考試考場(chǎng)一樣，機(jī)考考場(chǎng)有 1位監(jiān)考教師。在整場(chǎng)考試過(guò)程中，有一位同學(xué)在開(kāi)考3分鐘的時(shí)候表示，電腦死機(jī)。監(jiān)考老師立即示意其重啟電腦，考試時(shí)間自動(dòng)往后延遲3分鐘?？荚嚱Y(jié)束前5分鐘，考生開(kāi)始陸續(xù)按“提交”鍵交卷。系統(tǒng)自動(dòng)完成收卷任務(wù)。45分鐘后考試正式結(jié)束，監(jiān)考教師準(zhǔn)時(shí)關(guān)閉測(cè)試系統(tǒng)，考生陸續(xù)離開(kāi)考場(chǎng)。

考后閱卷及數(shù)據(jù)整理

考試結(jié)束后，系統(tǒng)將自動(dòng)完成閱卷評(píng)分等工作，自動(dòng)顯示總分和各小項(xiàng)分，生成成績(jī)及分析，如全班最高分、最低分、平均分、標(biāo)準(zhǔn)差等。因聽(tīng)力考試全部為客觀題，機(jī)器已完成自動(dòng)評(píng)分，整個(gè)過(guò)程無(wú)需老師花費(fèi)時(shí)間。閱卷完成后，學(xué)生即可上網(wǎng)自行查閱考試結(jié)果。教師登錄ITEST平臺(tái)系統(tǒng)，導(dǎo)出并下載學(xué)生成績(jī)。教師需登記上交分?jǐn)?shù)，還需將考試結(jié)果保存至數(shù)據(jù)庫(kù)。至此，聽(tīng)力考試機(jī)考過(guò)程全部結(jié)束。

在機(jī)考的“準(zhǔn)備”環(huán)節(jié),教師工作量和工作強(qiáng)度明顯增加?！皽?zhǔn)備”環(huán)節(jié)需要多套訓(xùn)練用的模擬試題和正式機(jī)考的期末試卷，從題型的設(shè)置到單個(gè)音頻的制作和導(dǎo)入平臺(tái)，都需要老師花費(fèi)巨大的時(shí)間和精力，教師的負(fù)擔(dān)較大。但是“收卷”、“閱卷”、“數(shù)據(jù)分析”等考后環(huán)節(jié)的操作，全部由ITEST平臺(tái)完成，真正解放了老師的雙手，極大地提升了工作效率?？傮w來(lái)看,在各方協(xié)調(diào)良好的情況下，本次聽(tīng)力課程機(jī)考的過(guò)程比較順利，除一位同學(xué)出現(xiàn)電腦死機(jī)的情況外，未出現(xiàn)其他意外或明顯異常的情況。

四、考試結(jié)果及分析

我們確定的數(shù)據(jù)分析思路如下：

（一）本次機(jī)考考分分組比較如符合實(shí)際情況屬正常,反之為異常。

（二）平行班之間機(jī)考和筆考結(jié)果兩種方式的比較,機(jī)考筆考兩者符合實(shí)際情況為正常,反之為異常。

（三）同個(gè)班級(jí)機(jī)考筆考分析比較，結(jié)果接近屬正常,反之為異常。

1.機(jī)考分?jǐn)?shù)描述

首先描述機(jī)考的總體結(jié)果 (見(jiàn)表1)。4個(gè)班的平均分分別為 69，71.5，66.5，64.5，均大于 60，及格率分別為93.5%，96.6%，83.3%，71.8%，考試結(jié)果總體來(lái)說(shuō)應(yīng)屬正常。

再分組來(lái)看。酒店管理專(zhuān)業(yè)1601、1602班的平均分為70.25，國(guó)際貿(mào)易1601、1602班的平均分為65.5，酒店管理專(zhuān)業(yè)的兩個(gè)班的考分顯然優(yōu)于國(guó)際貿(mào)易專(zhuān)業(yè)的兩個(gè)班2，平均分高了將近5分之多。這符合兩個(gè)專(zhuān)業(yè)的實(shí)際情況，入學(xué)英語(yǔ)摸底考、大學(xué)英語(yǔ)四、六級(jí)過(guò)級(jí)率以及前幾學(xué)期的期末考試都反映了同一學(xué)情。機(jī)考結(jié)果使之得到如實(shí)反映，考試結(jié)果屬于正常。

表1 機(jī)考分?jǐn)?shù)

2.筆考分?jǐn)?shù)描述

首先觀察筆考班級(jí)分?jǐn)?shù)。表2顯示4個(gè)班的平均分分別為 72.2，69.5，66.7，63.8，均高于60分及格線，略高于表 1中的機(jī)考平均分，但應(yīng)屬正常。

其次觀察分組考分。酒店管理專(zhuān)業(yè)1605、1606班的平均分為70.85，工商管理1602、1603班的平均分為65.25，酒店管理專(zhuān)業(yè)的兩個(gè)班的考分顯然優(yōu)于國(guó)際貿(mào)易專(zhuān)業(yè)的兩個(gè)班2，平均分高了5分之多。這符合兩個(gè)專(zhuān)業(yè)的實(shí)際情況，入學(xué)英語(yǔ)摸底考、大學(xué)英語(yǔ)四、六級(jí)過(guò)級(jí)率以及前幾學(xué)期的期末考試都反映了同一學(xué)情。

表2 對(duì)照班級(jí)筆考分?jǐn)?shù)

3.機(jī)考與筆考分?jǐn)?shù)對(duì)比描述

為了判斷聽(tīng)力機(jī)考的考分正常與否，我們將水平相近的幾個(gè)平行班的筆考結(jié)果用于對(duì)照（以入學(xué)英語(yǔ)考試成績(jī)、前幾學(xué)期聽(tīng)力期末考試成績(jī)等作為參考）。酒店管理專(zhuān)業(yè)1601、1602班和酒店管理1605、1606班，屬于同一學(xué)院同一專(zhuān)業(yè)的平行班，這幾個(gè)班級(jí)之間，入學(xué)英語(yǔ)考試成績(jī)、前幾學(xué)期聽(tīng)力期末考試成績(jī)較相近，所以這4個(gè)班之間有比較意義。從表 3看，酒店管理學(xué)院機(jī)考和筆考的兩個(gè)班平均分較為接近 (69，71.5，72.2，69.5)，從表4看，國(guó)際商學(xué)院機(jī)考和筆考的兩個(gè)班平均分較為接近 (66.5，64.5，66.7，63.8)，這與之前的考試情況相符，進(jìn)一步證實(shí)機(jī)考和筆考兩組考分無(wú)顯著差異，表現(xiàn)正常，如實(shí)反映了學(xué)生實(shí)際水平。

表3 機(jī)考班與筆考班分?jǐn)?shù)對(duì)照（1）

表4 機(jī)考班與筆考班分?jǐn)?shù)對(duì)照（2）

以上分析表明，機(jī)考的考試結(jié)果與傳統(tǒng)筆考接近。但是，機(jī)筆考等效檢驗(yàn)還有條甚為關(guān)鍵的國(guó)際準(zhǔn)則,即“同樣試題用兩種方法得到的考分應(yīng)該在排序上較為接近”（李清華，2006）。即，某班學(xué)生的某一門(mén)課的考試結(jié)果一段時(shí)間內(nèi)的高低排序具有一定程度的穩(wěn)定性。由此,我們對(duì)比了同一班級(jí)前后兩個(gè)學(xué)期的英語(yǔ)聽(tīng)力期末考試的考試結(jié)果（試卷難度系數(shù)均為0.8，17.1學(xué)期為筆考，17.2學(xué)期為機(jī)考）。結(jié)果顯示,同一班級(jí)在兩個(gè)學(xué)期的考試結(jié)果的標(biāo)準(zhǔn)差比較接近。雖未使用“同樣試題”，兩種考試方法獲得的兩組考分分?jǐn)?shù)差距結(jié)果比較接近?？梢源笾碌贸鼋Y(jié)論：機(jī)考結(jié)果正常。

表5 機(jī)考班兩個(gè)學(xué)期分?jǐn)?shù)標(biāo)準(zhǔn)差對(duì)照

綜上所述，通過(guò)橫向比較和縱向比較，可以最終確認(rèn)上述分析：英語(yǔ)聽(tīng)力機(jī)考和筆考無(wú)顯著差異；對(duì)不同語(yǔ)言水平的考生，機(jī)考和筆考一樣能夠達(dá)到考查其實(shí)際水平的目的。

五、機(jī)考反饋

本研究也對(duì)學(xué)生對(duì)機(jī)考的反饋意見(jiàn)稍作了分析。表6將學(xué)生反饋分成贊成、有顧慮、反對(duì)三類(lèi)。表示贊成機(jī)考的學(xué)生占78%，絕大多數(shù)的學(xué)生對(duì)機(jī)考持有肯定、贊成的態(tài)度，操作也完全沒(méi)問(wèn)題。對(duì)機(jī)考存在顧慮、不肯定態(tài)度的學(xué)生占16%，這確實(shí)也是機(jī)考存在的現(xiàn)實(shí)問(wèn)題，但是也可通過(guò)學(xué)生逐步適應(yīng)、完善現(xiàn)存設(shè)備等條件改進(jìn)。有6%的學(xué)生對(duì)機(jī)考的反饋是負(fù)面的，如有同學(xué)在考試之初就遇上了電腦死機(jī)的情況等。由此可見(jiàn)，大多數(shù)考生(94%) 還是抱著積極的態(tài)度來(lái)看待聽(tīng)力考試機(jī)考這一新生事物。

表6 考生反饋

六、結(jié)語(yǔ)

由上述分析可知，機(jī)考考試過(guò)程未見(jiàn)明顯異常，考試結(jié)果也未見(jiàn)較大差異，對(duì)機(jī)考持積極態(tài)度的學(xué)生超過(guò)9成。由此可見(jiàn)，聽(tīng)力考試機(jī)考替代傳統(tǒng)筆考是可行的。無(wú)紙化教學(xué)和機(jī)考是聽(tīng)力教學(xué)方式改革的方向，有助于提高教學(xué)效果，也能提高教師閱卷、結(jié)分、結(jié)果分析等工作環(huán)節(jié)的效率，優(yōu)勢(shì)較明顯。但同時(shí)存在著一些問(wèn)題，如機(jī)考準(zhǔn)備階段教師出試卷的工作量顯著增加，單個(gè)小題的音頻制作、導(dǎo)入平臺(tái)耗費(fèi)較多時(shí)間，硬件方面如個(gè)別學(xué)生在考試過(guò)程中出現(xiàn)電腦死機(jī)，更換電腦后學(xué)生表示影響考試心情等。無(wú)紙化機(jī)考對(duì)軟硬件條件提出了很高的要求，需借助網(wǎng)絡(luò)環(huán)境、機(jī)房等條件進(jìn)行，對(duì)設(shè)備要求更高。我們建議學(xué)校教務(wù)處等相關(guān)部門(mén)出臺(tái)措施，支持無(wú)紙化考試工作，利用校園網(wǎng)建立網(wǎng)上教學(xué)平臺(tái)，大力開(kāi)發(fā)網(wǎng)上教學(xué)和考試系統(tǒng)。但同時(shí)也需要指出，技術(shù)優(yōu)勢(shì)轉(zhuǎn)化為效率優(yōu)勢(shì)需要不斷實(shí)踐和總結(jié)，教師和學(xué)生也需要時(shí)間適應(yīng)和接受。總而言之，無(wú)紙化教學(xué)和機(jī)考目前仍處于探索階段，可以穩(wěn)步推進(jìn)。