孫二平,劉 瑋

(宿州學(xué)院 外國(guó)語(yǔ)學(xué)院,安徽 宿州 234000)

測(cè)評(píng)是教學(xué)活動(dòng)必不可少的環(huán)節(jié),體現(xiàn)教育教學(xué)的目的性和計(jì)劃性。《大學(xué)英語(yǔ)教學(xué)指南》指出“構(gòu)建大學(xué)英語(yǔ)課程校本評(píng)價(jià)與其他多樣化評(píng)價(jià)相結(jié)合的綜合評(píng)價(jià)體系”,強(qiáng)調(diào)校本測(cè)試應(yīng)重視教學(xué)過(guò)程中的形成性測(cè)試,關(guān)注學(xué)生發(fā)展并提供個(gè)性化的評(píng)價(jià)反饋。2018年《中國(guó)英語(yǔ)能力等級(jí)量表》的頒布和2020年《深化新時(shí)代教育評(píng)價(jià)改革總體方案》的推行對(duì)外語(yǔ)教師的語(yǔ)言測(cè)評(píng)素養(yǎng)提出了較高要求。“教、學(xué)、評(píng)、研”相結(jié)合的測(cè)評(píng)實(shí)踐需要外語(yǔ)教師具有較高語(yǔ)言測(cè)評(píng)素養(yǎng)。然而,大學(xué)外語(yǔ)教師缺乏測(cè)評(píng)相關(guān)知識(shí)及測(cè)評(píng)素養(yǎng)較低[1],這既不利于教師自身專(zhuān)業(yè)發(fā)展,也不利于教育教學(xué)質(zhì)量的提升[2]。因此,應(yīng)用型本科高校外語(yǔ)教師語(yǔ)言測(cè)評(píng)素養(yǎng)的現(xiàn)狀亟需得到重視。

1 相關(guān)研究綜述

Stiggins首次提出語(yǔ)言評(píng)價(jià)素養(yǎng)是利益相關(guān)者在評(píng)價(jià)過(guò)程運(yùn)用的知識(shí)和技能[3]。語(yǔ)言評(píng)價(jià)素養(yǎng)包含技能、知識(shí)和原則,知識(shí)是指與教育測(cè)量和語(yǔ)言能力相關(guān)的理論知識(shí);原則是指與語(yǔ)言測(cè)試使用、影響相關(guān)的行業(yè)標(biāo)準(zhǔn)、道德規(guī)范[4]。語(yǔ)言測(cè)評(píng)素養(yǎng)分為三個(gè)層面:語(yǔ)言評(píng)價(jià)的原則和理念、實(shí)踐能力以及測(cè)評(píng)環(huán)境。語(yǔ)言測(cè)評(píng)原則和理念包含語(yǔ)言測(cè)試?yán)碚?、測(cè)量概念,如信效度、難度和區(qū)分度等,測(cè)評(píng)環(huán)境是指評(píng)價(jià)體系確立的根源和需求[5]。語(yǔ)言測(cè)評(píng)是一項(xiàng)具有科學(xué)性與系統(tǒng)性的工作,大致分為水平測(cè)試、學(xué)業(yè)測(cè)試、學(xué)能測(cè)試、分級(jí)測(cè)試和診斷性測(cè)試[6]。學(xué)業(yè)測(cè)試的目的是檢查學(xué)生在某一課程上的學(xué)習(xí)進(jìn)展,分為期中測(cè)試和期末測(cè)試[6]。形成性評(píng)價(jià)貫穿教學(xué)的全過(guò)程,終結(jié)性評(píng)價(jià)主要目的是檢查學(xué)生在一段時(shí)間學(xué)習(xí)之后的學(xué)習(xí)成就[7]。本研究從期末試題的命制、測(cè)評(píng)內(nèi)容和評(píng)價(jià)標(biāo)準(zhǔn)三個(gè)方面了解應(yīng)用型本科高校大學(xué)外語(yǔ)教師的測(cè)評(píng)素養(yǎng)意識(shí)和測(cè)評(píng)素養(yǎng)能力。

2 研究設(shè)計(jì)

2.1 研究問(wèn)題

(1)大學(xué)英語(yǔ)期末測(cè)試的命題現(xiàn)狀如何;大學(xué)英語(yǔ)教師如何進(jìn)行試題命制。

(2)大學(xué)英語(yǔ)期末測(cè)試內(nèi)容有哪些;測(cè)試內(nèi)容怎樣體現(xiàn)大學(xué)英語(yǔ)教師測(cè)評(píng)素養(yǎng)。

(3)大學(xué)英語(yǔ)期末測(cè)試評(píng)閱標(biāo)準(zhǔn)是什么;大學(xué)英語(yǔ)教師如何進(jìn)行評(píng)閱。

2.2 研究對(duì)象

研究對(duì)象為安徽省某應(yīng)用型本科院校2022-2023學(xué)年大學(xué)英語(yǔ)第一學(xué)期期末校本測(cè)試。期末測(cè)試題由大學(xué)英語(yǔ)教研室教師輪流命制,因此訪談對(duì)象為有命題經(jīng)歷的大學(xué)英語(yǔ)教師。

2.3 研究工具

期末測(cè)試:數(shù)據(jù)來(lái)自2022-2023學(xué)年第一學(xué)期期末測(cè)試題,大一理科試卷1166份,文科488份,大二理科試卷2054份,文科922 份,共4630份試卷。

訪談:從大學(xué)英語(yǔ)教研室隨機(jī)抽取9位大學(xué)英語(yǔ)教師參與訪談,其中初級(jí)職稱(chēng)1人,中級(jí)5人和高級(jí)3人,8人具有10年及以上教齡。訪談內(nèi)容圍繞大學(xué)英語(yǔ)期末試題的命制、測(cè)試內(nèi)容和評(píng)分標(biāo)準(zhǔn)。

2.4 實(shí)施過(guò)程

對(duì)2022-2023學(xué)年第一學(xué)期大學(xué)英語(yǔ)課程(一)和大學(xué)英語(yǔ)課程(三) 期末試題中的16篇閱讀理解文章,采用Text Evaluator文本難度分析器從句法復(fù)雜度、學(xué)術(shù)詞匯、詞匯陌生度、詞匯具體度、連貫度、互動(dòng)/會(huì)話風(fēng)格、論證、敘事性八個(gè)維度檢驗(yàn)文本的難度[8]。對(duì)16篇閱讀理解文本采用“英語(yǔ)閱讀分級(jí)指難針”進(jìn)行分析,難度指標(biāo)報(bào)告從詞匯難度、句法難度和文本難度三個(gè)類(lèi)別對(duì)應(yīng)的量化指標(biāo)和程度等級(jí)進(jìn)行反映[9]。

2.5 數(shù)據(jù)收集和分析

數(shù)據(jù)主要為測(cè)試題型、各題型的相關(guān)性和整體難度、閱讀理解文本難度和程度等級(jí)數(shù)值。訪談數(shù)據(jù)采用類(lèi)屬分析方法對(duì)期末測(cè)試數(shù)據(jù)進(jìn)行解釋和補(bǔ)充。

3 期末測(cè)試現(xiàn)狀及分析

3.1 試題的命制現(xiàn)狀與分析

同一年級(jí)的大學(xué)英語(yǔ)課程分出文理專(zhuān)業(yè)進(jìn)行統(tǒng)一測(cè)試,由同一教研室的任課教師負(fù)責(zé)出題,教研室主任審題,學(xué)院院長(zhǎng)終審。采用訪談法,從測(cè)試內(nèi)容的來(lái)源、測(cè)試重點(diǎn)、題型、難易度、區(qū)分度和測(cè)試周期等方面對(duì)期末測(cè)試題的命制進(jìn)行訪談和分析。

第一,測(cè)試內(nèi)容來(lái)源缺乏依據(jù)和標(biāo)準(zhǔn)很難確保試卷的質(zhì)量。訪談中,9位教師都指出學(xué)校和學(xué)院均未對(duì)期末試題命題的素材和來(lái)源做有關(guān)規(guī)定,部分受訪教師認(rèn)為不太了解測(cè)試的基本概念,也未接受測(cè)評(píng)相關(guān)理論的培訓(xùn),出卷時(shí)也未考慮過(guò)試題的信效度。訪談中,教師認(rèn)為測(cè)評(píng)的題型應(yīng)便于閱卷,目的是讓絕大多數(shù)學(xué)生通過(guò)考試。

第二,測(cè)試重視學(xué)生記憶能力而非語(yǔ)言能力。語(yǔ)言測(cè)試的主要用途在于推斷受試者的語(yǔ)言能力[10]。然而,期末測(cè)試題的詞匯和翻譯來(lái)自課本練習(xí),學(xué)生平時(shí)或考前突擊記憶便可以獲得高分。受訪教師認(rèn)為期末測(cè)試應(yīng)反映學(xué)生一個(gè)學(xué)期的學(xué)習(xí)情況,因此考試內(nèi)容應(yīng)來(lái)自課本?？傊?期末試題測(cè)試成績(jī)未能體現(xiàn)學(xué)生的英語(yǔ)語(yǔ)言能力,也未能體現(xiàn)測(cè)試與教學(xué)目標(biāo)、學(xué)業(yè)標(biāo)準(zhǔn)的結(jié)合。

第三,測(cè)試題型未能完全反映學(xué)生的英語(yǔ)綜合運(yùn)用能力。大學(xué)英語(yǔ)的教學(xué)目標(biāo)是培養(yǎng)學(xué)生英語(yǔ)綜合應(yīng)用能力,尤其是聽(tīng)說(shuō)能力,然而大二學(xué)年英語(yǔ)期末測(cè)試均沒(méi)有聽(tīng)力題型。課堂發(fā)言和課堂討論雖能體現(xiàn)學(xué)生的口頭表達(dá)和交際能力,但缺乏明晰的評(píng)價(jià)標(biāo)準(zhǔn);由于生師比過(guò)大,自主學(xué)習(xí)課程便使用學(xué)習(xí)通發(fā)布學(xué)習(xí)任務(wù)和測(cè)試任務(wù),由學(xué)習(xí)通進(jìn)行自主評(píng)分。

第四,期末測(cè)試題缺乏有效測(cè)試,難易度和區(qū)分度難以預(yù)估。有效的測(cè)試需經(jīng)過(guò)初審、試測(cè)、項(xiàng)目分析等階段,周期較長(zhǎng)。期末測(cè)試一般在每學(xué)期第18周進(jìn)行,命題教師一般在第14周出重復(fù)率低于30%的兩套試卷,因此試卷質(zhì)量很難保證。難度值、區(qū)分度等因素反映出試卷難度偏易,區(qū)分度一般。訪談中,高級(jí)職稱(chēng)教師兼教研室主任表示審查試卷只檢查試卷的題型和重復(fù)率,對(duì)試卷的難度未進(jìn)行檢測(cè)。

第五,測(cè)試題的選取、改編和設(shè)計(jì)依據(jù)教師主觀經(jīng)驗(yàn)。出卷教師既擔(dān)心試卷難度大,學(xué)生考得差造成補(bǔ)考人數(shù)太多,也擔(dān)心學(xué)生考得太好從而無(wú)法有效衡量學(xué)生學(xué)習(xí)情況的差異。各題項(xiàng)之間的相關(guān)系數(shù)在0.11-0.32之間,各題項(xiàng)與總分相關(guān)性在0.53-0.73之間(見(jiàn)表1)。高信度的試題要求各內(nèi)部題項(xiàng)相關(guān)系數(shù)應(yīng)在0.5-0.7及以上。期末測(cè)試題和教師訪談均表明教師在選題時(shí)缺乏依據(jù),改編試題的能力不高,設(shè)計(jì)試題的能力高低沒(méi)有體現(xiàn)。

表1 期末測(cè)試題內(nèi)部相關(guān)分析

3.2 測(cè)試內(nèi)容及分析

3.2.1期末測(cè)試整體內(nèi)容及分析

大學(xué)英語(yǔ)期末考試的題型、題量和分值(見(jiàn)表2)。詞匯和翻譯題來(lái)自課內(nèi)單元習(xí)題,占總分值的30%;匹配和閱讀理解為課外選題,占總分值的50%;寫(xiě)作為主觀題占總分值的20%。因此,期末測(cè)試內(nèi)容題量和分值主要在閱讀理解。

表2 大學(xué)英語(yǔ)期末測(cè)試的內(nèi)容與形式

相比其他題項(xiàng),大一和大二大學(xué)英語(yǔ)期末測(cè)試中詞匯和翻譯兩題學(xué)生的平均分得分最高,難度值最低(見(jiàn)表3)。這和題目來(lái)自課本習(xí)題有關(guān),學(xué)生死記硬背就能得到較高的分?jǐn)?shù)。除大一文科專(zhuān)業(yè)外,其他年級(jí)專(zhuān)業(yè)閱讀題得分最低,難度值最大。因此,期末測(cè)試不能有效反映學(xué)生的語(yǔ)言能力和體現(xiàn)學(xué)生語(yǔ)言學(xué)習(xí)的進(jìn)展。

表3 大學(xué)英語(yǔ)期末測(cè)試的描述性統(tǒng)計(jì)結(jié)果

3.2.2閱讀理解文本難度及分析

廣義上,文本難度是指文本閱讀與理解的內(nèi)在難易程度[11];狹義上,它是指一篇文本在語(yǔ)言特征上呈現(xiàn)的復(fù)雜程度,即文本復(fù)雜度[12]。

數(shù)值越大則表明復(fù)雜度越高,如句法復(fù)雜度、學(xué)術(shù)詞匯、詞匯陌生度;數(shù)值越小則表明復(fù)雜度越低,如詞匯一致性、敘事性,其中要素分值在1-100之間變化,總體復(fù)雜度值在100-2000之間變動(dòng)。

研究樣本的大學(xué)英語(yǔ)期末測(cè)試題中閱讀文本的體裁以議論文為主,說(shuō)明文次之,記敘文僅1篇(見(jiàn)表4)。因此,大學(xué)英語(yǔ)期末測(cè)試體裁較為單一,未能體現(xiàn)出多樣性。測(cè)試題中閱讀理解文本總體難度偏低?？傮w文本復(fù)雜度在700-1100,其中在句法復(fù)雜度、學(xué)術(shù)詞匯、詞匯陌生度等維度數(shù)值較低,敘事性等維度數(shù)值較高(見(jiàn)表4)。另外,文本的難易程度未呈現(xiàn)年級(jí)上難度增加和同一試題由易到難上的變化。以大學(xué)英語(yǔ)大一文科英語(yǔ)期末試題為例,文本的難度先增加后降低,總體文本復(fù)雜度950至1019,然后降到780和710(見(jiàn)表4)。外語(yǔ)教師常因缺乏量化反饋和科學(xué)指導(dǎo)而依據(jù)自己的直覺(jué)或經(jīng)驗(yàn)進(jìn)行文本選擇[13]。總之,閱讀理解文章的體裁未能體現(xiàn)出多樣性,閱讀材料的難度和復(fù)雜度不能反映學(xué)生英語(yǔ)水平和能力的差異。

表4 閱讀理解文本難度分析結(jié)果

“英語(yǔ)閱讀分級(jí)指難針”用以估算學(xué)生所識(shí)單詞在閱讀材料的比例和能力能級(jí)[14]。《中國(guó)英語(yǔ)能力等級(jí)量表》將英語(yǔ)學(xué)習(xí)者的語(yǔ)言能力分為 9 個(gè)等級(jí),1-3級(jí)屬于基礎(chǔ)階段,4-6級(jí)屬于提高階段,7-9級(jí)屬于熟練階段。

閱讀文本的難度等級(jí)集中在4-5級(jí)提高階段,而從量化指標(biāo)和等級(jí)來(lái)看,校本測(cè)試的整體難度較低,16篇文章有9篇文章級(jí)別和水平僅為三級(jí)和四級(jí)所對(duì)應(yīng)的中高考水平(見(jiàn)表5)。閱讀文本難度水平明顯低于其語(yǔ)言水平,不僅對(duì)語(yǔ)言能力發(fā)展不利且會(huì)阻礙語(yǔ)言能力發(fā)展[2]。由于入學(xué)前外語(yǔ)教師缺乏對(duì)學(xué)生英語(yǔ)語(yǔ)言水平和能力的了解,校本測(cè)試未能與《中國(guó)英語(yǔ)能力等級(jí)量表》對(duì)接,因此期末測(cè)試既不能體現(xiàn)學(xué)生的語(yǔ)言能力等級(jí),也不利于實(shí)現(xiàn)人才培養(yǎng)的多元化。

表5 閱讀材料難度及對(duì)應(yīng)等級(jí)水平

3.3 評(píng)閱標(biāo)準(zhǔn)及分析

期末測(cè)試只有翻譯和作文為主觀題,且測(cè)試中的翻譯題作為平時(shí)練習(xí)作業(yè)已完成。因而此評(píng)閱標(biāo)準(zhǔn)是指作文評(píng)閱標(biāo)準(zhǔn)。作文評(píng)閱標(biāo)準(zhǔn)有5個(gè)等級(jí),每個(gè)等級(jí)給出相應(yīng)的描述語(yǔ),如11-15分作文標(biāo)準(zhǔn)要求為基本切題,表達(dá)思想不夠清楚,文字連貫,但有少量語(yǔ)言錯(cuò)誤;16-20分作文標(biāo)準(zhǔn)要求內(nèi)容切題,表達(dá)思想清楚,文字通順,連貫性較好,基本無(wú)語(yǔ)言錯(cuò)誤。相較于其他題型寫(xiě)作評(píng)閱更具有主觀性,教研室為評(píng)閱教師提供評(píng)分樣卷做為參考,其中評(píng)分細(xì)則作為主觀題評(píng)閱的準(zhǔn)則。

期末四篇作文試題均缺乏評(píng)分標(biāo)準(zhǔn)樣例,對(duì)照評(píng)分樣卷。評(píng)分標(biāo)準(zhǔn)也缺乏對(duì)不同文體的作文在內(nèi)容、語(yǔ)言、邏輯和銜接等方面的分項(xiàng)表述要求。訪談中,多數(shù)教師認(rèn)為自己未接受過(guò)評(píng)分培訓(xùn),也擔(dān)心學(xué)生不及格率過(guò)高,因此作文閱卷標(biāo)準(zhǔn)較為寬松,未能?chē)?yán)格參照評(píng)分標(biāo)準(zhǔn)執(zhí)行。由于閱卷教師在作文內(nèi)容、語(yǔ)言表達(dá)、邏輯結(jié)構(gòu)、段落銜接等方面的解讀和側(cè)重點(diǎn)不同,因此不同閱卷者對(duì)同一篇作文的評(píng)分標(biāo)準(zhǔn)也會(huì)有一定差異,有時(shí)甚至差異較大?？傊?英語(yǔ)作文作為主觀題,信度相對(duì)較低。

4 提升外語(yǔ)教師測(cè)評(píng)素養(yǎng)的途徑和方式

針對(duì)外語(yǔ)教師測(cè)評(píng)現(xiàn)狀,結(jié)合訪談中教師測(cè)評(píng)需求,可以從以下方面提升外語(yǔ)教師測(cè)評(píng)素養(yǎng):

第一,外語(yǔ)教師應(yīng)重視測(cè)評(píng)理論和原則的學(xué)習(xí)。為更好地落實(shí)立德樹(shù)人根本任務(wù),貫徹全人教育理念,推動(dòng)學(xué)生的語(yǔ)言、認(rèn)知、情感和社會(huì)發(fā)展,培養(yǎng)學(xué)生對(duì)外語(yǔ)語(yǔ)言和文化的正確積極態(tài)度,提升學(xué)生英語(yǔ)綜合運(yùn)用能力、思辨能力和跨文化素養(yǎng),外語(yǔ)教師應(yīng)重視測(cè)評(píng)理論知識(shí)的學(xué)習(xí),明晰教學(xué)與評(píng)價(jià)的關(guān)系,因此測(cè)試應(yīng)體現(xiàn)語(yǔ)言能力結(jié)構(gòu)、結(jié)構(gòu)效度和測(cè)試目的。

第二,外語(yǔ)教師應(yīng)熟悉測(cè)試流程,掌握多元評(píng)價(jià)方法,提升測(cè)評(píng)實(shí)踐能力。測(cè)試流程主要有編寫(xiě)測(cè)試說(shuō)明、制定方案與組卷、實(shí)施、批閱、成績(jī)發(fā)布、總結(jié)。外語(yǔ)教師應(yīng)結(jié)合學(xué)生當(dāng)前的語(yǔ)言能力水平,確定測(cè)評(píng)目標(biāo)和測(cè)試要點(diǎn)、采用多元評(píng)價(jià)方式,設(shè)計(jì)測(cè)評(píng)內(nèi)容。教師不僅要重視形成性評(píng)價(jià)如課堂評(píng)價(jià),還應(yīng)掌握檔案袋評(píng)價(jià)、診斷性評(píng)價(jià)和終結(jié)性評(píng)價(jià)等多元評(píng)價(jià)方式和方法,利用評(píng)價(jià)結(jié)果和測(cè)評(píng)的反撥作用提升教學(xué)質(zhì)量[7]30。

第三,外語(yǔ)教師積極參與課程題庫(kù)建設(shè),實(shí)現(xiàn)校本測(cè)試多樣化和系統(tǒng)化。外語(yǔ)教師測(cè)評(píng)素養(yǎng)的提升與信息技術(shù)發(fā)展相融合,測(cè)評(píng)應(yīng)體現(xiàn)數(shù)字化、智能化、信息化的特點(diǎn)。大學(xué)外語(yǔ)教師出題任務(wù)繁重,因此數(shù)字化題庫(kù)建設(shè)勢(shì)在必行。這需要大學(xué)外語(yǔ)教師充分利用信息化技術(shù)完成試題研究和組題,具備選取資源和改編文本的能力以確保測(cè)試的質(zhì)量。

第四,學(xué)校應(yīng)營(yíng)造良好的測(cè)評(píng)環(huán)境,重視測(cè)評(píng)的反撥作用。學(xué)校為外語(yǔ)教師提供測(cè)評(píng)資金和技術(shù)保障,搭建信息技術(shù)與教學(xué)測(cè)評(píng)結(jié)合的平臺(tái)。教師培訓(xùn)和參加測(cè)評(píng)課程是提升外語(yǔ)教師測(cè)評(píng)素養(yǎng)的有效途徑[15]。外語(yǔ)教師應(yīng)了解評(píng)價(jià)體系的根源及社會(huì)需求,知曉測(cè)評(píng)對(duì)利益主體學(xué)生和利益相關(guān)者學(xué)校等的影響,開(kāi)展學(xué)情診斷,重視測(cè)評(píng)報(bào)告的分析和反饋,激發(fā)學(xué)生主動(dòng)學(xué)習(xí)和學(xué)會(huì)反思。

5 結(jié)論

訪談內(nèi)容、期末試題命制、測(cè)試內(nèi)容和評(píng)閱標(biāo)準(zhǔn)都反映外語(yǔ)教師語(yǔ)言測(cè)評(píng)素養(yǎng)較低,而外語(yǔ)教師語(yǔ)言測(cè)評(píng)素養(yǎng)能力影響著外語(yǔ)教學(xué)的效果和評(píng)價(jià)。因此,結(jié)合外語(yǔ)教師測(cè)評(píng)素養(yǎng)的需求,重視外語(yǔ)教師測(cè)評(píng)素養(yǎng)培訓(xùn),提升外語(yǔ)教師測(cè)評(píng)理論水平和實(shí)踐能力,實(shí)現(xiàn)以評(píng)促教、以評(píng)促學(xué)、以評(píng)促研,從而提升教育教學(xué)質(zhì)量。本研究從一所應(yīng)用型本科高校大學(xué)英語(yǔ)期末測(cè)試對(duì)外語(yǔ)教師語(yǔ)言測(cè)評(píng)素養(yǎng)能力現(xiàn)狀進(jìn)行研究,今后可對(duì)不同類(lèi)型學(xué)校多角度開(kāi)展相關(guān)研究。