【摘要】在線智能作文批閱系統(tǒng)越來越多地應(yīng)用于大學(xué)英語寫作教學(xué)實(shí)踐中，是未來大學(xué)英語寫作教學(xué)改革的發(fā)展趨勢。本文旨在探究在線英語寫作評(píng)價(jià)反饋的效度，研究發(fā)現(xiàn)，該系統(tǒng)的即時(shí)反饋可以激發(fā)大學(xué)生的英語寫作興趣，增加作文修改頻次，引導(dǎo)學(xué)生重視寫作的過程性，在詞匯和語法維度的反饋給予學(xué)生的幫助較大，但在作文的思維邏輯和語篇結(jié)構(gòu)的提升上影響有限。

【關(guān)鍵詞】在線寫作評(píng)價(jià);智能批閱系統(tǒng);多元反饋

【作者簡介】耿娟娟 （1982.01-），山西臨汾人，咸陽師范學(xué)院外國語學(xué)院，講師，碩士，研究方向：英語寫作教學(xué)。

【基金項(xiàng)目】本文是陜西省教育廳科研項(xiàng)目“在線英語寫作自動(dòng)評(píng)價(jià)反饋的有效性研究”（編號(hào)：18JK0821）的部分研究成果。咸陽師范學(xué)院骨干教師項(xiàng)目（編號(hào)：XSYGG201706），咸陽師范學(xué)院重點(diǎn)科研項(xiàng)目“‘一帶一路背景下陜西省非省會(huì)城市地方高校外語教師專業(yè)發(fā)展環(huán)境構(gòu)建與模式研究”的研究成果。

一、研究背景

英語寫作需要經(jīng)過“寫作—修改—再寫作—再修改”的循環(huán)過程，這個(gè)不斷修改的過程不僅是提高學(xué)生的讀者意識(shí)和自我修改水平的關(guān)鍵，而且也是提升學(xué)生英語寫作水平和能力的重要因素。但傳統(tǒng)的大學(xué)英語寫作教學(xué)中的反饋通常周期長，內(nèi)容寬泛，學(xué)生大多只關(guān)注于作文的分?jǐn)?shù)，對(duì)教師的反饋吸收得有限，無法真正從作文的反饋中提升自己的英語寫作水平和能力。

目前大學(xué)英語寫作教學(xué)的效能不高，課時(shí)有限，學(xué)生人數(shù)較多，教師精力有限。一般來說，一學(xué)期布置的寫作練習(xí)次數(shù)普遍在4次左右，布置作業(yè)之后的一周收集上交，教師評(píng)閱批改，一周之后反饋給學(xué)生，這樣一來一回就需要將近三周的時(shí)間。由于時(shí)間間隔太久，學(xué)生拿到教師的反饋比較關(guān)注分?jǐn)?shù)或者等級(jí)，對(duì)于教師勾畫出來的修改意見以及錯(cuò)誤類型關(guān)注不夠。這些因素都影響到大學(xué)英語寫作反饋的有效性。

隨著語料庫和大數(shù)據(jù)等現(xiàn)代教育技術(shù)的發(fā)展，英語在線寫作智能評(píng)閱平臺(tái)越來越多地應(yīng)用于大學(xué)英語寫作教學(xué)實(shí)踐中，自動(dòng)智能批閱系統(tǒng)“提交即批改”的反饋有著針對(duì)性、即時(shí)性、個(gè)性化、可追蹤性等優(yōu)勢，為解決目前大學(xué)英語寫作反饋的相對(duì)滯后性提供了新的方向。所謂自動(dòng)寫作評(píng)分就是利用計(jì)算機(jī)技術(shù)對(duì)作文進(jìn)行評(píng)估與計(jì)分。自動(dòng)寫作評(píng)估系統(tǒng)的研究可以追溯到20世紀(jì)60年代中期，研究者從教學(xué)方法論、教育測量學(xué)、認(rèn)知科學(xué)及計(jì)算機(jī)語言學(xué)等多學(xué)科視角關(guān)注自動(dòng)寫作評(píng)估系統(tǒng)，但對(duì)自動(dòng)作文評(píng)分系統(tǒng)的質(zhì)疑批評(píng)之聲一直不斷。對(duì)自動(dòng)作文評(píng)分最大的質(zhì)疑就是作文評(píng)分是一項(xiàng)非常主觀的高級(jí)智能活動(dòng)，而機(jī)器實(shí)際上是不可能完全理解作文的。因此，將自動(dòng)寫作評(píng)估系統(tǒng)應(yīng)用到寫作教學(xué)中的研究出現(xiàn)了多種不同的聲音。

將在線智能反饋應(yīng)用到大學(xué)英語寫作教學(xué)中，其有效性究竟如何，需要對(duì)此進(jìn)行驗(yàn)證。因此本文將以句酷批改網(wǎng)為例，對(duì)英語在線智能批閱系統(tǒng)在大學(xué)英語寫作教學(xué)實(shí)踐中的有效性進(jìn)行研究和探討。具體回答的問題是：句酷批改網(wǎng)機(jī)器反饋對(duì)大學(xué)生英語寫作能力發(fā)展有什么影響？

二、研究設(shè)計(jì)

本研究選取陜西省某師范學(xué)院進(jìn)行數(shù)據(jù)分析，因?yàn)樵撛盒Ｓ?017年開展了基于網(wǎng)絡(luò)的大學(xué)英語教學(xué)改革，條件成熟，教師對(duì)于句酷批改網(wǎng)的使用方法較為熟悉，也在平時(shí)的教學(xué)中使用得比較頻繁。我們選取的學(xué)年跨度從2018年9月開始到2019年7月結(jié)束，一年的教學(xué)實(shí)踐結(jié)束后，隨機(jī)選取200名學(xué)生發(fā)放《英語寫作在線自動(dòng)評(píng)價(jià)的反饋調(diào)查問卷》，實(shí)際回收有效問卷152份，回收率76%。另選取5名任課教師以及20名使用過該系統(tǒng)的大學(xué)生在問卷結(jié)束后進(jìn)行了訪談。通過自行編制《英語寫作在線自動(dòng)評(píng)價(jià)的反饋調(diào)查問卷》，對(duì)152名使用了一學(xué)年句酷批改網(wǎng)的某師范院校非英語專業(yè)大學(xué)生和對(duì)5名英語教師、20名學(xué)生進(jìn)行半開放式訪談來收集數(shù)據(jù)。

該問卷通過SPSS的項(xiàng)目區(qū)分度分析，所有項(xiàng)目均具有統(tǒng)計(jì)學(xué)上的顯著性（.001），最終形成了由38個(gè)項(xiàng)目組成的封閉式問卷。問卷由四個(gè)部分構(gòu)成，分別為：學(xué)生對(duì)“批改網(wǎng)”自動(dòng)評(píng)分系統(tǒng)的看法、學(xué)生對(duì)“批改網(wǎng)”修改意見的態(tài)度、學(xué)生對(duì)“批改網(wǎng)”反饋的處理方式、學(xué)生所期望的“批改網(wǎng)”的回饋方式。全部采用5級(jí)李克量表，1表示完全不同意，2表示不同意，3表示不清楚，4 表示比較同意，5表示完全同意。該問卷的信度alpha系數(shù)為 .954， 具有較強(qiáng)的一致性，可以用來收集相關(guān)數(shù)據(jù)。

三、研究結(jié)果及討論

第一，句酷批改網(wǎng)的機(jī)器反饋促進(jìn)了大學(xué)生英語寫作詞匯量的提高，并且激發(fā)起學(xué)生對(duì)于英語寫作的熱情和信心。71.5%的受試大學(xué)生認(rèn)為句酷批改網(wǎng)的機(jī)器反饋提高了詞匯量，55%的受試者對(duì)于寫作過程有了更為清晰的認(rèn)識(shí)，46%的受試者增加了自主修改作文的意識(shí)，45%受試者表示更加熱愛寫作，對(duì)寫作的信心也增強(qiáng)了。

在隨后的對(duì)部分學(xué)生的訪談中，幾乎所有受訪者都明確表示批改網(wǎng)的即時(shí)反饋對(duì)于英語寫作的幫助很大。批改網(wǎng)最大的優(yōu)勢是“提交即批改”，系統(tǒng)對(duì)學(xué)生作文進(jìn)行大數(shù)據(jù)分析，可以立即辨別出學(xué)生作文在英語詞匯、搭配、語法等方面的常見錯(cuò)誤，實(shí)時(shí)給出反饋修改建議和欠缺知識(shí)點(diǎn)的補(bǔ)充，個(gè)性化地幫助學(xué)生“查漏補(bǔ)缺”。

第二，句酷批改網(wǎng)的在線反饋有助于提高大學(xué)生寫作中詞匯使用的準(zhǔn)確性，有助于減少“中式英語”的表達(dá)。學(xué)生對(duì)批改網(wǎng)反饋意見的態(tài)度，55%的受試者認(rèn)為修改意見可以提高自己對(duì)詞匯理解和使用的準(zhǔn)確性，反饋意見中包含同、近義詞的辨析和重點(diǎn)詞匯的固定搭配，通過結(jié)合語境的詞匯學(xué)習(xí)，可以在很大程度上提高對(duì)詞匯理解的深度。同樣，約53%的受試者認(rèn)為修改意見對(duì)于表達(dá)的地道性和文章的篇章結(jié)構(gòu)有幫助。批改網(wǎng)通過大數(shù)據(jù)的比對(duì)，可以識(shí)別出表達(dá)的可接受性和地道性，從而幫助學(xué)生減少“中式英語”的使用。

第三，句酷批改網(wǎng)的及時(shí)反饋幫助學(xué)生增強(qiáng)了自我修改意識(shí)、讀者意識(shí)，不斷地審視自己的寫作，從而重視寫作的過程性。學(xué)生對(duì)批改網(wǎng)反饋的態(tài)度，近乎55%的受試者會(huì)根據(jù)反饋意見反復(fù)修改作文，會(huì)認(rèn)真閱讀反饋意見，從詞匯、語法、句型、篇章布局、技術(shù)性細(xì)節(jié)（比如標(biāo)點(diǎn)符號(hào)，大小寫）等維度進(jìn)行完善，直至得到一個(gè)滿意的分?jǐn)?shù)。

訪談中，學(xué)生們表示，為了得到更滿意的分?jǐn)?shù)，他們通常會(huì)修改5次左右，每修改一次，提交后，作文的分?jǐn)?shù)就會(huì)提高一些，這樣能帶給他們很大的滿足感，能深切地感受到自己的每次修改努力后的結(jié)果，不像之前都要等一周甚至更長的時(shí)間，才可以從老師那里得到作文的反饋。這樣的做法從教師處也得到了印證。教師們普遍表示，從批改網(wǎng)的系統(tǒng)上可以看到學(xué)生修改后提交的次數(shù)，一般來說，一個(gè)班級(jí)的平均修改次數(shù)都在5-6次左右，個(gè)別學(xué)生的修改次數(shù)會(huì)更高，有的甚至達(dá)到了70次。某班級(jí)的學(xué)生，在一次完成作文的過程中，反復(fù)修改的次數(shù)從1次、5次、18次、48次到70次不等?？梢钥闯?，絕大部分學(xué)生依據(jù)批改網(wǎng)的反饋，不斷提高自我修改意識(shí)，有了讀者意識(shí)，不僅僅是停留在完成教師布置的作業(yè)這個(gè)層面，不僅聚焦作文的最終結(jié)果，而且在寫作的過程中更關(guān)注于形成性。

但同時(shí)需要指出的是，批改網(wǎng)自身也有一定的缺陷。教師應(yīng)充分意識(shí)到智能批改的局限性，尤其是在語篇結(jié)構(gòu)和文章邏輯思維方面的反饋是十分有限的。因此，教師應(yīng)在機(jī)器反饋的基礎(chǔ)上，在語篇結(jié)構(gòu)和邏輯思維等維度給予學(xué)生更多的指導(dǎo)。另外，在線上教學(xué)和學(xué)習(xí)指導(dǎo)的同時(shí)，教師也不能忽視同學(xué)生之間的情感交流及應(yīng)有的學(xué)習(xí)監(jiān)督。教師應(yīng)發(fā)揮一定的監(jiān)督管理作用，安排和組織學(xué)生積極參與寫作練習(xí)和實(shí)踐，不能隨意復(fù)制粘貼去取得高分，引導(dǎo)學(xué)生正確地使用該系統(tǒng)，最大化地利用即時(shí)反饋的優(yōu)勢，提升寫作水平和英語學(xué)習(xí)的自主性。

四、研究的不足與總結(jié)

英語作文評(píng)改系統(tǒng)在我國還處于初步探索階段，對(duì)智能評(píng)改系統(tǒng)的理論研究還不是很成熟，本研究在研究設(shè)計(jì)方面雖然極盡嚴(yán)謹(jǐn)，但是在實(shí)施中還是發(fā)現(xiàn)有一些不足之處。

首先，本研究的研究樣本是對(duì)某地方師范院校2018級(jí)152名大學(xué)生進(jìn)行的問卷調(diào)查，以及對(duì)5名教師和20名學(xué)生進(jìn)行的訪談數(shù)據(jù)，研究對(duì)象范圍有些小，廣度和推廣性都有待繼續(xù)探究，在多大程度上可以適用于其他院校的非英語專業(yè)大學(xué)生仍然有待驗(yàn)證。所以自動(dòng)評(píng)分系統(tǒng)是否有效地提升了大學(xué)英語寫作教學(xué)還需在更大范圍內(nèi)進(jìn)行證實(shí)。

其次，本研究的調(diào)查工具是問卷和半開放式訪談，因?yàn)闀r(shí)間有限，未能充分地將其他形式的研究數(shù)據(jù)充分考慮在內(nèi)。比如，學(xué)生多次修改的寫作樣本、教師布置的作文題目等。這些文本的深度分析，可以為研究結(jié)論的正確性提供更多的佐證。

最后，本研究驗(yàn)證了句酷批改網(wǎng)智能作文批閱系統(tǒng)的有效性，對(duì)于市面上其他智能批閱系統(tǒng)反饋有效性的驗(yàn)證需要進(jìn)一步研究。比如面世的“冰果”英語智能作文系統(tǒng)，還有外語教學(xué)與研究出版社研發(fā)的 “iWrite” 英語寫作與評(píng)閱系統(tǒng)。這些林林總總的智能評(píng)閱系統(tǒng)的信度如何？對(duì)同一篇文章的反饋在哪些方面存在共性和差異？對(duì)不同體裁文章是否存在反饋偏好？這些問題都有待后續(xù)的研究和探索。

總而言之，大學(xué)生對(duì)于批改網(wǎng)反饋的總體態(tài)度是積極的、肯定的，認(rèn)為批改網(wǎng)的即時(shí)反饋促進(jìn)了英語寫作水平的提高，尤其是在詞匯的廣度和深度、語法的準(zhǔn)確性、英語表達(dá)的地道性等方面。不僅如此，大學(xué)生對(duì)英語寫作的情感態(tài)度維度也發(fā)生了積極的變化，由于“提交即批改”的即時(shí)性，極大地激發(fā)了學(xué)生對(duì)英語寫作的積極性和熱情，很大程度上減輕了學(xué)生英語寫作的焦慮感，從而提高了自我修改的次數(shù)，增強(qiáng)了學(xué)生寫作過程中的讀者意識(shí)。因此，智能批閱系統(tǒng)的即時(shí)反饋對(duì)大學(xué)生英語寫作水平的提升有很大的促進(jìn)作用。

參考文獻(xiàn)：

[1]Warschauer M，? Ware P. Automated Writing Evaluation： Defining the Classroom Research Agenda[J]. Language Teaching Research， 2006，10（2）：157-180.

[2]蔡基剛.中國大學(xué)生英語寫作在線同伴回饋和教師回饋對(duì)比研究[J].外語界，2011（2）：65-72.

[3]何旭良.句酷批改網(wǎng)英語作文評(píng)分的信度和效度研究[J].現(xiàn)代教育技術(shù)，2013（5）：64-67.

[4]羅燕子.本土化英語寫作的多維視角[M].北京：中國社會(huì)科學(xué)出版社，2014.

[5]葛詩利.面向大學(xué)英語教學(xué)的通用計(jì)算機(jī)作文評(píng)分和反饋方法研究[M].上海：上海外語教育出版社，2015.

[6]王立非.英語寫作教學(xué)與研究[M].北京：高等教育出版社，2015.

[7]梁茂成，文秋芳.國外作文評(píng)分系統(tǒng)評(píng)述及啟示[J].外語電化教學(xué)，2007（117）：18-23.

[8]徐昉.英語寫作教學(xué)與研究[M].北京：外語教學(xué)與研究出版社， 2012.