寫作技能是英語(yǔ)學(xué)習(xí)四大基本技能之一,是英語(yǔ)教學(xué)重點(diǎn)之一。然而,面對(duì)大學(xué)英語(yǔ)課堂大班教學(xué)、教師評(píng)閱量大難以及時(shí)反饋、學(xué)生學(xué)習(xí)動(dòng)力不足的現(xiàn)實(shí),英語(yǔ)寫作一直以來(lái)存在費(fèi)時(shí)低效的教學(xué)困擾。隨著計(jì)算機(jī)技術(shù)和語(yǔ)料庫(kù)語(yǔ)言學(xué)的發(fā)展,智能評(píng)閱系統(tǒng)進(jìn)入寫作教學(xué)領(lǐng)域。相比人工評(píng)分,自動(dòng)寫作評(píng)價(jià)在終結(jié)性寫作考試中可節(jié)約大量人力、物力和財(cái)力。國(guó)外寫作智能評(píng)閱系統(tǒng)從20世紀(jì)60年代起步,國(guó)內(nèi)起步較晚但近年來(lái)發(fā)展迅猛。國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)在英語(yǔ)寫作的形成性評(píng)估和提高學(xué)生自主學(xué)習(xí)能力方面起到了相當(dāng)重要的作用。研究寫作智能評(píng)閱系統(tǒng)在大學(xué)英語(yǔ)寫作課堂的應(yīng)用有利于構(gòu)建機(jī)器評(píng)閱和人工評(píng)閱相結(jié)合的寫作教學(xué)模式,有利于探索高效率新型大學(xué)英語(yǔ)寫作課堂。通覽相關(guān)文獻(xiàn),對(duì)國(guó)內(nèi)外寫作智能評(píng)閱系統(tǒng)的綜述性評(píng)述以梁茂成、文秋芳[1]和唐錦蘭、吳一安[2]為代表,此后此類研究尤其對(duì)國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)的綜述性評(píng)述直缺乏。信息技術(shù)日新月異,21世紀(jì)初的研究已不能代表當(dāng)前發(fā)展。國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)近年來(lái)發(fā)展迅速,其在大學(xué)英語(yǔ)寫作教學(xué)中的應(yīng)用呈現(xiàn)廣泛而深入的趨勢(shì)。
寫作智能評(píng)閱系統(tǒng)的發(fā)展經(jīng)歷了單一分?jǐn)?shù)評(píng)定、合作分?jǐn)?shù)評(píng)定和人機(jī)交互評(píng)改三個(gè)階段[3]。單一分?jǐn)?shù)評(píng)定階段以1966年杜克大學(xué)教授Page等人推出的人類歷史上第一個(gè)作文自動(dòng)評(píng)分系統(tǒng)PEG為代表和開端,在作文自動(dòng)評(píng)分史上有著里程碑的意義。這一階段的評(píng)分系統(tǒng)旨在嘗試解決大規(guī)模寫作考試自動(dòng)評(píng)分問(wèn)題,快速獲得終結(jié)性分?jǐn)?shù)。然而,由于當(dāng)時(shí)計(jì)算機(jī)和語(yǔ)言學(xué)發(fā)展的局限性,PEG的評(píng)價(jià)體系只重視語(yǔ)言形式而忽視內(nèi)容,忽視了作文主題、組織和體裁等語(yǔ)義層面,其評(píng)價(jià)的是寫作的間接因素。因此,該系統(tǒng)1968年即宣告擱置,進(jìn)入了長(zhǎng)達(dá)20年的休眠期。此階段另一代表性系統(tǒng)為IEA[4],此系統(tǒng)注重作文內(nèi)容的評(píng)定,以范文為訓(xùn)練集,比較作文和范文的相似性,在一定程度上解決了作文內(nèi)容評(píng)定問(wèn)題。合作分?jǐn)?shù)評(píng)價(jià)階段出現(xiàn)在20世紀(jì)90年代后,代表系統(tǒng)IntelliMetric,E-rater,BETSY等,尤以E-rater在TOEFL等大型考試中的應(yīng)用而聞名。此階段系統(tǒng)評(píng)分從形式和內(nèi)容兩方面對(duì)作文進(jìn)行評(píng)價(jià),注重評(píng)分過(guò)程中的質(zhì)量控制,將機(jī)器評(píng)分和人工評(píng)分結(jié)合起來(lái),機(jī)器注重語(yǔ)言特征,人工更注重高層次的寫作技巧,在評(píng)分信度上較之第一階段有了大幅度提升。第三階段人際交互評(píng)改是近十多年才出現(xiàn)的寫作智能評(píng)閱系統(tǒng),以注重評(píng)分轉(zhuǎn)向注重學(xué)習(xí)者自主學(xué)習(xí)和錯(cuò)誤診斷反饋,更好地實(shí)現(xiàn)“促學(xué)評(píng)價(jià)”,并最終達(dá)到“評(píng)估即為學(xué)”。國(guó)內(nèi)以“句酷批改網(wǎng)”和“iwrite”為代表,學(xué)生提交作文可立即獲得評(píng)分和錯(cuò)誤反饋,學(xué)生可多次修改并重新獲得評(píng)分。
縱觀2010年以后的國(guó)內(nèi)相關(guān)文獻(xiàn),有關(guān)寫作智能評(píng)閱系統(tǒng)的研究大致可分為三大類:一是對(duì)相關(guān)系統(tǒng)評(píng)分信度的研究,研究系統(tǒng)評(píng)分結(jié)果與人工評(píng)分的一致性;二是研究國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)對(duì)大學(xué)生寫作水平的影響,研究寫作智能評(píng)閱系統(tǒng)對(duì)大學(xué)生寫作詞匯、語(yǔ)法、句法等方面能力的影響;三是基于國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)對(duì)大學(xué)英語(yǔ)寫作課堂的作用,研究構(gòu)建寫作智能評(píng)閱系統(tǒng)與大學(xué)英語(yǔ)寫作課堂教學(xué)相混合的新型教學(xué)模式。
國(guó)內(nèi)有關(guān)寫作智能評(píng)閱系統(tǒng)的信度研究文獻(xiàn)為數(shù)不多,現(xiàn)有相關(guān)文獻(xiàn)表明,國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)的評(píng)分信度較高。在“批改網(wǎng)”評(píng)分信度研究方面,何旭良[5]對(duì)30篇作文進(jìn)行人機(jī)評(píng)分對(duì)比研究后認(rèn)為,“句酷批改網(wǎng)”與人工評(píng)分一致性高,但評(píng)分顯著偏高。張荔等[6]對(duì)兩套CET作文評(píng)分標(biāo)準(zhǔn)樣卷共10篇作文進(jìn)行人機(jī)評(píng)閱,二者結(jié)果呈現(xiàn)很高的相關(guān)性。有國(guó)內(nèi)研究者[7]對(duì)“句酷網(wǎng)”和“冰果”這兩個(gè)平臺(tái)的評(píng)分效度差異進(jìn)行了實(shí)證研究。對(duì)大學(xué)非英語(yǔ)專業(yè)3種題型作文文本的分析結(jié)果表明:“句酷網(wǎng)”和“冰果”的自動(dòng)評(píng)定成績(jī)和人工評(píng)定成績(jī)之間存在顯著的正相關(guān)關(guān)系,相關(guān)程度存在差異,兩個(gè)平臺(tái)對(duì)不同類型作文的評(píng)定成績(jī)效度之間也有差異。對(duì)“iwrite”系統(tǒng)評(píng)分信度研究方面,李艷玲、田夏春[8]通過(guò)對(duì)645篇同題作文人工評(píng)分和“iwrite”系統(tǒng)評(píng)分對(duì)比,認(rèn)為“iwrite”系統(tǒng)評(píng)分信度高,達(dá)到可推廣水平。
以上研究在一定范圍內(nèi)對(duì)相關(guān)系統(tǒng)進(jìn)行了信度分析,但樣本量不夠大,作文題型不夠豐富,實(shí)驗(yàn)結(jié)果的普遍性受到影響。大數(shù)據(jù)下國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)的信度分析將是未來(lái)研究的重點(diǎn)之一。
在“句酷批改網(wǎng)”評(píng)閱反饋語(yǔ)方面國(guó)內(nèi)研究較為豐富,研究方法上多采用量化或者質(zhì)性的調(diào)查方法。石曉玲[9]通過(guò)對(duì)大一共161人的問(wèn)卷和訪談,對(duì)“句酷批改網(wǎng)”的評(píng)閱反饋語(yǔ)和評(píng)分進(jìn)行了實(shí)證研究,認(rèn)為其在詞匯、語(yǔ)法方面的反饋較多,而在思想內(nèi)容、邏輯性和連貫性以及篇章結(jié)構(gòu)上的反饋較少。有將近一半(48%)的學(xué)生對(duì)“句酷批改網(wǎng)”持歡迎態(tài)度,認(rèn)為其具有批改和反饋及時(shí)的優(yōu)勢(shì),對(duì)語(yǔ)法和詞匯方面的提高幫助最大。該研究問(wèn)卷調(diào)查和訪談設(shè)計(jì)全面合理,研究結(jié)果有一定說(shuō)服力。但介于信息技術(shù)的快速更新,該研究時(shí)效性稍欠缺,必然與當(dāng)前不斷更新的相關(guān)系統(tǒng)研究之間有一定差距。蔣艷,馬武林[10]指出句酷批改網(wǎng)作為智能導(dǎo)師系統(tǒng)所面臨的挑戰(zhàn)。如:只能從語(yǔ)言上判斷水平,不能從語(yǔ)義上判斷內(nèi)容,無(wú)法對(duì)作文內(nèi)容錯(cuò)誤進(jìn)行識(shí)別、部分語(yǔ)言錯(cuò)誤無(wú)法識(shí)別。該研究泛泛而談,介紹全面但缺乏較科學(xué)的研究方法,因此是研究結(jié)果的可信度不高。
何旭良[11]以篇章個(gè)案分析的形式研究發(fā)現(xiàn),“句酷批改網(wǎng)”的智能反饋主要集中于詞匯和語(yǔ)法層面,在內(nèi)容、篇章結(jié)構(gòu)、修辭、內(nèi)容邏輯性和連貫性方面反饋不夠。此論文僅選取一篇作文分析,研究結(jié)果參考價(jià)值不高。侯芬[12]以3個(gè)英語(yǔ)班級(jí)共105名學(xué)生為受試對(duì)象,將“批改網(wǎng)”融入大學(xué)英語(yǔ)寫作教學(xué),進(jìn)行了為期14周的教學(xué)實(shí)驗(yàn),用問(wèn)卷調(diào)查和個(gè)案研究的方法探討了“句酷批改網(wǎng)”對(duì)提高大學(xué)生英語(yǔ)寫作能力的有效性。結(jié)果表明,大多數(shù)學(xué)生對(duì)批改網(wǎng)的使用持肯定態(tài)度。與過(guò)去的相關(guān)研究結(jié)果類似,批改網(wǎng)系統(tǒng)更多關(guān)注語(yǔ)法、拼寫、句型、搭配等方面的反饋,在篇章結(jié)構(gòu)、邏輯性和連貫性方面反饋不夠。該研究采用實(shí)證研究方法,使用了問(wèn)卷調(diào)查和分析作文樣本,研究結(jié)果有參考價(jià)值。胡學(xué)文[13]以45名大學(xué)非英語(yǔ)專業(yè)二年級(jí)學(xué)生為研究對(duì)象,考察了“句酷批改網(wǎng)”在線反饋對(duì)大學(xué)生英語(yǔ)寫作結(jié)果的影響。該研究的基本數(shù)據(jù)來(lái)自于“句酷批改網(wǎng)”保存的各種記錄,研究者使用SPSS7.0軟件對(duì)相關(guān)數(shù)據(jù)進(jìn)行處理。研究結(jié)果表明,“句酷批改網(wǎng)”上學(xué)生對(duì)作文的多次自我修改能顯著提高作文質(zhì)量,但修改的次數(shù)與作文成績(jī)的提高不存在相關(guān)關(guān)系,修改質(zhì)量更具意義。該研究旨在考察大學(xué)生寫作自我修改對(duì)作文質(zhì)量的影響,研究問(wèn)題清晰有意義,但兩周的實(shí)驗(yàn)時(shí)間對(duì)于研究修改次數(shù)與寫作水平提高之間的關(guān)系沒有意義。
周麗[14]從英語(yǔ)寫作應(yīng)用研究角度出發(fā),通過(guò)對(duì)某南方理工科高校的對(duì)照班和實(shí)驗(yàn)班的實(shí)證研究,通過(guò)句法能力的分析來(lái)探討“批改網(wǎng)”對(duì)大學(xué)生英語(yǔ)寫作能力的影響。通過(guò)一學(xué)年的實(shí)驗(yàn)發(fā)現(xiàn),在線寫作平臺(tái)在時(shí)間與空間上為學(xué)生提供了較之傳統(tǒng)寫作更多的便利,但在提升學(xué)生的并列復(fù)句、狀語(yǔ)、表語(yǔ)、同位語(yǔ)從句、形容詞、名詞短語(yǔ)等寫作能力方面需要與傳統(tǒng)課堂教學(xué)相結(jié)合。該研究在細(xì)化“批改網(wǎng)”對(duì)寫作能力提高方面的影響有創(chuàng)新意義。李霞、鐘蘭鳳[15]采用了定量和定性研究相結(jié)合的研究方法對(duì)“句酷批改網(wǎng)”對(duì)大學(xué)英語(yǔ)寫作教學(xué)的有效性進(jìn)行了實(shí)證研究。實(shí)驗(yàn)對(duì)象為118名大學(xué)生,分實(shí)驗(yàn)組和對(duì)照組,在長(zhǎng)達(dá)兩學(xué)期的寫作課批改中中,分別給予在線反饋和人工反饋。實(shí)驗(yàn)結(jié)果表明,實(shí)驗(yàn)組的寫作成績(jī)顯著高于對(duì)照組。此外,教師觀察和問(wèn)卷調(diào)查表明,多數(shù)學(xué)生對(duì)“句酷批改網(wǎng)”持歡迎態(tài)度,認(rèn)為對(duì)寫作水平的提高很有幫助,能提高寫作興趣和自主寫作意識(shí)。
綜上研究,國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)在詞匯、語(yǔ)法方面的反饋較多、修改建議較具體,但其在內(nèi)容和連貫性方面反饋不足。多數(shù)學(xué)生對(duì)寫作智能評(píng)閱系統(tǒng)持接受態(tài)度,認(rèn)為對(duì)寫作水平提高有幫助。
國(guó)內(nèi)寫作智能評(píng)閱系統(tǒng)基于上述相關(guān)研究,目前國(guó)內(nèi)寫作智能評(píng)價(jià)系統(tǒng)的評(píng)分信度較高,但評(píng)閱反饋較多集中在詞匯和語(yǔ)法層面,在內(nèi)容、篇章結(jié)構(gòu)、修辭以及篇章的銜接和連貫方面反饋不夠。因此,大學(xué)英語(yǔ)自主寫作教學(xué)模式應(yīng)該強(qiáng)調(diào)寫作智能評(píng)閱系統(tǒng)與教師反饋、同伴互評(píng)相結(jié)合。研究主要集中于“句酷批改網(wǎng)”。張文霞、黃靜[16]認(rèn)為,信息技術(shù)應(yīng)該和英語(yǔ)教學(xué)高度融合,采取自動(dòng)譏評(píng)、助教評(píng)議、教師總評(píng)、同學(xué)互評(píng)、反思自評(píng)相結(jié)合的方式。楊曉瓊、戴運(yùn)財(cái)[17]以135名學(xué)生為實(shí)驗(yàn)對(duì)象,采用問(wèn)卷調(diào)查、訪談和實(shí)驗(yàn)法,對(duì)基于批改網(wǎng)的大學(xué)英語(yǔ)自主寫作教學(xué)模式進(jìn)行了實(shí)踐研究。研究結(jié)果表明,“句酷批改網(wǎng)”在提高學(xué)生寫作興趣和能力方面有積極意義,有助于培養(yǎng)學(xué)生自主學(xué)習(xí)能力;同時(shí),批改網(wǎng)在內(nèi)容、篇章結(jié)構(gòu)和邏輯等方面的反饋不足要求教師充分利用點(diǎn)評(píng)功能對(duì)學(xué)生作文進(jìn)行及時(shí)點(diǎn)評(píng)。批改網(wǎng)在線及時(shí)反饋、同伴反饋和教師反饋在大學(xué)英語(yǔ)寫作教學(xué)中應(yīng)充分結(jié)合,學(xué)生的自主寫作能力及寫作教學(xué)質(zhì)量才會(huì)得以切實(shí)提高。
黃紅兵[18]以“句酷批改網(wǎng)”為在線作文自動(dòng)評(píng)分工具,結(jié)合計(jì)算機(jī)輔助大學(xué)英語(yǔ)教學(xué)原理和形成性評(píng)價(jià)理論,在相關(guān)文獻(xiàn)梳理與分析基礎(chǔ)上提出在線大學(xué)英語(yǔ)寫作形成性評(píng)價(jià)“三階模型”。即作文經(jīng)過(guò)“初稿、修訂稿、定稿”三個(gè)階段,在初稿和修改稿階段,教師在自動(dòng)作文評(píng)分反饋和同學(xué)評(píng)價(jià)基礎(chǔ)上,有針對(duì)性地做出綜合評(píng)價(jià),學(xué)生以即時(shí)評(píng)價(jià)和同學(xué)評(píng)價(jià)為參考、以教師評(píng)價(jià)為準(zhǔn)繩修改作文。實(shí)驗(yàn)證明該模型可為大學(xué)生在線英語(yǔ)寫作提供有效的反饋、減輕教師作文批閱負(fù)擔(dān),也能有效促進(jìn)大學(xué)生英語(yǔ)寫作水平提升。甘容輝、何彩順[19]在梳理學(xué)習(xí)分析的概念、要素和模型、主要分析工具和方法的基礎(chǔ)上,闡述了學(xué)習(xí)分析技術(shù)于外語(yǔ)教學(xué)中的應(yīng)用,即“句酷批改網(wǎng)”運(yùn)用學(xué)習(xí)分析促進(jìn)個(gè)性化教學(xué)的案例分析,提出了學(xué)習(xí)分析在外語(yǔ)教學(xué)中的建模構(gòu)想,展望了學(xué)習(xí)分析在外語(yǔ)教學(xué)應(yīng)用中的可行性。唐錦蘭[20]為期一學(xué)年的教學(xué)實(shí)驗(yàn)以及調(diào)查問(wèn)卷和訪談數(shù)據(jù)表明,實(shí)驗(yàn)教學(xué)有助于學(xué)生寫作能力的發(fā)展和自主學(xué)習(xí)能力的提高;寫作教學(xué)重點(diǎn)從關(guān)注語(yǔ)言錯(cuò)誤到關(guān)注內(nèi)容的挖掘和表達(dá),從關(guān)注結(jié)果到關(guān)注寫作教學(xué)過(guò)程和寫作教法;在此過(guò)程中,師生的角色發(fā)生變化。本文在此項(xiàng)研究基礎(chǔ)上建構(gòu)了將自動(dòng)評(píng)價(jià)系統(tǒng)融入寫作課程的教學(xué)模型。
首先,目前對(duì)寫作智能評(píng)閱系統(tǒng)在大學(xué)英語(yǔ)寫作教學(xué)中的應(yīng)用研究主要集中在對(duì)“句酷批改網(wǎng)”的研究上,對(duì)目前國(guó)內(nèi)應(yīng)用逐漸廣泛,技術(shù)不斷在開發(fā)中的“iwrite”系統(tǒng)的研究寥寥無(wú)幾。作為該系統(tǒng)的主要開發(fā)人梁茂成,十多年來(lái)一直致力于此系統(tǒng)的開發(fā)和運(yùn)用,從最初對(duì)中國(guó)學(xué)生英語(yǔ)作文自動(dòng)評(píng)分模型的構(gòu)建[21]到該系統(tǒng)用于近幾年的“外研社杯”全國(guó)大學(xué)英語(yǔ)寫作競(jìng)賽等大規(guī)模作文評(píng)閱和在部分高校的推廣使用,“iwrite”系統(tǒng)的使用前景廣闊、對(duì)“iwrite”系統(tǒng)的研究可能會(huì)成為今后幾年的研究熱點(diǎn)。
其次,目前相關(guān)研究主要集中于寫作智能評(píng)閱系統(tǒng)反饋語(yǔ)的總體效果研究,對(duì)涉及其具體對(duì)大學(xué)生寫作某方面能力的影響研究很有限,只有周麗[22]研究了英語(yǔ)在線寫作平臺(tái)對(duì)大學(xué)生寫作句法能力的影響和Zhihong Lu&Zhenxiao Li[23]研究了“句酷批改網(wǎng)”對(duì)學(xué)習(xí)者詞匯運(yùn)用能力的影響等。
最后,目前相關(guān)研究只提出構(gòu)建基于寫作智能評(píng)閱系統(tǒng)的大學(xué)英語(yǔ)自主寫作教學(xué)模式,是一種粗線條的展望和推測(cè),并沒有提出如何將寫作智能評(píng)閱系統(tǒng)和教師點(diǎn)評(píng)、同伴互評(píng)結(jié)合起來(lái),哪種結(jié)合方式才是適合中國(guó)大學(xué)生寫作學(xué)習(xí)的具體模式。