劉 冰， 鐘守滿

(杭州師范大學(xué)外國語學(xué)院，浙江杭州310012)

認(rèn)知語言學(xué)的體驗哲學(xué)觀主張以身體經(jīng)驗認(rèn)知為出發(fā)點，大學(xué)英語教學(xué)目標(biāo)以此為理論依據(jù)，注重培養(yǎng)學(xué)生的語言實際應(yīng)用能力和自主學(xué)習(xí)能力，強調(diào)學(xué)生聽、說、讀、寫等方面語言能力的培養(yǎng)，主張促進(jìn)學(xué)生個性化學(xué)習(xí)方法的形成和自主學(xué)習(xí)能力的發(fā)展。多模態(tài)理論恰恰主張綜合運用語言、文字、聲音與影像等多種模態(tài)形式，認(rèn)為這種多模態(tài)形式有助于完成上述目標(biāo)。本研究以H大學(xué)英語教學(xué)成果展示活動為例，分析其多模態(tài)話語呈現(xiàn)方式，探求這種呈現(xiàn)方式對大學(xué)英語教學(xué)的促進(jìn)作用。結(jié)果表明，英語老師結(jié)合上課所學(xué)知識，指導(dǎo)學(xué)生自編、自導(dǎo)、以英語語言表達(dá)形式表演完成的大學(xué)英語教學(xué)成果展示活動，一方面有效地激發(fā)了學(xué)生英語學(xué)習(xí)興趣和熱情，促進(jìn)了學(xué)生對英語的接觸和使用，對學(xué)生課堂學(xué)習(xí)效果帶來很大幫助，另一方面對教師探索大學(xué)英語教學(xué)模態(tài)搭配及其媒體使用以及提高教師課堂教學(xué)技能也起到了積極的促進(jìn)作用，對教師深入探討微課、慕課和翻轉(zhuǎn)課堂教學(xué)改革具有重要的參考價值。

1 多模態(tài)話語與大學(xué)英語教學(xué)改革

1．1 多模態(tài)話語

多模態(tài)話語是一種融合了多種符號模態(tài)進(jìn)行交際的話語。李戰(zhàn)子指出多模態(tài)話語為除了文本之外，還帶有圖像、圖標(biāo)等的復(fù)合話語［1］。多模態(tài)話語強調(diào)融合文字、聲音、圖像、動畫等多種交流模態(tài)來傳遞信息。目前不少理論對多模態(tài)話語分析主要分別從功能和認(rèn)知的角度進(jìn)行研究。多模態(tài)話語分析可以彌補單模態(tài)話語分析的缺陷［2］已經(jīng)為多數(shù)學(xué)者接受。

眾所周知，多模態(tài)也稱多符號，指包括口語、書面語、圖形、圖表、空間、聲音、視覺等構(gòu)建意義的各種符號資源。Kress和Van Leeuwen以社會符號學(xué)框架下的視覺交流理論為基礎(chǔ)，從圖像、情態(tài)、構(gòu)圖、顏色、印刷版式等視覺交流的各主要方面研究多模態(tài)話語［3］。因此，語言是社會符號，除語言之外的其他非語言符號也可以進(jìn)行意義的表達(dá)，非語言符號的相互作用與語言符號共同生成意義。語言意義單位并非單純由語言來表達(dá)，話語分析研究需被看成是多模態(tài)的話語分析。

近幾年對多模態(tài)話語分析的研究在國內(nèi)被重視起來。胡壯麟既從理論的角度又從實踐的角度研究了構(gòu)建多模態(tài)化的意義［4］;張德祿在系統(tǒng)功能語言學(xué)理論框架基礎(chǔ)上探索了多模態(tài)話語分析的綜合理論框架，此框架分為文化層面、語境層面、內(nèi)容層面和表達(dá)層面［5］;朱永生研究了多模態(tài)話語的理論基礎(chǔ)及其研究方法［2］;顧曰國根據(jù)認(rèn)知心理學(xué)對多媒體、多模態(tài)學(xué)習(xí)提出五個供進(jìn)一步研究用的假設(shè)，并研究了用“角色建模語言”對多媒體、多模態(tài)學(xué)習(xí)進(jìn)行結(jié)構(gòu)化數(shù)據(jù)建模［6］。

先前的多模態(tài)話語分析方面國外較早的研究者之一R．Barthes在其論文《圖像的修辭》中，探討了圖像在表達(dá)意義上與語言的相互作用［7］;Halliday在其功能語法中提出了語言的三大元功能，即表示概念意義的概念功能，表示說話人和聽話人關(guān)系以及說話人對所說內(nèi)容的態(tài)度的人際功能，以及表示語篇意義的組篇功能［8］;Kress與Van Leeuwen研究了模態(tài)與媒體的關(guān)系，專門探討了多模態(tài)現(xiàn)象，包括視覺圖像、顏色語法以及報紙的版面設(shè)計和不同媒介的作用等［3］;Matthiessen認(rèn)為可以從表達(dá)層、內(nèi)容層和語境三個視角審視多模態(tài)特征，并且分析了多模態(tài)的旅行指南，發(fā)現(xiàn)各種符號在表示具體空間時分工不同，空間通過語言、照片和圖標(biāo)來識解［9］;Baldry建立了基于XML的在線多模態(tài)檢索器“Multimodal Corpus Authoring”(MCA)，建立了以60個汽車廣告為語料的數(shù)據(jù)庫等等［10］。

1．2 大學(xué)英語教學(xué)改革

新近不少專家針對大學(xué)英語教學(xué)改革進(jìn)行研究，強調(diào)建設(shè)多層次多元化教學(xué)目標(biāo)體系以滿足學(xué)生個性化學(xué)習(xí)需求。多元教學(xué)目標(biāo)決定大學(xué)英語由多門課程組成。大學(xué)英語課程根據(jù)教學(xué)內(nèi)容包括通用英語、專門用途英語和通識教育類英語，依此設(shè)計具有特色的個性化教學(xué)模塊。2014年許多高校在有效課堂教學(xué)、現(xiàn)代信息技術(shù)在英語教學(xué)中的運用以及大學(xué)英語教學(xué)改革與教師發(fā)展方面加大了學(xué)術(shù)交流和實踐活動交流。

早在2007年《大學(xué)英語課程教學(xué)要求》就明確規(guī)定:大學(xué)英語的教學(xué)目標(biāo)為培養(yǎng)學(xué)生的英語綜合應(yīng)用能力，增強其自主學(xué)習(xí)能力，提高其綜合文化素養(yǎng)。如今數(shù)字化時代所催生的大學(xué)英語教學(xué)改革的三種類型課程，從最初的微課類型嘗試發(fā)展到慕課和翻轉(zhuǎn)課堂教學(xué)，三種課堂教學(xué)改革形式都包括了眾多多模態(tài)話語要素:具有大數(shù)據(jù)的跨學(xué)科特點、教學(xué)視頻教學(xué)、大批的聽眾和網(wǎng)絡(luò)在線、調(diào)整課堂內(nèi)外的時間、將學(xué)習(xí)的決定權(quán)轉(zhuǎn)移給學(xué)生、聽播客、網(wǎng)絡(luò)上與別的同學(xué)討論等等。新近互聯(lián)網(wǎng)尤其是移動互聯(lián)網(wǎng)催生的翻轉(zhuǎn)課堂式教學(xué)模式，引發(fā)了新的系列教學(xué)變革如教師角色、課程模式、管理模式改革。在改革中，我們要不斷地探求新的教學(xué)模式，結(jié)合多模態(tài)教學(xué)特色對多模態(tài)話語進(jìn)行分析，使其在教學(xué)中更好地發(fā)揮作用，促進(jìn)大學(xué)英語教學(xué)改革。

2 成果展示中的多模態(tài)話語要素

H大學(xué)大學(xué)英語教學(xué)成果展示是對大學(xué)英語教學(xué)改革成果的檢驗。在實施大學(xué)英語教學(xué)改革過程中，H大學(xué)英語老師多年來組織學(xué)生為參與大學(xué)英語教學(xué)成果展示做了大量工作。工作內(nèi)容包括結(jié)合上課所學(xué)知識及多模態(tài)教學(xué)手段，進(jìn)行多模態(tài)話語分析，通過老師的指導(dǎo)由學(xué)生自編、自導(dǎo)、全英文自演等等，如情景劇、音樂劇、話劇、詩歌朗誦、電影配音等。三年的大學(xué)英語成果展示表明，該活動采用了情景重現(xiàn)、情景互動、意義生成的功能多模態(tài)話語理論。在整個改革過程中，試聽展示活動重視視覺符號的應(yīng)用、多模態(tài)話語分析及教學(xué)素材的選取。其中素材選取、素材整合對下一階段的多模態(tài)應(yīng)用及分析起到了關(guān)鍵的作用。

2．1 素材的選取

由于素材選取不當(dāng)，會影響成果展示的有效性，指導(dǎo)教師選擇各種素材時嚴(yán)格把關(guān)。如根據(jù)表演素材情景再現(xiàn)功能、真實性和表演性兼?zhèn)涞脑瓌t，選取經(jīng)典音樂劇《貓》?！敦垺肥欠浅３晒Φ囊魳穭?。自從1981年該劇被創(chuàng)作以來，成為在倫敦上演時間最長、美國戲劇史上巡回演出時間最長的音樂劇?！敦垺穭≡诖舜未髮W(xué)英語展示成果中的呈現(xiàn)，作為對大學(xué)英語教學(xué)改革及效果的再現(xiàn)，得到了觀眾的充分肯定。又如改成話劇的《非誠勿擾》，編排上采用了電視節(jié)目形式，通過演繹使原本的娛樂節(jié)目在大學(xué)英語成果展示中得以有效應(yīng)用。再如，舞蹈《跳遍美國》是外國教師和學(xué)生一起編導(dǎo)和表演的節(jié)目，有美國不同地區(qū)的鄉(xiāng)間舞蹈形式，穿插了舞蹈文化介紹表演，而戲劇表演《踏雪尋梅》則根據(jù)梅蘭芳先生的生平故事加以改編。

素材名稱 改編形式主要內(nèi)容《貓》(Cats)節(jié)選經(jīng)典劇目，結(jié)合音樂、舞蹈、歌唱、燈光、背景等多模態(tài)形式再現(xiàn)經(jīng)典劇目高潮部分。貓族每年都要舉行一次舞會，眾貓會在舞會上選一只貓升天。最后，曾經(jīng)光彩照人，今日卻邋遢無比的格里則倍拉以一首《回憶》打動了所有在場的貓，成為升天的貓，將整個劇目推向高潮?！斗钦\勿擾》(If You Are The One)由受歡迎的電視節(jié)目《非誠勿擾》改編而成，表演者豐富的語言技巧及表演呈現(xiàn)了全新的英文版《非誠勿擾》。采用了電視節(jié)目《非誠勿擾》的節(jié)目形式，以全新的內(nèi)容及語言加以演繹。四位女士華貴的服飾、生動的話語以及優(yōu)雅的姿體語言充分體現(xiàn)了多模態(tài)話語的精髓?！短槊绹?Dances Across America)舞蹈與語言的結(jié)合，精心選取了美國不同地區(qū)的民間舞蹈形式，在舞蹈中穿插了舞蹈文化介紹。外教老師及學(xué)生的自創(chuàng)節(jié)目，表演者們選取三種美國民間舞蹈形式。舞者們首先用美妙的舞姿呈現(xiàn)美國民間舞蹈的三種形式，再由視頻簡介介紹此種舞蹈的種類，再現(xiàn)美國地區(qū)文化?！短ぱっ贰?Looking For Mei Lanfang)根據(jù)梅蘭芳先生的生平故事自創(chuàng)的戲曲表演劇目。講訴了一個留學(xué)生不畏千辛萬苦來到中國向梅蘭芳先生學(xué)習(xí)戲曲的故事。故事動人曲折，最后一幕梅蘭芳與師成的留學(xué)生同臺演出的精彩一幕成為永恒的經(jīng)典。

2．2 素材的整合

基于視覺符號和非語言符號的觀點，教師對所選取的素材進(jìn)行了整合。根據(jù)視覺符號可以提供場景互動的主張，在整合過程中，教師注重“表演者—劇目—觀眾”三方的互動形式。這種整合的目的是激發(fā)觀眾即學(xué)生對劇目素材的興趣，加大對劇目素材的深層次理解。原先的課堂視聽教學(xué)局限于課堂為主進(jìn)行輸入，而在多模態(tài)教學(xué)成果展示中，發(fā)揮了舞臺情景的多模態(tài)語料輸入優(yōu)勢。在這個過程中，聽覺、視覺、文本等模態(tài)交互呈現(xiàn)。教師采用的整合原則是，劇目的主要信息能夠通過視覺模態(tài)中的圖像符號即動態(tài)、色彩等形式呈現(xiàn);劇目的補充信息能夠通過文本模態(tài)呈現(xiàn);表演者能夠有效地使用音頻符號即表演者的音量、音調(diào)、語速等進(jìn)行意義傳輸。在劇目《跳遍美國》中，以視頻講解的形式為觀眾呈現(xiàn)美國舞蹈文化形式，同時用形象的舞蹈表演來演繹每種舞蹈形式的差異。這種語言與非語言的搭配，是具有代表性的多模態(tài)話語形式，通過調(diào)動視覺、聽覺、觸覺等多種感官來刺激觀眾即學(xué)生的感覺，提高展示的有效性。另外，在素材整合過程中，教師對非語言符號充分重視，注重表演者在所選素材中的角色扮演。非語言符號是否能夠有效輔助語言符號也是教師整合素材的重要標(biāo)準(zhǔn)之一。同時，在整合過程中教師還關(guān)注幾個環(huán)節(jié)的設(shè)置，其中之一就是情景創(chuàng)作與設(shè)計。如戲劇表演《踏雪尋梅》，把梅蘭芳先生所處的時代作為表演背景，表演者模擬時代背景，利用舞臺資源的非語言媒介進(jìn)行演繹。表演者模擬梅蘭芳先生的動作表情等，結(jié)合戲劇語言進(jìn)行多模態(tài)話語呈現(xiàn)。

3 成果展示的多模態(tài)話語分析

3．1 成果展示的多模態(tài)話語分析

提出話語分析以來，出現(xiàn)了不同的話語分析理論和方法。作為當(dāng)今話語分析領(lǐng)域的熱點，多模態(tài)話語分析主要的三種理論方法包括了系統(tǒng)功能多模態(tài)話語分析、多模態(tài)互動分析和語料庫語言學(xué)多模態(tài)話語分析。三種多模態(tài)話語形式對外語教學(xué)帶來了話語分析內(nèi)容、范疇、手段等新的啟示和變化。專家學(xué)者通過實例分析、解剖話語活動內(nèi)在規(guī)律以及話語活動與意識形態(tài)及其與認(rèn)知模式之間的關(guān)系問題，其中大部分成果以語言為研究中心展開，注重語言系統(tǒng)和語義結(jié)構(gòu)本身及其與社會文化和心理認(rèn)知之間的關(guān)系。事實上，非語言因素的半語言特征如音量、語速、語音等也包含在話語意義中，還包括身體特征因素如表情和肢體語言等，此外還有身體特征以外因素如PPT、多媒體設(shè)備、自主學(xué)習(xí)實驗室、環(huán)境布局因素等。交際不僅僅由單一感官完成，還包括了說話中的聽覺、書寫中的視覺、盲文中的觸覺等等。這種需要兩種或者多種感官同時參與完成的交際方式而產(chǎn)生的話語即為多模態(tài)話語。把話語中多種媒體和多種模態(tài)結(jié)合起來進(jìn)行分析解讀，是當(dāng)代語言學(xué)研究、特別是話語分析研究關(guān)注的重要問題。因此，在全球視覺文化沖擊的今天，多模態(tài)話語超越了作為社會符號的語言，使用兩種或者多種符號資源(語言、圖像、音樂、空間、手勢等)成為建構(gòu)復(fù)雜意義的必要手段。多模態(tài)性已經(jīng)成為日常生活不可或缺的部分。

大學(xué)英語教學(xué)改革研究主要集中在語言特征、學(xué)科建設(shè)、課程設(shè)置等，鮮見對大學(xué)英語成果展示進(jìn)行多模態(tài)研究的論文。本研究基于教學(xué)成果展示對大學(xué)英語課堂教學(xué)多模態(tài)話語分析進(jìn)行研究，并主要從視覺模態(tài)和聽覺模態(tài)的話語分析入手，進(jìn)行深入研究。盡管由視覺模態(tài)實現(xiàn)的舞臺布局確定了表演者的角色和地位，但它提供的是背景信息和條件，對聽覺模態(tài)僅僅起輔助和強化作用。從聽覺模態(tài)講，表演者的話語占主導(dǎo)地位，是整個話語量的90%以上，而且表演者的話語對于聽眾來說是主要的傳播主體，這對表演者的話語的質(zhì)量提出了很高的要求:準(zhǔn)確的意義，正確的語法，精確的詞匯，準(zhǔn)確的發(fā)音，適當(dāng)?shù)乃俣?。這對成果展示的節(jié)目質(zhì)量提出了很高的要求。表演者要調(diào)節(jié)聲音響亮度，語調(diào)高低節(jié)奏等來準(zhǔn)確地表達(dá)意義。因此，聽覺模態(tài)內(nèi)部以及各模態(tài)之間的相互合作，對于意義表達(dá)話語模態(tài)起到了補充、強化及優(yōu)化的作用。

表演者本人通過多模態(tài)來充實表演話語，包括表演手勢，模擬戲劇場景等。同時也需加入表演者的表情變化來強調(diào)或弱化所表演內(nèi)容的重要性。此次成果展示不同于日常的英語教學(xué)活動。后者是在課堂上進(jìn)行知識的傳授，前者是學(xué)習(xí)者對于學(xué)習(xí)成果的展示，在這個過程中使學(xué)習(xí)者的英語能力得到進(jìn)一步地提升。這要求對展示的內(nèi)容進(jìn)行多方面和多層次的演練和強化，表演者要利用一切舞臺效果、視聽展現(xiàn)及話語輸出達(dá)到展示目的，用表演提供的真實場景提供真實的話語表達(dá)過程。這是對日常多模態(tài)教學(xué)形式的再現(xiàn)和提升，有助于提高學(xué)生的學(xué)習(xí)興趣。上個世紀(jì)的大學(xué)英語教學(xué)一直采用傳統(tǒng)教學(xué)模式:以教師為中心，簡單的傳授語言的基本知識和技能。傳統(tǒng)教學(xué)模式雖然有其一定的優(yōu)點及長處，但存在著諸多弊端。一是傳統(tǒng)大學(xué)英語教學(xué)模式信息輸入量有限，無法運用大量的音頻及視頻輸入來刺激學(xué)生的學(xué)習(xí)感官而調(diào)動學(xué)習(xí)者的積極性。二是學(xué)生缺乏展示學(xué)習(xí)成果的平臺，不能積極地參與到教學(xué)活動中，對于學(xué)生英語綜合能力的培養(yǎng)不利。

3．2 成果展示的多模態(tài)話語特點及作用

近些年多媒體教學(xué)模式的研究和多模態(tài)大學(xué)英語教學(xué)的新模式的探討引起了專家學(xué)者的廣泛重視。此次成果展示的多模態(tài)表現(xiàn)形式，正是在相關(guān)專家學(xué)者的研究基礎(chǔ)上的進(jìn)一步探索和研究，其具有以下特點:與一般的大學(xué)英語課堂教學(xué)多模態(tài)話語不同，大學(xué)英語教學(xué)成果展示通過表演者多模態(tài)話語的展現(xiàn)，在特定的場合完成語言輸出的任務(wù)，促使聽者從視覺、聽覺等感覺器官全方位地積極接受語言輸入。舞臺布局的視覺模態(tài)確定了特定的環(huán)境，也確定了表演者和聽眾的角色和關(guān)系。舞臺背景、道具、PPT展示、表演者等都是聽眾的視覺對象。展示的主模態(tài)是聽覺模態(tài)，展示進(jìn)程都是由口語表達(dá)的進(jìn)程決定的。

本世紀(jì)以來，大學(xué)英語教學(xué)將多媒體引入英語課堂教學(xué)中，這是大學(xué)英語教學(xué)改革的一次重要飛躍。有學(xué)者認(rèn)為，建立基于網(wǎng)絡(luò)的多媒體教學(xué)模式能夠保證大學(xué)英語的教學(xué)質(zhì)量，提高教學(xué)效率，增加語言交際活動。成果的多模態(tài)展示能夠刺激學(xué)生的感官，生動立體化的展示模式增加學(xué)生的學(xué)習(xí)興趣，提高了學(xué)習(xí)效率。成果的多模態(tài)展示也為學(xué)生提供了聽說訓(xùn)練的機會，使學(xué)生有機會學(xué)習(xí)到更標(biāo)準(zhǔn)地道的語言。成果的多模態(tài)展示為學(xué)生提供了高效的學(xué)習(xí)環(huán)境，學(xué)生可以利用多媒體教學(xué)設(shè)備學(xué)習(xí)最新的語言資料，掌握最近的語言信息，這也為真正的個性化學(xué)習(xí)提供了可能。

4 結(jié)論

自2009年5月清華大學(xué)召開首屆中國認(rèn)知科學(xué)大會提出“綜合時代”這個概念以來，人們逐步認(rèn)識到，20世紀(jì)“分析”時代必須讓位于“綜合”時代。人們不再堅持思維過程中將對象從整體分割為部分加以考察，如美國結(jié)構(gòu)主義分析法，而是根據(jù)認(rèn)知科學(xué)把思維中對象的各個部分看成具有非常不同特征的“綜合體”整體加以考察，因而有了多模態(tài)話語。

大學(xué)英語教學(xué)成果的展示活動反映了綜合運用多種模態(tài)形式的語言學(xué)習(xí)環(huán)境，方便學(xué)生通過電影、戲劇、新聞等視頻媒體片段的重現(xiàn)，吸收更多的語言知識。多模態(tài)話語將多種符號模態(tài)并用，以此豐富信息輸入手段，強化學(xué)習(xí)者對教學(xué)內(nèi)容的記憶。日常大學(xué)英語學(xué)習(xí)中，學(xué)生接觸過許多模態(tài)話語展現(xiàn)形式，這給大學(xué)英語教學(xué)成果展示活動打下了基礎(chǔ)。通過老師的指導(dǎo)，學(xué)生自編、自導(dǎo)、全英文自演完成的成果展示形式，在成果匯報展示中表現(xiàn)出色。本研究認(rèn)為，為激發(fā)學(xué)生的學(xué)習(xí)興趣，教師在日常教學(xué)中要重視多模態(tài)話語教學(xué)模式的研究，積極引導(dǎo)和調(diào)動學(xué)生的積極性，使學(xué)生主動積極地參與到英語課堂活動中去。這一活動有助于教師探討微課、慕課和翻轉(zhuǎn)課堂教學(xué)改革，探索優(yōu)化大學(xué)英語教學(xué)媒體和模態(tài)搭配路徑，對引發(fā)新一輪教師角色、課程模式、管理模式等一系列變革以及學(xué)生學(xué)習(xí)方式的轉(zhuǎn)變具有十分積極的意義。

［1］李戰(zhàn)子．多模式話語的社會符號學(xué)分析［J］．外語研究，2003(5):1-7．

［2］朱永生．多模態(tài)話語分析的理論基礎(chǔ)與研究方法［J］．外語學(xué)刊，2007(5):82-86．

［3］ Kress，G．＆ Van Leeuwen，T．Reading Images:The Grammar of Visual Design［M］．London:Routledge，1996．

［4］胡壯麟．社會符號學(xué)研究中的多模態(tài)化［J］．語言教學(xué)與研究，2007(1):1-9．

［5］張德祿、王璐．多模態(tài)話語模態(tài)的協(xié)同及在外語教學(xué)中的體現(xiàn)［J］．外語學(xué)刊，2010(2):97-102．

［6］顧曰國．多媒體、多模態(tài)教學(xué)剖析［J］．外語電化教學(xué)，2007(4):3-12．

［7］ Baldry，A＆Thibault，P．Multimodal Trranscription and Text Analysis:A Multimedia Toolkit and Coursebook［M］．London:Equinox，2006．

［8］Halliday，M．A．K．Explorations in the Functions of Language［M］．London:Edward Arnold，1973．

［9］ Marthiessen，C．M．L．M．2004．descriptive motifs and generalizations［M］//A．Caffarel，J．R．Martin＆C．M．I．M．Matthiessen，Language Typology;A Functional Perspective，Amsterdam:Benjamins:2004:537-673．

［10］Baldry，A．Multimodality and Multimediality in a Distance Learning Age［M］．Campobasso:Palladino Editore，2000．