山西師范大學(xué) 史 俊 中國人民大學(xué) 王建華

1. 引言

近年來，隨著網(wǎng)絡(luò)信息和人工智能技術(shù)的飛速發(fā)展，各種媒體形式層出不窮，在外語教學(xué)中運用多模態(tài)手段逐漸成為一種大趨勢(張德祿、丁肇芬，2013)，培養(yǎng)學(xué)生多模態(tài)交際能力和多元讀寫能力不容忽視。國外有關(guān)多模態(tài)的研究早在1996年，就有Kress & van Leeuwen提出了“多模態(tài)話語(multimodal discourse)”這個概念。New London Group(1996)也于同年提出了“A pedagogy of multiliteracies(多元讀寫教學(xué)方法)”的概念。國內(nèi)有關(guān)多模態(tài)的研究近年來勢頭強勁，并出現(xiàn)了一定數(shù)量的多模態(tài)研究綜述，其中有對于國內(nèi)多模態(tài)話語研究的綜述(潘艷艷、李戰(zhàn)子，2017)，也有對于國外多模態(tài)研究熱點與趨勢(康佳萍、姜占好，2020)的綜述。其中，以多模態(tài)話語研究的綜述較多，但也不乏出現(xiàn)有關(guān)多模態(tài)隱喻(陳風(fēng)華、胡冬梅，2018)和多模態(tài)認(rèn)知批評分析(潘艷艷，2020)等方面的綜述研究。然而多模態(tài)語言教學(xué)的相關(guān)研究較少，且大多是國內(nèi)英語教學(xué)中的各項基本技能與多模態(tài)理論的結(jié)合(王惠萍，2010；王娟、楊躍，2014)，缺乏對多模態(tài)語言教學(xué)整體的綜述。

多模態(tài)語言教學(xué)是在當(dāng)前數(shù)字技術(shù)快速發(fā)展的大背景下，基于多模態(tài)理論而提出的一種全新教學(xué)模式。教師通過對語言材料編輯處理、借助多媒體資源傳達語言信息，學(xué)生則通過視覺、聽覺、觸覺等感官進行互動，創(chuàng)造出一種多模態(tài)交替或并舉的教學(xué)情境(劉菲，2014)。學(xué)習(xí)語言最地道的方式是通過沉浸式模擬場景進行語境練習(xí)。多模態(tài)理論的發(fā)展恰恰為語言的教與學(xué)提供了更豐富、更真實的多感官語境資源。它是時代發(fā)展的必然產(chǎn)物，也是新形勢下高校進行外語教學(xué)改革、培養(yǎng)具有多文化、多媒體、和多模態(tài)交際能力的國際化人才目標(biāo)實現(xiàn)的必然途徑。因此，在用多模態(tài)理論研究語言教學(xué)具體問題之前，有必要對這一領(lǐng)域的發(fā)展脈絡(luò)做系統(tǒng)了解，而目前對多模態(tài)語言教學(xué)整體的綜述較少，且分析的文獻數(shù)量少，研究工具也僅限于Excel(耿敬北等，2014)。因此，本文基于可視化分析軟件CiteSpace，以發(fā)表在SSCI和A&HCI的論文為研究對象，對多模態(tài)語言教學(xué)研究的發(fā)文量、高產(chǎn)期刊、共被引文獻和關(guān)鍵詞聚類進行分析，探究近二十五年來國外該領(lǐng)域的整體脈絡(luò)與發(fā)展態(tài)勢，提取核心文獻和關(guān)鍵詞，明晰研究領(lǐng)域，展望未來研究趨勢，從而為國內(nèi)多模態(tài)外語教學(xué)的相關(guān)研究及實踐提出一些參考和借鑒。

2. 研究設(shè)計

1) 研究問題

本研究擬回答以下問題： (1) 國外多模態(tài)語言教學(xué)研究的整體脈絡(luò)與發(fā)展態(tài)勢是什么？(2) 國外多模態(tài)語言教學(xué)研究的核心領(lǐng)域是什么？(3) 對我國外語教學(xué)研究及實踐有何啟示？

2) 研究工具

本研究采用的Citespace是美國Drexel University陳超美教授基于JAVA語言開發(fā)的一款文獻計量可視化分析軟件。該軟件專門用來解答有關(guān)知識領(lǐng)域(Knowledge domain)結(jié)構(gòu)和研究動態(tài)的問題，如關(guān)鍵詞研究、文獻共被引和重大轉(zhuǎn)折研究領(lǐng)域等等(Chen, 2016)。與傳統(tǒng)文獻綜述相比，運用Citespace作文獻計量分析有以下優(yōu)勢： 第一，可以對某學(xué)科的文獻作量化統(tǒng)計，發(fā)現(xiàn)其存在的客觀規(guī)律，摒棄了傳統(tǒng)綜述中的主觀性和局限性；第二，通過量化分析關(guān)鍵詞、期刊等信息，可以快速把握該領(lǐng)域研究的熱點內(nèi)容和前沿文獻；最后，數(shù)據(jù)結(jié)果以可視化方式呈現(xiàn)，更加生動直觀。目前外語界學(xué)者利用該軟件做了相關(guān)研究，有語料庫語言學(xué)(劉霞等，2014)、二語寫作研究動態(tài)分析(徐錦芬、聶睿，2015)、語用學(xué)(李民、陳新仁，2018)、生態(tài)文學(xué)(王佩玉、王建華，2018)、影視翻譯(王建華等，2019)等。鑒于此，Citespace應(yīng)用在與外語相關(guān)領(lǐng)域的優(yōu)勢可見一斑。

本文采用Excel和CiteSpace(5.7.R1, 64-bit)兩種工具對國外多模態(tài)語言教學(xué)研究的文獻進行統(tǒng)計分析。Excel用來繪制該領(lǐng)域文獻數(shù)量隨年份變化的態(tài)勢圖和高產(chǎn)期刊的柱狀圖。CiteSpace用來繪制文獻共被引圖譜和關(guān)鍵詞聚類圖譜。

3) 研究方法及數(shù)據(jù)來源

本研究的操作步驟大致包括： (1) 數(shù)據(jù)采集與處理(數(shù)據(jù)篩選、導(dǎo)出、格式轉(zhuǎn)換和存儲)；(2) 參數(shù)功能選擇(共被引文獻、關(guān)鍵詞)；(3) 可視化運行；(4) 調(diào)節(jié)標(biāo)簽，繪制圖譜；(5) 解讀圖譜。本節(jié)闡述第一步，其余步驟詳見后。

數(shù)據(jù)采集及處理方面，研究選取的國外期刊數(shù)據(jù)來源于美國科學(xué)情報研究所的多學(xué)科學(xué)術(shù)文獻索引數(shù)據(jù)庫Web of Science(以下簡稱WoS)核心合集官網(wǎng)。以 “multimodal” “AND” “l(fā)anguage teaching”為主題檢索詞，在SSCI與A&HCI子庫中進行搜索。時間跨度選擇“所有年份”，當(dāng)前WoS數(shù)據(jù)庫時間為1975年至今。選取文獻量排名前三的“類別”為 “l(fā)inguistics” “l(fā)anguage linguistics”和 “education educational research”，“文獻類型”為 “article” 進行數(shù)據(jù)精煉，數(shù)據(jù)檢索于2020年7月30日，共析出文獻187篇。選擇“全記錄與引用的參考文獻”，文件格式為“純文本”，導(dǎo)出文獻。按照CiteSpace要求，將文件命名為： download_1-187。

3. 研究結(jié)果與分析

1) 年度發(fā)文趨勢

本文首先統(tǒng)計近二十五年來國外187篇多模態(tài)語言教學(xué)相關(guān)文獻的年度發(fā)文量。結(jié)果如圖1顯示，國外多模態(tài)語言教學(xué)的文獻肇始于1995年，總體上呈現(xiàn)波動性增長趨勢，大致可分為以下三個階段： 緩慢發(fā)展期(1995—2007)，穩(wěn)步增長期(2008—2012)，和曲折發(fā)展期(2013—2020)。從1995年第一篇刊文發(fā)出到第二篇，期間8年一度出現(xiàn)發(fā)文量空白，說明當(dāng)時多模態(tài)語言教學(xué)作為新興研究領(lǐng)域，還未引起國際學(xué)者的關(guān)注，直到2003—2007年期間才逐步恢復(fù)發(fā)刊。第二階段的發(fā)展說明多模態(tài)語言教學(xué)研究開始引起學(xué)界的關(guān)注，年度發(fā)文量為個位數(shù)。第三階段發(fā)文量于2013年以后增長勢頭尤為明顯，篇數(shù)突破10篇，整體趨勢呈波動增長，2019年達到峰值35篇。波動說明多模態(tài)語言教學(xué)研究逐漸趨于理性，整體的增長趨勢反映了近二十五年來多模態(tài)語言教學(xué)研究的積極發(fā)展態(tài)勢，說明相關(guān)研究在國際學(xué)界愈發(fā)廣受關(guān)注。

圖1. 國外年度發(fā)文量(1995—2020)

2) 高產(chǎn)期刊信息

圖2. 排名前十的國外高產(chǎn)期刊

用Excel做出排名前十的高產(chǎn)期刊柱狀圖(圖2)，可以清楚地看到發(fā)文最多的是Recall期刊,共發(fā)表12篇，占全部187篇文獻總量的6.417%。該期刊由英國劍橋大學(xué)出版社主辦，在語言學(xué)領(lǐng)域的JCR(Journal Citation Reports 期刊引證報告)分區(qū)為Q1。排名第二的是System, 發(fā)文11篇，占比5.882%，是由英國Elsevier集團創(chuàng)辦，在語言學(xué)領(lǐng)域的JCR分區(qū)為Q1。并列第三的是TESOL Quarterly(語言學(xué)領(lǐng)域JCR分區(qū)Q1)和English Teaching Practice and Critique(英國Emerald集團創(chuàng)辦，語言學(xué)領(lǐng)域JCR分區(qū)Q3)。表1列出了多模態(tài)語言教學(xué)領(lǐng)域研究成果所刊發(fā)的國外核心期刊信息。我們發(fā)現(xiàn)，在排名前十的高產(chǎn)期刊中，有7個都在語言學(xué)領(lǐng)域JCR分區(qū)為Q1，且5年的影響因子(impact factor, 下表以IF代替)都較高。說明國外多模態(tài)語言教學(xué)研究的發(fā)文多為語言學(xué)核心期刊，隸屬于語言學(xué)領(lǐng)域。還有2個在教育研究領(lǐng)域，說明與教育學(xué)也有一定融合。

表1. 國外高產(chǎn)期刊信息

3) 研究的核心文獻及作者

CiteSpace中，“中心值”(centrality)作為節(jié)點在圖譜中連接作用大小的度量，中心值大的節(jié)點文獻往往被認(rèn)為是在該領(lǐng)域發(fā)展過程中的核心文獻(Chen, 2006)。我們在“node types”選項中選擇 “cited references”, “term type” 選擇 “burst terms” 繪制文獻共被引知識圖譜(見圖3)。

圖3. 文獻共被引知識圖譜

如圖3所示，共被引圖譜中，若兩篇文獻被同一篇文獻所引用，這兩篇文獻(或兩個作者)之間就存在共被引關(guān)系，這種關(guān)系就體現(xiàn)在節(jié)點與節(jié)點之間的連線。文獻出現(xiàn)的先后順序由顏色來表示，最早時間分區(qū)呈冷色調(diào)藍色，逐漸過渡到綠色、黃色、橙色，直到最近的時間分區(qū)里呈現(xiàn)暖色調(diào)紅色。(Chen, 2016)。為了更全面具體的了解國外多模態(tài)語言教學(xué)研究的核心文獻，我們將被引文獻中心值≥0.1的10個文獻詳細信息列入下表中，其中文獻類別涵蓋了著作、論文集和論文，這些文獻即為國外多模態(tài)語言教學(xué)領(lǐng)域的核心文獻。

表2. 中心值≥0.1的文獻及作者

在這10篇文獻中，Kress的獨著或合著有3個，其中獨著：(Kress, 2010)是中心值最高的文獻，可見其在多模態(tài)語言教學(xué)領(lǐng)域的重要性和學(xué)界較高的認(rèn)可度，是該領(lǐng)域?qū)W者重點關(guān)注的文獻。該文獻中Kress呈現(xiàn)了一個當(dāng)代獨特的，可以廣泛適用的交際模式，提供了一個必要的統(tǒng)一理論框架，試圖在這一框架下把所有的意義構(gòu)建模態(tài)組合在一起。他曾是倫敦大學(xué)符號學(xué)和教育學(xué)教授，在批評語言學(xué)、批評話語分析和社會符號學(xué)領(lǐng)域開創(chuàng)了先河，在多模態(tài)研究領(lǐng)域影響也頗大。張德祿等(2015)指出Kress & van Leeuwen于1996年出版的：是多模態(tài)話語分析理論蓬勃發(fā)展的標(biāo)志性成果。此外，中心值≥0.01的還有他的另外一部獨著(Kress, 2003)和與Jewitt的合著(Jewitt & Kress, 2003)，關(guān)注的重心均在多元讀寫能力上，把讀和寫從傳統(tǒng)的紙張移到了屏幕上，交際的媒介也從書本變成了屏幕。

其次，O’Halloran有3篇論文中心值位于前列，2011年的獨作和O’Halloran(2015)分別位于第四和第八，與Tan和Wignell合作的文章位于第七。O’Halloran目前就職于英國利物浦大學(xué)，是近年來世界公認(rèn)的多模態(tài)領(lǐng)域的領(lǐng)先學(xué)者，自20世紀(jì)90年代以來一直從事多模態(tài)話語分析的相關(guān)研究。她早期的研究將數(shù)學(xué)語言、符號、圖像的多種模態(tài)綜合應(yīng)用于數(shù)學(xué)課堂教學(xué)，從而映射到科學(xué)英語的學(xué)習(xí)(O’Halloran, 2015)。在此后，研究方向逐漸擴展到多模態(tài)語言教學(xué)方面，著重開發(fā)新的數(shù)字工具和技術(shù)以用于多模態(tài)分析。如運用系統(tǒng)和元語言理論為學(xué)生提供分析多模態(tài)文本的概念性工具，通過對新加坡一所中學(xué)的印刷廣告和電影海報進行注釋分析，有效支持了視覺文本教學(xué)(Lim-Fei, et al., 2015)；她在2016年與Tan和Wignell合作的研究中，描述了3D網(wǎng)絡(luò)虛擬合成世界Second Life中的語言學(xué)習(xí)經(jīng)歷及對語言教與學(xué)的有效幫助，并對多模態(tài)研究提出了一種數(shù)字方法，以此來應(yīng)對CALL(computer assisted language learning)中的各項挑戰(zhàn)。此外，她作為跨學(xué)科小組的研究主任也已有10年以上的經(jīng)驗，進行了大量跨學(xué)科的研究。

位于第二位的Baldry & Thibault合著了：(2006). Forceville(2007)對其進行評價時認(rèn)為，此著作基于Halliday的符號學(xué)，與Kress & van Leeuwen在2006年重新再版的：有著密切的聯(lián)系，均認(rèn)為語篇的意義不完全是由語言本身體現(xiàn)的，而是由多種非語言模態(tài)來體現(xiàn)，它們共同構(gòu)成多模態(tài)話語，來實現(xiàn)社會交際的目的。

位于第三位的是2014年Halliday與Matthiessen的合著。彭宣維(2009)認(rèn)為此著作是Halliday語言學(xué)思想的集中體現(xiàn)，系統(tǒng)功能語言學(xué)是整個語言學(xué)研究傳統(tǒng)的“集大成者”。這部經(jīng)久不衰的功能語法著作，中心值為0.16，被視為重點文獻，揭示了多模態(tài)語言教學(xué)研究與系統(tǒng)功能語法之間的緊密聯(lián)系。

位于第五位的Jewitt早在1997年就與Kress一起在倫敦大學(xué)從事“多模態(tài)科學(xué)課堂”的項目，與Kress合著有(Jewitt & Kress，2003)。在2008年的論文中還討論了在課堂教學(xué)和教學(xué)材料中的多模態(tài)都有哪些特征，教師和學(xué)生如何通過課堂互動來激活這些模態(tài)。

位于第九位的Berglund(2009)討論了學(xué)生在遠程語言教學(xué)過程中，除了言語互動，如何運用其他模態(tài)與教師實現(xiàn)互動，構(gòu)建語言學(xué)習(xí)的生態(tài)性。

綜上，這些高被引文獻可以歸納為以下兩個層面： 一是有關(guān)多模態(tài)話語分析的研究，主要基于系統(tǒng)功能語言學(xué)和社會符號學(xué)的理論基礎(chǔ)；二是有關(guān)語言教學(xué)領(lǐng)域的研究，關(guān)注教學(xué)策略、課堂教學(xué)、在線教學(xué)、教師發(fā)展、二語習(xí)得等話題?？梢姡嗄B(tài)語言教學(xué)從早期的多模態(tài)話語分析演變而來，結(jié)合了語言學(xué)和教育學(xué)的相關(guān)理論，在“新多媒體時代”背景下得到迅速發(fā)展。

4) 核心研究領(lǐng)域

CiteSpace可以通過自動抽取施引文獻的關(guān)鍵詞或名詞短語產(chǎn)生聚類(Cluster)標(biāo)識，用以研究聚焦點，每一個聚類可以被認(rèn)為是一個聯(lián)系相對緊密的獨立研究領(lǐng)域(Chen, 2006： 359-377)。我們采用聚類分析方法，繪制多模態(tài)語言教學(xué)研究核心領(lǐng)域知識圖譜。具體操作步驟為： 將CiteSpace設(shè)置“時間”為1995年1月—2020年7月，以1年為一個時間分區(qū)(slice)，“Term Type”中選擇“Noun Phrases”，“Node Types”中選擇“Keyword”，其他參數(shù)不變，選擇尋徑(Pathfinder)算法，由軟件自動抽取聚類。將相同或類似聚類進行統(tǒng)一歸并，設(shè)置聚類最大顯示值為9，得出圖4。其中聚類值Modularity Q為0.7913，(Q>0.3)，聚類平均輪廓值Mean Silhouette值為0.6356(S>0.5)，說明“聚類高效、可信度高，且聚類劃分出來的社團結(jié)構(gòu)是顯著的。”(陳悅等, 2015)，結(jié)果具有參考價值。

圖4. 多模態(tài)語言教學(xué)國際期刊關(guān)鍵詞聚類知識圖譜

表3匯總了近二十五年來國際多模態(tài)語言教學(xué)研究最主要的聚類。由此看出，國際多模態(tài)語言教學(xué)研究的核心領(lǐng)域包括： 二語習(xí)得策略研究(#1)、語言教學(xué)理論及方法研究(#3)、多模態(tài)意義構(gòu)建(#0)、多模態(tài)讀寫能力研究(#4)。

表3. 多模態(tài)語言教學(xué)國際期刊研究的關(guān)鍵詞主要聚類(5)表格中按聚類大小順序從大到小排列

(1) 二語習(xí)得策略的研究。國外多模態(tài)語言教學(xué)界早期關(guān)注的主題是二語習(xí)得策略的使用情況，包括多模態(tài)二語輸入策略和多模態(tài)二語輸出策略研究。在輸入策略方面，多模態(tài)因素對于兒童二語詞匯習(xí)得記憶方面具有積極的促進作用。Tellier(2008)對20名法國兒童隨機分組，進行不同模態(tài)對于第二語言(英語)詞匯記憶的效果實證研究。實驗結(jié)果表明，相比文字單模態(tài)和圖文結(jié)合雙模態(tài)，手勢作為一種動作模態(tài)，會更有效地促進詞匯長時記憶。同樣是詞匯習(xí)得方面，Wigham(2017)則探討了在詞匯解釋序列中如何使用不同的符號資源，進一步闡釋了逐漸興起的“詞匯教學(xué)”和多模態(tài)交際策略。在閱讀方面，復(fù)雜科技學(xué)術(shù)文本中的抽象概念和意義可以使用圖像和其他多模態(tài)資源，即通過多模態(tài)中的再符號化過程使其變得簡單易懂(Almudena et al, 2020)。而對于輸出策略方面，多模態(tài)因素主要體現(xiàn)在寫作方面。多模態(tài)寫作是應(yīng)時代發(fā)展而出現(xiàn)的新型數(shù)字媒體表現(xiàn)形式。它融合了文字、圖像、聲音等其他模態(tài)的表達形式，易于在線分享，作者與讀者之間也可以互動，由此產(chǎn)生了語言交際的新體裁和新語境，語言教學(xué)的范圍也得以擴展到多模態(tài)集合的產(chǎn)出(Hafner, 2014)。Hafner & Ho(2020)隨后又探討了數(shù)字多模態(tài)寫作項目(Digital Multimodal Composing project)的評測標(biāo)準(zhǔn)，涵蓋的寫作體裁較之以前豐富了許多，有網(wǎng)頁(website)、博客(blog)、維基網(wǎng)站(wikis)、播客(podcast)、視頻游戲(video game)、海報(poster)、宣傳手冊(brochure)、圖像化摘要(visual abstract)等。在評測標(biāo)準(zhǔn)上，多模態(tài)寫作也與傳統(tǒng)文本寫作的評測量規(guī)有所不同，分為組織和內(nèi)容、多媒體和視覺效果、語言三個權(quán)重相同的維度。語言的評測標(biāo)準(zhǔn)則仍與以往的流利性、準(zhǔn)確性和恰當(dāng)性保持一致。以上多為實證研究，為國內(nèi)二語習(xí)得策略方面的研究開拓了思路，很大程度上推進了多模態(tài)因素在二語習(xí)得方面的融合。

(2) 語言教學(xué)理論及方法研究。將多模態(tài)因素用于語言教學(xué)理論及方法研究是近些年來二語界研究的持續(xù)熱點之一。不僅有任務(wù)教學(xué)法(Satar & Wigham, 2017)、CALL(Tan et al, 2016)、CLIL等教學(xué)理論的研究，還有運用多模態(tài)語料庫(Bonsignori, 2018)、虛擬在線平臺(Wigham & Chanier, 2013；Wigham & Chanier, 2015; Wigham, 2017)、游戲教學(xué)(Hung et al, 2018)和構(gòu)建合作學(xué)習(xí)社區(qū)(Vasudevan, et al., 2010；Li, 2020)等教學(xué)方法的研究。在科學(xué)課堂上以手勢、圖像等多種模態(tài)因素作為符號資源被教師和學(xué)生使用，把語言學(xué)習(xí)與各種科學(xué)知識的學(xué)習(xí)融合在一起的教學(xué)方法踐行了CLIL這一語言教學(xué)理論，促進了語言學(xué)習(xí)的高效進行，加深了對于知識內(nèi)容本身的理解。(O’Halloran, 2015; Wigham & Chanier, 2015; Almudena et al., 2020)。隨著現(xiàn)代科技的發(fā)展，科技成果大量用于課堂教學(xué)，各種各樣的技術(shù)手段，如CD-ROM, 計算機，桌面視頻會議、虛擬空間平臺、人工智能等，給語言學(xué)習(xí)帶來了飛速發(fā)展的契機，打開了一扇完全不同于傳統(tǒng)學(xué)習(xí)的大門。從一定程度上提升了學(xué)生的學(xué)習(xí)興趣，也培養(yǎng)了學(xué)生利用高新科技協(xié)同解決問題的能力(Lim-Fei et al, 2015)。未來語言教學(xué)多媒體化、多模態(tài)化的趨勢將繼續(xù)升溫。

(3) 多模態(tài)意義構(gòu)建的研究。對于語言教學(xué)中多模態(tài)意義構(gòu)建的研究一直是學(xué)界關(guān)注的熱點話題。此研究領(lǐng)域大多從符號學(xué)角度出發(fā)，考察不同符號資源在教學(xué)互動中的作用，探討如何將不同符號模態(tài)組合起來構(gòu)建意義，尤以討論非語言符號為主(Guichon & Wigham 2015; Bonsignori, 2018)。Jones & Hafner(2012)提出模態(tài)可以在以下三方面實現(xiàn)交互： 并存性(concurrence)，即不同的模態(tài)表達相同的意義；互補性(complementarity)，即一個模態(tài)支持另一個模態(tài)填補意義的空缺；差異性(divergence)，即不同模態(tài)呈現(xiàn)出的意義不盡相同。從而可以使師生雙方意識到不同模態(tài)的存在及其構(gòu)建意義時的不同作用，也可以進一步理解多模態(tài)符號的表意功能。這些不但體現(xiàn)在傳統(tǒng)的面對面授課中，更體現(xiàn)在當(dāng)今各種虛擬的線上教學(xué)平臺中(Berglund, 2009; Wigham & Chanier, 2013; 2015; Guichon & Wigham, 2015; Satar & Wigham, 2017)。

(4) 多模態(tài)讀寫能力的研究。有關(guān)多模態(tài)讀寫能力的研究是最早將多模態(tài)應(yīng)用于語言教學(xué)的產(chǎn)物，也是一直以來學(xué)界關(guān)注的熱點。在數(shù)字媒體高速發(fā)展的背景下，語言學(xué)習(xí)者被各種媒體包圍著，這些媒體傳播信息的方式，不單有語言，還有視頻中的眼神、手勢、圖片、各種音樂等多種模態(tài)表達形式。這些模態(tài)能夠達到綜合使用，正是得益于數(shù)字媒介，諸如網(wǎng)絡(luò)和個人電腦的興起。由此“設(shè)計學(xué)習(xí)”被國外許多研究者提出，它是“通過設(shè)計學(xué)習(xí)”(learning by design)的簡稱，與“通過記憶學(xué)習(xí)”“通過訓(xùn)練學(xué)習(xí)”“通過實踐學(xué)習(xí)”“通過完成任務(wù)學(xué)習(xí)”等概念相比較、相對應(yīng)。設(shè)計學(xué)習(xí)概念也是New London Group(1996)提出來的，已成為新時代多元讀寫能力培養(yǎng)的主要理論依據(jù)(Kress & van Leeuwen, 2001; Jewitt & Kress, 2003; Kress, 2003)。設(shè)計學(xué)習(xí)是多模態(tài)語言教學(xué)和多元讀寫能力培養(yǎng)相融合的時代產(chǎn)物，是現(xiàn)代科技的發(fā)展給人類交際帶來新變化的結(jié)果。多模態(tài)教學(xué)中，教師和學(xué)生都可能成為“設(shè)計者”，但更重要的是學(xué)生作為設(shè)計者。學(xué)生通過設(shè)計而學(xué)，設(shè)計的過程就是學(xué)習(xí)的過程。這也符合當(dāng)下語言教學(xué)模式由以往的“以教師為中心”翻轉(zhuǎn)為“以學(xué)生為中心”。此外，多模態(tài)讀寫能力的培養(yǎng)可以鍛煉學(xué)生多方面的實踐技巧，諸如閱讀電子材料、練習(xí)設(shè)計包含圖片、聲音、動作等多種模態(tài)在內(nèi)的寫作、演講、辯論、話劇表演等任務(wù)，也可以促進學(xué)生創(chuàng)新性、思辨性學(xué)習(xí)，鼓勵學(xué)生發(fā)展自主學(xué)習(xí)能力，構(gòu)建合作學(xué)習(xí)社區(qū)。

4. 結(jié)語

綜上所述，近二十五年來國外多模態(tài)語言教學(xué)研究整體呈現(xiàn)波動性增長態(tài)勢。研究的核心領(lǐng)域分別為二語習(xí)得策略、語言教學(xué)理論及方法、多模態(tài)意義構(gòu)建和多模態(tài)讀寫能力的研究。基于對國外該領(lǐng)域研究的關(guān)鍵詞聚類和共被引文獻的分析，我們對國內(nèi)外語教學(xué)研究及實踐做如下建議：

1) 重視語言習(xí)得策略。語言學(xué)家Krashen(1988)提出了著名的“二語習(xí)得理論”，該理論秉持語言習(xí)得是通過語言輸入來獲得的，最佳的語言輸入會促進學(xué)習(xí)者的語言習(xí)得。多模態(tài)語言教學(xué)中大量易于理解、有趣直觀的學(xué)習(xí)材料都是最佳語言輸入的必要條件。如Bonsignori(2018)探索通過電影剪輯片段來學(xué)習(xí)語言和文化，讓學(xué)生意識到不同模態(tài)符號可以組合起來構(gòu)建意義。再如學(xué)生在創(chuàng)造數(shù)字化故事時，實則在進行“設(shè)計學(xué)習(xí)”，需要接觸大量的語言素材，包括文字、圖片、音頻、視頻等素材，由此構(gòu)成了最佳的語言輸入條件。學(xué)習(xí)者還可以根據(jù)判斷自己的學(xué)習(xí)類型是屬于視覺學(xué)習(xí)型、聽覺學(xué)習(xí)型還是動覺觸覺學(xué)習(xí)型，來選擇適合自己的語言輸入模態(tài)，從而提高語言產(chǎn)出的效率。

2) 重視人腦記憶規(guī)律。桂詩春(2010)強調(diào)“認(rèn)識外語教學(xué)的認(rèn)知基礎(chǔ)關(guān)系到教學(xué)思想改變的問題”，揭示了大腦認(rèn)知規(guī)律與語言教學(xué)的緊密聯(lián)系。一般認(rèn)為，大腦處理畫面的速度比單純處理文字的速度要快很多，因此有豐富意象的圖片比單純的文字更容易被大腦記住。多模態(tài)語言教學(xué)是通過多個感官通道進行信息的交際，這比單一感官通道交際更直觀、生動。目前市面上出現(xiàn)很多通過電影畫面和臺詞記憶單詞的APP，從另一個側(cè)面也證實了多感官通道記憶效果要優(yōu)于單感官通道，從而激發(fā)學(xué)習(xí)興趣，提高學(xué)習(xí)效率。

3) 重視師生技術(shù)層面的培訓(xùn)。多模態(tài)語言教學(xué)領(lǐng)域?qū)τ龅降睦щy挑戰(zhàn)研究數(shù)量較少，研究結(jié)論不盡相同。多數(shù)研究表明，師生對于多模態(tài)語言教學(xué)還是持積極支持的態(tài)度。少數(shù)研究說明，會遇到困難和挑戰(zhàn)，教學(xué)效果值得商榷。Li(2020)在對TESOL教師多模態(tài)教學(xué)培訓(xùn)的研究中，對于被試師生分別進行了訪談，結(jié)果顯示少數(shù)教師提出了對于多模態(tài)教學(xué)話題的選擇和技術(shù)平臺不熟悉的現(xiàn)實困難。相反，學(xué)生則更青睞于多模態(tài)教學(xué)的方式，更喜歡在線社區(qū)和同伴之間的互動學(xué)習(xí)，認(rèn)為技術(shù)方面并不存在太大難題?，F(xiàn)代科技的發(fā)展增加了許多新的信息呈現(xiàn)方式和資源，這就使得語言教學(xué)研究未來還會有更多的新技術(shù)理論融入進來，為適應(yīng)跨學(xué)科研究奠定基礎(chǔ)。如何構(gòu)建新媒體時代的語言教學(xué)框架，如何實現(xiàn)課堂教學(xué)中模態(tài)的協(xié)同，如何培養(yǎng)教師的數(shù)字化素養(yǎng)，如何使技術(shù)手段在語言的教與學(xué)中發(fā)揮最大潛質(zhì)等等，都是未來一段時間研究的熱點和亟待解決的問題。

4) 重視構(gòu)建虛擬學(xué)習(xí)共同體。在數(shù)字化時代，應(yīng)該指導(dǎo)學(xué)生擺脫語言學(xué)習(xí)中的時間、空間障礙。利用互聯(lián)網(wǎng)學(xué)習(xí)平臺，構(gòu)建虛擬學(xué)習(xí)共同體。如學(xué)生們?yōu)榱送粋€目標(biāo)，跨院校、跨地區(qū)在網(wǎng)絡(luò)平臺構(gòu)建學(xué)習(xí)共同體，以此達到自主交流學(xué)習(xí)經(jīng)驗、互助答疑學(xué)習(xí)難點的目的。疫情期間的“停課不停學(xué)”，催生了一大批在線課程，倒逼教學(xué)進行改革，翻轉(zhuǎn)教學(xué)關(guān)系，很多優(yōu)質(zhì)的網(wǎng)課資源也實現(xiàn)了跨越時間和空間的共享。

綜上，多模態(tài)理論源于國外，要想將其適應(yīng)中國的外語教學(xué)，還需廣大學(xué)者和教師進行大量的語言教學(xué)理論與實踐探索。如國外很多中學(xué)實施的CLIL教學(xué)方式，是否適合我國高校開設(shè)的雙語專業(yè)教學(xué)和ESP教學(xué)；國外通過3D網(wǎng)絡(luò)虛擬合成世界給語言學(xué)習(xí)提供語境是否適合我國目前的教學(xué)現(xiàn)狀；國外語言課堂中以學(xué)生為中心進行話劇表演、演講等活動是否適合我國語言學(xué)習(xí)者等等。

由此，我們對所提出的研究問題逐一解答，一定程度上廓清了國外多模態(tài)語言教學(xué)的核心研究領(lǐng)域，并基于此對國內(nèi)語言教學(xué)研究提供了新視角，對語言教學(xué)實踐提出了建議。但同時，我們要清醒地認(rèn)識到，多模態(tài)語言教學(xué)作為一種新興領(lǐng)域，其發(fā)展必然困難重重，如何處理好與傳統(tǒng)教學(xué)的關(guān)系，如何協(xié)調(diào)各個模態(tài)之間的比例等問題，需要更多的學(xué)者進行探究，在國際多模態(tài)語言教學(xué)領(lǐng)域發(fā)出我國學(xué)者的聲音。