[摘要] 外語(yǔ)視頻直播課堂具有獨(dú)特的模態(tài)設(shè)計(jì)模式。文章首先建構(gòu)了外語(yǔ)視頻直播課堂的模態(tài)設(shè)計(jì)分析框架,然后基于此分析框架并通過(guò)多模態(tài)標(biāo)注對(duì)優(yōu)質(zhì)少兒英語(yǔ)視頻直播課程的模態(tài)設(shè)計(jì)進(jìn)行了分析,聚焦模態(tài)選擇和配置特征。研究發(fā)現(xiàn):受語(yǔ)境、意義、模態(tài)可及性和供用特征以及符際關(guān)系等的綜合制約。(1)口語(yǔ)是師生建構(gòu)意義的主要模態(tài);手勢(shì)是教師經(jīng)常選擇但學(xué)生偶爾使用的模態(tài);教學(xué)工具和教學(xué)物理環(huán)境模態(tài)也被教師用來(lái)建構(gòu)意義,卻很少被學(xué)生選擇;文字和與之產(chǎn)生緊密邏輯語(yǔ)義關(guān)聯(lián)的概念圖像則大多同時(shí)被課件制作者選擇用以建構(gòu)意義。(2)不同教學(xué)環(huán)節(jié)的模態(tài)配置總體上呈現(xiàn)出多樣化和多模態(tài)的特點(diǎn),各種模態(tài)發(fā)揮不同的意義潛勢(shì)且相互間形成多樣化的協(xié)同關(guān)系。最后,文章指出外語(yǔ)視頻直播課堂的模態(tài)設(shè)計(jì)需遵守趣味性、前景化和可及性原則等模態(tài)選擇原則以及適配、主次、經(jīng)濟(jì)性和動(dòng)態(tài)調(diào)整原則等模態(tài)配置原則。
[關(guān)鍵詞] 外語(yǔ)視頻直播課堂;模態(tài);設(shè)計(jì);原則
[中圖分類號(hào)] H319" [文獻(xiàn)標(biāo)識(shí)碼] A" [文獻(xiàn)編號(hào)] 1002-2643(2024)03-0060-10
A Study on the Design of Modes in Live Video Streaming ForeignLanguage Classes
WU Lingjuan1 ZHANG Delu2
(1.School of Foreign Languages and Cultural Communication, Shanghai Polytechnic University,Shanghai 201209, China;2.School of Foreign Languages, Tongji University, Shanghai 200092,China)
Abstract: Live video streaming foreign language classes feature unique patterns of design of modes. Based on an analytical framework for the design of modes in live video streaming foreign language classes and through multimodal annotation of teaching videos and courseware, this study examines the design of modes in high-quality live video streaming English classes for children, focusing on the features of selection and arrangement of modes. It is found that, constrained by such factors as the context, meaning, available modes and their affordances, inter-modal relations, etc., speech is the main mode chosen by both teachers and students to make meaning in class, while gestures are frequently used by teachers but seldom chosen by students to convey information. Moreover, teaching aids and physical environment are chosen by teachers to make meaning but are seldom utilized by students. In addition, texts and conceptual images that have close logical-semantic relations with texts are often simultaneously selected by courseware designers to make meaning. Regarding modal arrangement, overall, the teachers follow various patterns when arranging modes to make meaning in major phases of teaching and the representation of meaning is multimodal with various semiotic resources realizing different meaning potentials and working in a synergistic manner. In the final analysis, some principles governing the design of modes for live video streaming foreign language classes are put forward, including the Principle of Interest, the Principle of Foregrounding and the Principle of Availability for the selection of modes, the Principle of Matching, the Principle of Priority, the Principle of Economy and the Principle of Dynamic Adjustment for the arrangement of semiotic resources.
Key words: live video streaming foreign language class; mode; design; principle
1.引言
在多模態(tài)話語(yǔ)中,設(shè)計(jì)是在特定交際情境中運(yùn)用模態(tài)或模態(tài)組合來(lái)實(shí)現(xiàn)話語(yǔ)的手段(Kress amp; van Leeuwen,2001)。設(shè)計(jì)是多模態(tài)話語(yǔ)建構(gòu)和解析的主要因素,也是多模態(tài)交際能否成功的一個(gè)關(guān)鍵問(wèn)題(張德祿,2012)。
近年來(lái),外語(yǔ)視頻直播課程以高度模擬真實(shí)線下課堂教學(xué)環(huán)境和方式且能最大限度地提供真實(shí)課堂互動(dòng)體驗(yàn)的特點(diǎn)受到了學(xué)習(xí)者的青睞。此類網(wǎng)絡(luò)課堂具有明顯的多模態(tài)交互特征(吳玲娟,2022),同時(shí),在網(wǎng)絡(luò)教學(xué)環(huán)境中,符號(hào)資源之間產(chǎn)生了新的互動(dòng)模式,我們有必要研究這種環(huán)境中意義是如何通過(guò)不同的模態(tài)和媒體來(lái)體現(xiàn)的(Hampel amp; Hauck,2006;Sindoni,2013)。在此背景下,本文對(duì)外語(yǔ)視頻直播課堂的模態(tài)設(shè)計(jì)展開(kāi)研究,聚焦優(yōu)質(zhì)少兒英語(yǔ)視頻直播課堂的模態(tài)選擇和配置特征,同時(shí)嘗試提煉出外語(yǔ)視頻直播課堂模態(tài)設(shè)計(jì)需遵循的系列原則。
2.理論基礎(chǔ)
在多模態(tài)話語(yǔ)中,設(shè)計(jì)是一個(gè)處于意義和模態(tài)之間的操作過(guò)程,它把各種模態(tài)合理地組合為一體來(lái)體現(xiàn)所選擇的意義(Kress amp; van Leeuwen,2001;張德祿,2012)??晒┰O(shè)計(jì)的符號(hào)資源既可以是單模態(tài)的,也可以是多模態(tài)的,采用什么樣的模態(tài)或模態(tài)組合更加有效,成了多模態(tài)交際的一個(gè)關(guān)鍵問(wèn)題(張德祿,2012)。在符號(hào)實(shí)踐中,設(shè)計(jì)可以幫助交際者更好地把握多模態(tài)話語(yǔ)生成過(guò)程;在理論研究中,它可以幫助我們更好地理解語(yǔ)篇為什么會(huì)呈現(xiàn)某些特征和規(guī)律,分析其設(shè)計(jì)理?yè)?jù)與機(jī)制(瞿桃、王振華,2022)。
選擇是設(shè)計(jì)的核心步驟,話語(yǔ)設(shè)計(jì)者根據(jù)語(yǔ)境要求、修辭目標(biāo)、受眾需求、模態(tài)供用特征等因素從多種可用的符號(hào)資源中進(jìn)行選擇(瞿桃、王振華,2022)。此外,設(shè)計(jì)者還要對(duì)選擇出來(lái)的符號(hào)資源進(jìn)行合理的組合與安排(張德祿,2012;Bezemer amp; Kress,2016;瞿桃、王振華,2022),即模態(tài)配置,是多模態(tài)話語(yǔ)設(shè)計(jì)的焦點(diǎn)(Kress amp; van Leeuwen,2006:219)。
多模態(tài)話語(yǔ)的設(shè)計(jì)不是任意的、無(wú)規(guī)則的,而是受語(yǔ)境、意義、符號(hào)的可及性和供用特征、符際關(guān)系等因素的制約。首先,由于設(shè)計(jì)的對(duì)象是體現(xiàn)意義的模態(tài),而意義是在一定的語(yǔ)境中產(chǎn)生的,因此,模態(tài)設(shè)計(jì)首先要考慮語(yǔ)境因素,包括文化語(yǔ)境和情景語(yǔ)境。其次,交際者在選擇模態(tài)時(shí)要注意符號(hào)的可及性、專業(yè)性與智能性等(張德祿,2023),其中,可使用的符號(hào)資源系統(tǒng)是設(shè)計(jì)的前提條件,因?yàn)椴煌Z(yǔ)境中可供選擇的模態(tài)會(huì)有差別。再次,不同模態(tài)都有各自獨(dú)特的供用特征和局限性,某些模態(tài)適合某些交際任務(wù),卻不適合其他意義類型和范圍,因此交際者只有在熟悉可選模態(tài)的供用特征后才能在模態(tài)與意義之間進(jìn)行準(zhǔn)確匹配(張德祿、胡瑞云,2019)。此外,當(dāng)一種模態(tài)的供用特征不能很好地體現(xiàn)意義時(shí),交際者便要對(duì)多種模態(tài)進(jìn)行搭配組合,讓各種模態(tài)的供用特征相互補(bǔ)充、相互協(xié)同(張德祿,2015),因此,厘清不同模態(tài)間的關(guān)系對(duì)于模態(tài)的配置尤為重要。除此之外,多模態(tài)話語(yǔ)設(shè)計(jì)還需要考慮修辭目的、設(shè)計(jì)者的利益等因素(Bezemer amp; Kress,2016:64)。
3.研究過(guò)程
3.1 外語(yǔ)視頻直播課堂模態(tài)設(shè)計(jì)分析框架
基于上述模態(tài)設(shè)計(jì)基本概念及制約因素并參考張德祿(2009)的多模態(tài)話語(yǔ)分析綜合理論框架,本文建構(gòu)了外語(yǔ)視頻直播課堂模態(tài)設(shè)計(jì)分析框架,如圖1所示。
具體來(lái)看,在進(jìn)行外語(yǔ)視頻直播課堂話語(yǔ)的模態(tài)設(shè)計(jì)時(shí)首先要考慮相關(guān)的語(yǔ)境,其中文化語(yǔ)境包括由教育政策組成的意識(shí)形態(tài)和課堂教學(xué)的體裁結(jié)構(gòu);情景語(yǔ)境包括教學(xué)內(nèi)容、師生關(guān)系和教學(xué)方式這三個(gè)變量。其次,文化語(yǔ)境和情景語(yǔ)境共同制約和影響著課堂整體及不同教學(xué)環(huán)節(jié)的概念意義、人際意義和語(yǔ)篇意義以及哪些意義需要被突顯。同時(shí),情景語(yǔ)境還直接制約和影響著課堂有哪些可及的符號(hào)資源系統(tǒng)以及哪些模態(tài)會(huì)相對(duì)比較突出。接著,課堂交際者(教師、學(xué)生和課件制作者)在意義的驅(qū)動(dòng)下從口語(yǔ)、文字、圖像、版面布局、身體動(dòng)作、教學(xué)工具和教學(xué)環(huán)境等可調(diào)用的符號(hào)資源系統(tǒng)中選擇合適的模態(tài)并進(jìn)行合理的配置。這就是外語(yǔ)視頻直播課堂的模態(tài)設(shè)計(jì)過(guò)程,是課堂多模態(tài)交際是否有效的關(guān)鍵。反過(guò)來(lái)說(shuō),課堂交際者需要根據(jù)課堂的語(yǔ)義特征、模態(tài)的供用特征和形式系統(tǒng)以及符際關(guān)系來(lái)決定用哪些模態(tài)或模態(tài)組合來(lái)體現(xiàn)課堂整體及不同教學(xué)環(huán)節(jié)的意義。
3.2 研究語(yǔ)料
近年來(lái),極具互動(dòng)性和趣味性、師資多元化并能提供浸入式英語(yǔ)口語(yǔ)交際環(huán)境的青少年視頻直播英語(yǔ)課程受到了學(xué)習(xí)者的歡迎(吳玲娟,2022)。本研究從當(dāng)前口碑良好且市場(chǎng)占有率較高的說(shuō)客英語(yǔ)、貝達(dá)英語(yǔ)等在線英語(yǔ)學(xué)習(xí)平臺(tái)上篩選30節(jié)優(yōu)質(zhì)一對(duì)一視頻直播外教英語(yǔ)課程(平均時(shí)長(zhǎng)為25.9分/節(jié),平均課件數(shù)為16.6頁(yè)/份)作為研究語(yǔ)料。
就文化語(yǔ)境而言,少兒英語(yǔ)視頻直播課程為主要針對(duì)中國(guó)少年兒童的校外英語(yǔ)課程,其體裁結(jié)構(gòu)成分包括問(wèn)候、主題介紹、提問(wèn)、發(fā)布指令、知識(shí)講解、拓展反饋、引導(dǎo)反饋、糾錯(cuò)反饋、積極評(píng)價(jià)反饋以及道別這十個(gè)必要的教學(xué)環(huán)節(jié)以及介紹課堂規(guī)則、引導(dǎo)學(xué)生復(fù)習(xí)、課堂總結(jié)和布置作業(yè)這四個(gè)可選教學(xué)環(huán)節(jié)(吳玲娟、瞿桃,2023)。就情景語(yǔ)境而言,其總體教學(xué)目標(biāo)為提高學(xué)生的口語(yǔ)交際能力;教師大部分為母語(yǔ)為英語(yǔ)且擁有相關(guān)教學(xué)資質(zhì)的外教,學(xué)生為我國(guó)6歲以上(本研究中為6-9歲)的少年兒童;課程依托ClassIn、學(xué)點(diǎn)云等在線教學(xué)直播平臺(tái)等進(jìn)行一對(duì)一授課,師生通過(guò)教學(xué)課件(平臺(tái)統(tǒng)一提供)、人像屏幕和互動(dòng)聊天區(qū)進(jìn)行多維度實(shí)時(shí)交流和互動(dòng)。
這些情景語(yǔ)境因素制約和影響著少兒英語(yǔ)視頻直播課堂有哪些可及的符號(hào)資源系統(tǒng)以及哪些模態(tài)會(huì)比較突出。以一對(duì)一模式為例,其教學(xué)主要依賴師生口語(yǔ)和課件上的文字、圖像以及圖文布局等模態(tài)來(lái)展開(kāi)。同時(shí),由于師生雙方都打開(kāi)攝像頭,因此師生的手勢(shì)、面部表情等身體動(dòng)作、各類直觀教具、物理背景、服飾、妝容等非語(yǔ)言符號(hào)也成為體現(xiàn)意義的模態(tài)。此外,虛擬貼紙、畫(huà)筆等虛擬教具成為教師傳遞教學(xué)知識(shí)以及情感溝通的一種重要模態(tài),而且虛擬畫(huà)筆是學(xué)生進(jìn)行書(shū)面練習(xí)的重要工具。
3.3 多模態(tài)標(biāo)注方法
本研究使用免費(fèi)開(kāi)源的多模態(tài)標(biāo)注軟件ELAN(6.0)來(lái)標(biāo)注課堂教師和學(xué)生選擇的各種模態(tài)以及教師的模態(tài)配置,同時(shí)結(jié)合傳統(tǒng)語(yǔ)篇分析方法對(duì)課件的各種模態(tài)進(jìn)行標(biāo)注。
課堂上師生模態(tài)的標(biāo)注聚焦口語(yǔ)、身體動(dòng)作、教學(xué)工具和教學(xué)物理環(huán)境。就口語(yǔ)模態(tài)而言,基于Flanders(1970)的課堂話語(yǔ)互動(dòng)分析系統(tǒng)等理論,將教師口語(yǔ)分為提問(wèn)語(yǔ)、指令語(yǔ)、反饋語(yǔ)和講解語(yǔ)四類;將學(xué)生口語(yǔ)分為回答問(wèn)題、跟讀、閱讀和主動(dòng)發(fā)言四類。在身體動(dòng)作模態(tài)方面,本文聚焦師生的手勢(shì)。根據(jù)McNeill(2005)的手勢(shì)觀,將教師的交際手勢(shì)標(biāo)注為規(guī)約手勢(shì)(蘊(yùn)含特定文化內(nèi)涵,常用來(lái)替代語(yǔ)言)、擬物手勢(shì)(用于描述某一具體物件)、隱喻手勢(shì)(表征抽象的概念、觀點(diǎn)或形象)、指示手勢(shì)(指向具體或抽象的物體或方位)和節(jié)拍手勢(shì)(伴隨話語(yǔ)或音樂(lè)節(jié)奏有規(guī)律地敲擊、拍打或強(qiáng)調(diào)話語(yǔ)中某些重要信息)五類。另外,學(xué)生手勢(shì)除了交際手勢(shì),還包括操作手勢(shì),即使用鼠標(biāo)或手指在觸摸屏上劃過(guò)的手部動(dòng)作。接著,將師生使用的教學(xué)工具模態(tài)標(biāo)注為虛擬貼紙、實(shí)物教具和數(shù)字媒體三類,將師生上課的物理環(huán)境區(qū)分為裝飾背景墻或佩戴飾品如耳機(jī)以及不裝飾背景墻且不佩戴頭飾兩類。最后,教師模態(tài)配置的標(biāo)注側(cè)重教師為實(shí)現(xiàn)十個(gè)必要教學(xué)環(huán)節(jié)的教學(xué)目標(biāo)所采用的模態(tài)或模態(tài)組合方式,如“純口語(yǔ)”“純手勢(shì)”“口語(yǔ)+圖像”“口語(yǔ)+手勢(shì)”“口語(yǔ)+文字”“口語(yǔ)+文字+圖像”“口語(yǔ)+文字+圖像+手勢(shì)”等二十余種模態(tài)配置方式。
課件版面布局、文字和圖像模態(tài)的標(biāo)注主要基于視覺(jué)語(yǔ)法(Kress amp; van Leeuwen,2006)、視覺(jué)敘事語(yǔ)篇網(wǎng)絡(luò)系統(tǒng)(Painter,Martin amp; Unsworth,2013)等理論。首先,將課件頁(yè)面區(qū)分為圖文并茂頁(yè)面、純文字頁(yè)面和純圖像頁(yè)面三類,同時(shí)將圖文并茂頁(yè)面依據(jù)圖像和文字所占的面積大小區(qū)分為圖像顯著型或文字顯著型兩類并根據(jù)圖像和文字的空間布局關(guān)系區(qū)分圖文融合型(文字和圖像融為一體)頁(yè)面與圖文互補(bǔ)型(文字和圖像各自占據(jù)不同的空間)頁(yè)面。其次,將文字顏色區(qū)分為純色和混合色兩類并將文字顯示方式區(qū)分為直接覆蓋在背景圖像上、直接覆蓋在課件大面積純色背景上和顯示文本框三類。此外,將課件圖像區(qū)分為主體圖像(與背景形成明顯顏色反差或攜帶邊框的獨(dú)立圖像)和背景圖像兩類。就主體圖像而言,從及物性過(guò)程視角將其區(qū)分為敘事圖像(具有向量、用體現(xiàn)動(dòng)作或言語(yǔ)過(guò)程)和概念圖像(向量缺失、用以描述參與者屬性、類別、特征或成分);按照功能將其區(qū)分為和文字具有邏輯語(yǔ)義關(guān)系的圖像、替代文字的圖像以及點(diǎn)綴頁(yè)面的修飾型圖像三類;依據(jù)圖像再現(xiàn)客觀世界的細(xì)節(jié)程度將之區(qū)分為卡通圖、寫(xiě)實(shí)照片以及抽象圖表三種表征形式。最后,根據(jù)語(yǔ)境化程度將課件背景圖分為高度語(yǔ)境化圖像背景和低語(yǔ)境化純色背景(包括白色底)兩類,并將背景圖像色調(diào)分為暖色調(diào)、冷色調(diào)以及中性色調(diào)三類。
4.結(jié)果與分析
4.1 少兒英語(yǔ)視頻直播課堂模態(tài)選擇特征
師生的口語(yǔ)、手勢(shì)、教學(xué)工具和物理環(huán)境模態(tài)選擇情況見(jiàn)表1。就教師而言,他們主要選擇口語(yǔ)來(lái)建構(gòu)概念意義、人際意義和語(yǔ)篇意義(教師話語(yǔ)時(shí)長(zhǎng)在課堂總時(shí)長(zhǎng)的平均占比為55.3%,不同類型教師話語(yǔ)按時(shí)長(zhǎng)占比從大到小排序依次為反饋語(yǔ)、知識(shí)講解語(yǔ)、提問(wèn)語(yǔ)和指令語(yǔ)),同時(shí)經(jīng)常選擇手勢(shì)(平均130.3次/節(jié),不同類型手勢(shì)頻次從高到低排序依次為規(guī)約手勢(shì)、擬物手勢(shì)、指示手勢(shì)、節(jié)拍手勢(shì)和隱喻手勢(shì))來(lái)配合其他模態(tài)或脫離語(yǔ)言獨(dú)自表征意義,還會(huì)借助各種教學(xué)工具(平均23.7次/節(jié),虛擬貼紙使用最為頻繁)來(lái)交流信息,并會(huì)設(shè)計(jì)教學(xué)物理背景(大部分教師在有裝飾性背景的物理空間進(jìn)行授課或佩戴耳機(jī)等頭飾)來(lái)建構(gòu)意義尤其是概念意義和人際意義。就學(xué)生來(lái)說(shuō),他們也主要選擇口語(yǔ)來(lái)建構(gòu)概念意義、人際意義和語(yǔ)篇意義(學(xué)生口語(yǔ)輸出時(shí)長(zhǎng)在課堂總時(shí)長(zhǎng)的平均占比為22.8%,不同類型學(xué)生口語(yǔ)按時(shí)長(zhǎng)占比從高到低排序依次為回答問(wèn)題、跟讀、閱讀和主動(dòng)發(fā)言),也會(huì)使用少量交際手勢(shì)(平均10.5次/節(jié),主要是規(guī)約手勢(shì))來(lái)配合口語(yǔ)表達(dá)意義或單獨(dú)通過(guò)身體動(dòng)作來(lái)建構(gòu)意義,并會(huì)使用鼠標(biāo)或觸摸屏來(lái)完成書(shū)面練習(xí)(占課堂總時(shí)長(zhǎng)的8.2%)。此外,學(xué)生會(huì)偶爾使用實(shí)物教學(xué)工具模態(tài)來(lái)表征概念意義和人際意義,但幾乎沒(méi)有使用虛擬貼紙、數(shù)字媒體和課堂物理環(huán)境等模態(tài)來(lái)交流信息。
課件中文字、圖像和版面布局模態(tài)的選擇情況見(jiàn)表2??傮w而言,課件制作者大多同時(shí)選擇文字以及與文字產(chǎn)生緊密邏輯語(yǔ)義關(guān)聯(lián)的概念圖像來(lái)綜合表征概念意義。具體來(lái)看,絕大部分(83.1%)課件頁(yè)面圖文并茂,雖然每頁(yè)課件上文字的出現(xiàn)頻率(4處/頁(yè))高于圖像的出現(xiàn)頻率(2.8幅/頁(yè)),但是大部分圖文并茂頁(yè)面中圖像相對(duì)于文字占據(jù)更大的空間,即圖像在視覺(jué)上更為顯著(79.3%)。此外,課件制作者還會(huì)選擇文字的顏色(黑色最常見(jiàn),混合色次之)和文字呈現(xiàn)方式(近一半呈現(xiàn)在獨(dú)立的顯性文本框內(nèi),其次為直接覆蓋在背景圖的留白部分或大面積純色背景上)、主體圖像的表征形式(多彩可愛(ài)的卡通圖為主)、背景圖像的語(yǔ)境化程度和色調(diào)(冷色調(diào)的語(yǔ)境化程度低的純白色或純彩色為主)以及圖文空間布局(圖文互補(bǔ)為主)來(lái)強(qiáng)化課件的人際意義和語(yǔ)篇意義。
4.2 少兒英語(yǔ)視頻直播課堂模態(tài)配置特征
教師在建構(gòu)不同教學(xué)環(huán)節(jié)意義時(shí)對(duì)模態(tài)的配置情況見(jiàn)表3。
首先,總體而言,課堂的模態(tài)配置呈現(xiàn)出明顯的多樣化和多模態(tài)的特點(diǎn)。具體來(lái)說(shuō),除了在標(biāo)題呈現(xiàn)環(huán)節(jié)教師只通過(guò)1種模態(tài)配置方式來(lái)建構(gòu)意義外,其他各個(gè)教學(xué)環(huán)節(jié)的模態(tài)配置都出現(xiàn)多樣化的特點(diǎn),涉及3~12種不同的模態(tài)配置方式,尤其是在積極評(píng)價(jià)反饋環(huán)節(jié)的意義建構(gòu)中教師采用了多達(dá)12種不同的模態(tài)或模態(tài)組合。此外,教師選擇頻率較高的的模態(tài)配置方式通常涉及2~4種不同模態(tài)的密切配合,其中“口語(yǔ)+文字+圖像”模態(tài)組合和“口語(yǔ)+圖像”模態(tài)組合是選擇最為頻繁的模態(tài)配置方式。
其次,各種模態(tài)在建構(gòu)不同教學(xué)環(huán)節(jié)意義過(guò)程中發(fā)揮不同的意義潛勢(shì)且相互間形成多樣化的協(xié)同關(guān)系??傮w而言,使用便捷且表義性強(qiáng)的口語(yǔ)模態(tài)是大多數(shù)教學(xué)環(huán)節(jié)意義建構(gòu)的主要且必要模態(tài),能清楚、直白地傳遞課堂概念意義、人際意義和語(yǔ)篇意義,而文字、圖像、身體動(dòng)作、教學(xué)工具等模態(tài)則通過(guò)視覺(jué)通道對(duì)口語(yǔ)主模態(tài)進(jìn)行強(qiáng)化、互補(bǔ)或拓展,通常處于輔助地位。具體來(lái)說(shuō),口語(yǔ)在語(yǔ)義層確認(rèn)和強(qiáng)化文字的概念意義并在實(shí)體層體現(xiàn)文字的正確發(fā)音;適合長(zhǎng)時(shí)保存的文字模態(tài)能強(qiáng)化轉(zhuǎn)瞬即逝的口語(yǔ)模態(tài)所表達(dá)的核心概念意義并在實(shí)體層提供口語(yǔ)核心信息的正確拼寫(xiě)形式,同時(shí)文字的字號(hào)、顏色、呈現(xiàn)方式也能發(fā)揮吸引學(xué)生興趣的人際功能和引導(dǎo)注意力分配的語(yǔ)篇功能;大部分課件圖像對(duì)口語(yǔ)或文字概念意義進(jìn)行強(qiáng)化或補(bǔ)充,如限定語(yǔ)言中人稱代詞的語(yǔ)義范圍、為語(yǔ)言提供具體例證或時(shí)間、地點(diǎn)、方式等環(huán)境因素,同時(shí)還能通過(guò)表征形式、色彩以及背景語(yǔ)境色彩對(duì)比來(lái)發(fā)揮激發(fā)學(xué)習(xí)興趣的人際功能和突顯信息的語(yǔ)篇功能;身體動(dòng)作尤其是具有生動(dòng)性、指示性、補(bǔ)充性特點(diǎn)的手勢(shì)能對(duì)口語(yǔ)或文字或與核心語(yǔ)言相關(guān)的主體圖像所傳遞的概念意義進(jìn)行強(qiáng)化、互補(bǔ)或拓展,還可以脫離語(yǔ)言獨(dú)立傳遞概念意義、人際意義和語(yǔ)篇意義;各類教學(xué)工具與口語(yǔ)、文字、圖像等模態(tài)形成強(qiáng)化、互補(bǔ)或拓展關(guān)系,不僅能生動(dòng)、形象地體現(xiàn)知識(shí)點(diǎn)的概念意義,還能發(fā)揮激發(fā)學(xué)習(xí)興趣的人際功能和引導(dǎo)注意力的語(yǔ)篇功能。
5.討論與建議
基于上述模態(tài)選擇和配置相關(guān)結(jié)論,筆者建議外語(yǔ)視頻直播課堂的交際者尤其是教師和課件制作者在設(shè)計(jì)模態(tài)時(shí)需要遵循系列原則,涉及模態(tài)選擇和配置兩方面,包括趣味性原則、前景化原則、可及性原則、適配原則、主次原則、經(jīng)濟(jì)性原則和動(dòng)態(tài)調(diào)整原則。
一方面,課堂交際者在選擇模態(tài)時(shí)需要遵循趣味性原則、前景化原則和可及性原則。
首先,由于興趣是學(xué)好外語(yǔ)的重要前提,課堂是否有趣會(huì)影響學(xué)生的外語(yǔ)學(xué)習(xí)興趣,而同時(shí)在網(wǎng)絡(luò)環(huán)境中,身處不同物理空間的師生之間會(huì)產(chǎn)生一定的心理距離,會(huì)對(duì)學(xué)習(xí)效果產(chǎn)生負(fù)面影響,因此,除了考慮課堂本身的話題內(nèi)容、練習(xí)形式等影響學(xué)習(xí)興趣的因素外,外語(yǔ)視頻直播課堂的教師和課件制作者在選擇模態(tài)時(shí)要遵循趣味性原則,即充分利用各種生動(dòng)有趣的圖像、手勢(shì)和教學(xué)工具模態(tài)來(lái)打造趣味十足的課堂,激發(fā)學(xué)生的學(xué)習(xí)興趣,拉近師生的心理距離,進(jìn)而提升教學(xué)效果。
其次,由于被前景化的符號(hào)最能引起受眾的注意力(Kress,2010:60),而且一定的學(xué)習(xí)提示有助于改善多媒體學(xué)習(xí)效果(Mayer,2009),因此,外語(yǔ)視頻直播課堂的教師和課件制作者在選擇模態(tài)時(shí)需要遵循前景化原則,即依據(jù)教學(xué)目標(biāo)和內(nèi)容的重要程度對(duì)某些符號(hào)進(jìn)行突顯以引導(dǎo)學(xué)生將注意力分配給重點(diǎn)信息,優(yōu)化教學(xué)信息的傳遞。如課件設(shè)計(jì)者可以通過(guò)圖文色彩對(duì)比、文字顏色和文本框的合理使用以及圖文空間的科學(xué)布局來(lái)優(yōu)化課件的版面布局。教師可利用多彩虛擬畫(huà)筆來(lái)畫(huà)出線條、箭頭、圓圈等幾何形狀來(lái)突顯課件中的關(guān)鍵文字或圖像,還可以選擇手勢(shì)特別是指示手勢(shì)和節(jié)拍手勢(shì)來(lái)強(qiáng)調(diào)重點(diǎn)信息等。
此外,教師在選擇模態(tài)時(shí)還需要遵循可及性原則,即除了利用口語(yǔ)、文字、圖像等常規(guī)網(wǎng)絡(luò)課堂的表義資源外,還需要充分利用視頻直播環(huán)境的優(yōu)勢(shì),使更多原本處于幕后的環(huán)境成分、工具和技術(shù)元素走向臺(tái)前,甚至是主動(dòng)創(chuàng)造一些符號(hào)資源,使之成為建構(gòu)意義的模態(tài)。如教師可精心準(zhǔn)備背景環(huán)境、衣著裝飾、各種實(shí)物教具并充分利用平臺(tái)的虛擬貼紙、特效、虛擬畫(huà)筆等技術(shù)支撐來(lái)輔助意義的表征,進(jìn)而改善課堂教學(xué)效果。
另一方面,教師在進(jìn)行模態(tài)配置時(shí)要遵循適配原則、主次原則、經(jīng)濟(jì)性原則和動(dòng)態(tài)調(diào)整原則。
首先,由于外語(yǔ)視頻直播課堂大多數(shù)教學(xué)環(huán)節(jié)意義的建構(gòu)涉及多種模態(tài)的協(xié)同,而不同模態(tài)相互配合來(lái)獲得最佳交際效果是多模態(tài)交際的一個(gè)關(guān)鍵因素(張德祿,2015),因此,在外語(yǔ)視頻直播課堂的模態(tài)配置過(guò)程中,教師要遵循適配原則,即根據(jù)課程的宏觀意識(shí)形態(tài)、體裁結(jié)構(gòu)、教學(xué)目標(biāo)、內(nèi)容和條件、師生特點(diǎn)、修辭目的、不同模態(tài)的供用特征和詞匯語(yǔ)法系統(tǒng)以及相互之間的協(xié)同關(guān)系,對(duì)口語(yǔ)、文字、圖像、身體動(dòng)作、教學(xué)工具、物理背景等模態(tài)進(jìn)行合理搭配組合,使不同模態(tài)之間形成正向的協(xié)同關(guān)系,最充分地表達(dá)意義。
其次,由于視頻直播外語(yǔ)課堂側(cè)重口語(yǔ)交際,因此,教師在進(jìn)行模態(tài)配置時(shí)還要遵循主次原則,即處理好各個(gè)教學(xué)環(huán)節(jié)中不同模態(tài)的主次關(guān)系,高度重視作為主要和重點(diǎn)模態(tài)的口語(yǔ)的質(zhì)量并對(duì)其進(jìn)行精心設(shè)計(jì),如提高語(yǔ)音、語(yǔ)調(diào)等基本的外語(yǔ)口頭表達(dá)能力以及提問(wèn)語(yǔ)、指令語(yǔ)和反饋語(yǔ)的質(zhì)量等。此外也要充分發(fā)揮文字、圖像、手勢(shì)、直觀教具、虛擬貼紙等其他模態(tài)的意義潛勢(shì),或使它們與口語(yǔ)模態(tài)形成正向協(xié)同,以強(qiáng)化意義的表達(dá)。
再次,雖然外語(yǔ)視頻直播教學(xué)環(huán)境中有多種模態(tài)可供選擇,但是教師在不同教學(xué)環(huán)節(jié)常選的模態(tài)配置方式通常涉及2-4種不同的模態(tài)的密切配合,因此,教師和課件設(shè)計(jì)者在配置模態(tài)時(shí)還需要遵循經(jīng)濟(jì)性原則,即在意義得到充分表達(dá)的情況下,模態(tài)的選擇要盡可能簡(jiǎn)化,無(wú)須在任何教學(xué)環(huán)節(jié)把所有模態(tài)都用上,避免因模態(tài)過(guò)多而產(chǎn)生負(fù)面教學(xué)效果。
最后,雖然多種模態(tài)的組合搭配可能會(huì)使意義的表達(dá)更為充分,但從經(jīng)濟(jì)的角度來(lái)講,模態(tài)越多交際效果并不一定越好,因此在模態(tài)配置過(guò)程中,教師還要遵循動(dòng)態(tài)調(diào)整原則,即根據(jù)不同的教學(xué)目標(biāo)、教學(xué)內(nèi)容、不同模態(tài)的意義潛勢(shì)以及學(xué)習(xí)者的認(rèn)知、思維和外語(yǔ)水平并靈活結(jié)合學(xué)生的即時(shí)課堂反應(yīng)來(lái)增加或減少模態(tài)來(lái)更為有效地表達(dá)意義。
6.結(jié)語(yǔ)
模態(tài)的設(shè)計(jì)事關(guān)多模態(tài)交際能否成功。本文以優(yōu)質(zhì)少兒英語(yǔ)視頻直播課程為例分析了外語(yǔ)視頻直播課堂的模態(tài)設(shè)計(jì)特征并提煉出了其模態(tài)設(shè)計(jì)需遵循的系列原則。研究結(jié)果能讓我們更加深入地了解外語(yǔ)視頻直播課堂意義的體現(xiàn)過(guò)程并有助于切實(shí)改善其教學(xué)效果。今后我們可以嘗試將一對(duì)多外語(yǔ)在線課堂以及其他學(xué)科視頻直播課堂納入研究范圍,同時(shí)將多模態(tài)話語(yǔ)分析理論與教育學(xué)、心理學(xué)等學(xué)科進(jìn)行深度的融合。
參考文獻(xiàn)
[1]Bezemer, J. amp; G, Kress. Multimodality, Learning and Communication: A Social Semiotic Frame[M]. London: Routledge, 2016.
[2]Flanders, N. A. Analyzing Teaching Behavior[M]. Boston: Addison-Wesley, 1970.
[3]Hampel, R. amp; M. Hauck. Computer-mediated language learning: Making meaning in multimodal virtual learning spaces[J]. The JALT CALL Journal, 2006, 2(2): 3-18.
[4]Kress, G. Multimodality: A Social Semiotic Approach to Contemporary Communication[M]. New York: Routledge, 2010.
[5]Kress, G. amp; T. van Leeuwen. Multimodal Discourse: The Modes and Media of Contemporary Communication[M]. London: Arnold, 2001.
[6]Kress, G. amp; T. van Leeuwen. Reading Images: The Grammar of Visual Design(2nd ed.)[M]. London: Routledge, 2006.
[7]Mayer, R. E. Multimedia Learning[M]. New York: Cambridge University Press, 2009.
[8]McNeill, D. Gesture and Thought[M]. Chicago: University of Chicago Press, 2005.
[9]Painter, C., J. R. Martin amp; L. Unsworth. Reading Visual Narratives: Image Analysis of Children’s Picture Books[M]. London: Equinox, 2013.
[10]Sindoni, M. G. Spoken and Written Discourse in Online Interactions: A Multimodal Approach[M]. London: Routledge, 2013.
[11]瞿桃, 王振華. 沖突性磋商話語(yǔ)的多模態(tài)設(shè)計(jì)研究[J]. 現(xiàn)代外語(yǔ),2022, (6):780-793.
[12]吳玲娟. 外語(yǔ)視頻直播課堂的多模態(tài)教學(xué)行為研究及啟示[J]. 現(xiàn)代教育技術(shù),2022, (10):53-60.
[13]吳玲娟, 瞿桃. 外語(yǔ)視頻直播課堂的模態(tài)配置研究[J]. 現(xiàn)代語(yǔ)言學(xué), 2023, (11): 5534-5543.
[14]張德祿. 多模態(tài)話語(yǔ)分析綜合理論框架探索[J]. 中國(guó)外語(yǔ), 2009, (1): 24-30.
[15]張德祿. 論多模態(tài)話語(yǔ)設(shè)計(jì)[J]. 山東外語(yǔ)教學(xué), 2012, (1): 9-15.
[16]張德祿. 多模態(tài)話語(yǔ)分析理論與外語(yǔ)教學(xué)[M]. 北京:高等教育出版社, 2015.
[17]張德祿. 多模態(tài)話語(yǔ)建構(gòu)中的模態(tài)融合模式研究[J]. 現(xiàn)代外語(yǔ), 2023, (4): 439-451.
[18]張德祿, 胡瑞云. 多模態(tài)話語(yǔ)建構(gòu)中的系統(tǒng)、選擇與供用特征[J]. 當(dāng)代修辭學(xué), 2019, (5):68-79.(責(zé)任編輯:孫炬)