劉靖

[摘要]后印刷時代，多種符號資源被用來構(gòu)建意義，視覺圖像和設(shè)計成分日益成為人們表征意義和傳遞信息的重要手段。傳統(tǒng)的文本識讀策略已無法滿足讀者解讀多模態(tài)語篇的需要。運用適當(dāng)?shù)囊曈X識讀策略，熟悉特定社會文化語境中各種符號資源的意義潛勢，是識讀多模態(tài)語篇的必需?；诙嗄B(tài)語篇、多元識讀及符號學(xué)相關(guān)理論，提出一個分析、解讀多模態(tài)語篇的視覺識讀策略框架，以拓展讀者的視覺識讀技能，增強其構(gòu)建和識讀多模態(tài)語篇的能力。

[關(guān)鍵詞]視覺圖像；多模態(tài)語篇；識讀策略

[中圖分類號]H08 [文獻標識碼]A [文章編號]1671-8372（2014）01-0101-04

一、引言

視覺文化的來臨已是一個不爭的事實。隨著各種繪本、廣告、網(wǎng)絡(luò)、影視等無數(shù)視覺表征形式和技術(shù)都參與到這一文化的構(gòu)建中來，視覺圖像已成為創(chuàng)造、表征和傳遞意義的重要手段。人們所接觸到的文本語篇，日益包含復(fù)雜的視覺圖像、不同尋常的敘事結(jié)構(gòu)、復(fù)雜的設(shè)計元素和獨特的版面格式。無處不在的視覺圖像正在改變?nèi)藗兊慕浑H習(xí)慣，人們在交際中不再主要依靠語言文字，而是通過綜合運用各種靜態(tài)和動態(tài)的視覺符號資源實現(xiàn)交際意圖?？梢妭鹘y(tǒng)的基于認知的文本讀寫策略已不能滿足“讀圖時代”讀者對包含大量視覺符號的多模態(tài)語篇進行識讀的需要。因此在多模態(tài)語篇的解構(gòu)過程中，人們需要具備新的視覺識讀策略才能對視覺符號資源進行完整的意義解讀。多模態(tài)語篇和多元識讀是近年來國際學(xué)術(shù)界的研究熱點，但國內(nèi)對此的研究尚處在起步階段。學(xué)者們多關(guān)注的是多模態(tài)語篇的圖文關(guān)系及其整體解讀，對視覺識讀策略的研究并不多見，本文擬對此進行探討。

二、多模態(tài)語篇和多元識讀

交際語篇大都具有多模態(tài)性。多模態(tài)語篇是一種融合了多種交際模態(tài)（如聲音、文字、圖像等）傳遞信息的語篇，它把包含兩種及以上符號的系統(tǒng)資源優(yōu)化組合，通過多種符號資源內(nèi)部的互動來實現(xiàn)意義的復(fù)合話語。交際模態(tài)主要分為語言（詞匯、隱喻、結(jié)構(gòu)、情態(tài)等），視覺（顏色、視角、矢量、前景、背景等），聽覺（嗓音、音樂、音響效果等），姿態(tài)（行為、情感、動作等），空間（生態(tài)空間、幾何空間、建筑空間等）等五種成分。這些模態(tài)都是意義生成資源，屬于特定文化。它們是通過社會使用而變成了符號資源。雖然表意的方式有所差異，但這些符號資源能相互之間動態(tài)耦合，協(xié)同表意，成為傳播受眾識讀的客體。

多模態(tài)話語分析研究者們已經(jīng)嘗試把Halliday的系統(tǒng)功能語言學(xué)理論拓展應(yīng)用到其他符號資源的研究上。其中最具代表性的是Kress和Van Leeuven。他們通過研究模態(tài)與媒體的關(guān)系以及多模態(tài)規(guī)則的表達意義，認為“在特定的社會文化領(lǐng)域，同樣的意義通?？捎刹煌姆杹肀磉_，共同的符號原則能在不同交際模式中起作用”。正如語言語法通過決定詞如何組成小句、句子和語篇而具有概念、人際與組篇功能，視覺語法是通過各種視覺成分對人、物、事件的視覺陳述，而使圖像也有類似的再現(xiàn)、互動和構(gòu)圖功能。具體地講，再現(xiàn)功能是指意義參與者與過程之間的關(guān)系，分為敘事的和概念的兩類。敘事圖像展示了發(fā)展中的行動和事件、變化的過程、瞬間的空間安排；概念圖像則表示更為概括的、穩(wěn)定的意義，包括分類過程、分析過程、象征過程?；庸δ苁侵笀D像的創(chuàng)作者、圖像表征和圖像的觀看者之間的關(guān)系，主要涉及接觸、社會距離、視點和情態(tài)。構(gòu)圖功能指圖像成分的空間布局，涉及信息值、突顯性和視覺框架。信息值表示信息在圖像中的無標記分布，突顯性是指把某個信息突顯出來，而框架則表示對圖像內(nèi)部組成成分的切分和分布。

人類表意形式的日益多元化意味著傳統(tǒng)意義上“識讀”（Iiteracy）的概念應(yīng)該超越僅僅能讀和寫的范圍?，F(xiàn)代的讀者需要能夠應(yīng)對不同類型的文本和語篇，即單模態(tài)或多模態(tài)、線性或非線性、基于紙質(zhì)或屏幕。把“識讀”（Iiteracy）的概念拓展為“多元識讀”（muhiliteracy）也就意味著識讀包括語言本身在內(nèi)的多模態(tài)意義表征將是識讀教育的重點。Duncum認為，識讀是指運用交流模式而獲得意義，多元識讀是指交互運用不同交流模式而獲得意義?！岸嘣R讀意味著培養(yǎng)發(fā)展功能性的、視覺的和多模態(tài)的識讀，以及多語意識、批判性思維和數(shù)字能力”。多元識讀概念的提出是基于當(dāng)前全球教育和社會背景的兩個關(guān)鍵前提：一是人們交際方式和表意手段的多元化，包括大眾傳媒、多媒體和電子超媒體；二是全球化使文化和語言多元的重要性不斷增長。多元識讀理論認為傳統(tǒng)的意義構(gòu)建理論只是基于語言這種單一模態(tài)之上，而這種理解一直“錯誤”地闡釋了人類符號過程的根本特征。多元識讀關(guān)注的是多種模態(tài)協(xié)同表征意義，以及語篇形式的多樣化，它融合了包含語言、視覺、聽覺、姿態(tài)、空間各種模態(tài)，能加強人們對語言和文化的認同。為滿足交際的需要，識讀者需要具備批判性地解構(gòu)和建構(gòu)各種多模態(tài)語篇的能力，這通常涉及社會責(zé)任和社會交互。多元識讀對意義的生成進行了重新思考，強調(diào)意義構(gòu)建是一種主動和動態(tài)的設(shè)計過程。多元識讀能力是動態(tài)發(fā)展的，包括視覺識讀能力、媒體識讀能力、文化識讀能力、數(shù)字識讀能力、批判性識讀能力以及后現(xiàn)代識讀能力（postmodern literacy），其中，視覺識讀能力是拓展多元識讀能力的基礎(chǔ)。

三、視覺識讀及其策略

（一）視覺識讀

對于文本識讀而言，讀與寫的能力是必要的，但處理視覺圖像并構(gòu)建意義的能力對視覺識讀同樣至關(guān)重要。Anthony Pennings給了視覺識讀（visualliteracy）一個更具體的定義，認為視覺識讀是一個新興的研究領(lǐng)域，涉及我們可以看到什么以及如何解讀我們所看到的。它涵蓋系列學(xué)科，包括研究視覺感知的物理過程、利用技術(shù)表征視覺意象和研發(fā)解讀和理解視覺所觀的策略。Hobbs認為literacy是指以多種方式獲取、分析、評價和溝通信息的能力。基于Hobbs對literacy的定義，Chauvin指出“視覺識讀是以多元的方式獲取，是分析、評價和交流信息的能力，是對視覺圖像的認知加工”。這里的視覺圖像可能包括身體語言、運動、舞蹈、二維和三維藝術(shù)作品、照片和剪貼畫、電影和視頻、博物館的展品、展覽、廣告、有插圖的書面或口頭的話語、建筑、超媒體和可視的現(xiàn)實經(jīng)驗，等等。endprint

那么視覺識讀與另一個概念媒體識讀（medialiteracy）有何異同？Shepherd認為消費者在表意的過程中能與媒介信息進行互動。因此“媒介識讀就是對傳播媒介的已知的批判性理解，是對媒體制作過程中涉及的技巧、技術(shù)和機構(gòu)的檢查，是一種批判性分析媒體信息的能力，是對受眾利用媒體信息表達意義的認可”。由此我們可以看出，媒體識讀主要集中在三個方面：傳播媒介，受眾如何、為何構(gòu)建和消費信息。

從這些討論中我們可以看到，媒體識讀和視覺識讀關(guān)注的都是信息或意義建構(gòu)。媒介識讀強調(diào)的是傳播媒介，這種傳媒可以是諸如電視、雜志等視覺媒體，也可以是視覺經(jīng)驗之外的，如收音機和錄音機。而視覺識讀主要集中在符號層面上的信息或意義建構(gòu)，利用圖像表意是視覺識讀的核心構(gòu)件。技術(shù)進步使得普通人越來越成為專業(yè)的視覺設(shè)計者，例如，利用PS圖像處理軟件就可以根據(jù)表意需要去改變一個圖像，可見通過視覺圖像表達意義已不再是藝術(shù)家們專利。值得注意的是，我們一直重視語言能力的培養(yǎng)，卻沒有意識到視覺能力實際上是先于語言能力的，語言的發(fā)展與視覺能力密不可分。因為“我們對世界的初次體驗，我們表達我們的需求，樂趣，偏好和恐懼，都在很大程度上依賴于我們所看到的”。

（二）視覺識讀策略

通過對現(xiàn)有知識的整合，以及恰當(dāng)?shù)牟呗赃\用，多模態(tài)語篇的讀者可以促進、監(jiān)督、協(xié)調(diào)并保持對視覺符號的綜合理解。在分析文藝復(fù)興時期的藝術(shù)主題時，藝術(shù)史學(xué)家和批評家潘諾夫斯基發(fā)展起來一種跨學(xué)科的圖像解釋理論，即圖像學(xué)。他認為圖像是特定時期歷史文化的象征形式。潘諾夫斯基提出可通過三個層次對圖像的主題及意義進行解讀：第一，前圖像志分析，關(guān)注的是作品的自然和外顯意義。主要涉及識別作品的視覺構(gòu)建成分。第二，圖像志層次，關(guān)注的是作品的傳統(tǒng)和內(nèi)隱意義。讀者需要根據(jù)已有的知識和經(jīng)驗，解釋作品的隱含意義。第三，圖像學(xué)層次，主要關(guān)注圖像在特定的社會、文化、政治和歷史背景下的意識形態(tài)意義。認為解釋者要依據(jù)對人類心靈基本傾向的把握，結(jié)合文化哲學(xué)知識，解釋作品的文化象征意義。潘諾夫斯基開拓了圖像的意義研究的跨學(xué)科思路。Serafini則提出一個解讀視覺符號的NMI（Noticing-Meanings-Implication）理論框架，認為解讀視覺符號應(yīng)該遵循“注意—卷義—內(nèi)涵”的思路?；谏鲜隼碚?，我們提出了多模態(tài)語篇的視覺識讀策略。

1.元識讀策略

元識讀策略就是多模態(tài)語篇的讀者對多模態(tài)共同參與意義構(gòu)建的自我意識，是對視覺識讀進行自我評價、監(jiān)控和調(diào)節(jié)的過程。多模態(tài)語篇中的以圖像為代表的視覺模態(tài)不再是裝飾和從屬性的，而是越來越多地參與對世界的表征和意義構(gòu)建，甚至超越曾經(jīng)主導(dǎo)的文字模態(tài)。視覺符號資源具有與文字符號不同的意義潛勢，但它們耦合互補，協(xié)同表意，共同參與整體意義構(gòu)建和信息傳遞。元識讀策略有助于讀者批判性地識讀多模態(tài)語篇的結(jié)構(gòu)和創(chuàng)作者用以表意的模態(tài)構(gòu)件，并不斷評價、監(jiān)控和調(diào)整識讀策略，最終完成對多模態(tài)語篇綜合意義的完整解讀。

2.感知策略

感知策略關(guān)注的是視覺符號資源的表面和外顯內(nèi)容，是讀者多模態(tài)語篇的視覺和設(shè)計成分（如模式、線條、形狀、色彩、版式、結(jié)構(gòu)等）的注意和感知。多模態(tài)語篇的讀者應(yīng)具備一些構(gòu)圖設(shè)計、排版印刷等的基本知識，要能辨別出多模態(tài)語篇的不同組成構(gòu)件，特別是視覺和設(shè)計成分，要能注意到它們的表意存在，這是一種需要不斷增強的視覺能力（visual competence）。Monroe Beardsley認為“圖像同時是兩種東西，它是一種設(shè)計，也是某物的摹畫”。也就是說，圖像首先是進入視線的一種視覺體驗，然后才是某物的表征。這種視覺體驗就是對圖像及易被忽略的設(shè)計成分的視覺感知，意識到它們也是語篇創(chuàng)作者表達意義的重要組成部分。比如，對于含有圖像的多模態(tài)語篇，讀者可以自問：從圖像中可以看到什么？或者說圖像有哪些構(gòu)成部分？圖像的設(shè)計版式和主導(dǎo)色彩是什么？文本在圖像的什么位置？如何排列？使用何種字體？有沒有不合常規(guī)和凸顯的部分？圖像有無框線？有無留白？構(gòu)圖視角如何？等等。

對視覺圖像和設(shè)計成分的注意和感知是識讀多模態(tài)語篇的基礎(chǔ)，因為讀者不可能對注意不到的成分進行解讀。當(dāng)然，這種注意和感知是有選擇的，并受制于識讀者的目的和知識經(jīng)驗。語篇創(chuàng)作者借助于表意的視覺構(gòu)件，在很多情況下并不等同于識讀者的視覺體驗，但這正說明了視覺能力提高和視覺識讀策略運用的必要性。

3.分析策略

分析策略是多模態(tài)語篇視覺識讀的關(guān)鍵，其關(guān)注的是多模態(tài)語篇的視覺及其設(shè)計成分的意義表征。從符號學(xué)角度看，對多模態(tài)語篇的視覺和設(shè)計成分的注意和感知是一種從視覺模態(tài)向語言模態(tài)的轉(zhuǎn)換行為，是識讀行為的開始。圖像和設(shè)計成分之所以能被解讀是因為語篇創(chuàng)作者有意或無意地利用了具有意義潛勢的符號資源來表達他們的創(chuàng)作意圖。圖像、色彩、字體等不僅是不同的符號資源，它們的表意方式也不同，視覺圖像主要依賴于空間構(gòu)圖，而對于文本、音樂，時間順序則很重要。分析策略就是解構(gòu)分析這些符號資源，解讀這些意義潛勢，從而理解語篇中各種成分“合奏”的整體意義。Kress和van Leeuwen的視覺語法為讀者提供了識讀視覺圖像的不同視角。比如，圖像的前景和背景中都有哪些物體，都意味著什么？為何某一成分大而凸顯？不同的色彩和字體，圖像中的留白有怎樣的特殊含義？圖像有無框線在表意上有何不同？畫面的視點是平視、俯視還是仰視，這意味著什么？為何某一成分反復(fù)出現(xiàn)？通過光、線、色彩的綜合運用，創(chuàng)作者要表達何種意圖？圖像與文本的排列有何含義？等等。

理解不同視覺成分的相互關(guān)系以及它們在特定文化中的意義潛勢是分析策略的核心。分析這些成分的過程是語篇識讀者基于感知的意義構(gòu)建過程。其構(gòu)建的意義能否與創(chuàng)作者的初衷吻合還與識讀者的知識背景相關(guān)，所謂“一千個讀者眼中就有一千個哈姆雷特”是對純文本模態(tài)的不同解讀，多模態(tài)語篇的識讀更是如此。endprint

4.社會文化策略

Scott認為“圖像不僅僅是類似的視覺感知，而是在某一特定的文化習(xí)俗中構(gòu)建的具有符號意義的藝術(shù)品”。因此要全面地理解圖像的意義表征，識讀者還必須考慮相關(guān)的社會意義系統(tǒng)，也就是說，不僅要考慮圖像內(nèi)部各視覺和設(shè)計成分如何協(xié)同表意，同時還要考慮圖像之外的社會、文化、科學(xué)、生態(tài)和政治背景。因為圖像、聲音等符號和語言一樣對社會現(xiàn)實和心理現(xiàn)實既具有復(fù)制作用，又具有重新建構(gòu)的作用?！疤剿鲌D像的意義，要意識到圖像是動態(tài)的社會權(quán)利和意識形態(tài)的產(chǎn)物……圖像是文化的一種重要手段，社會意識形態(tài)通過圖像而產(chǎn)生，并在圖像中得以體現(xiàn)?！盧ose談到，“社會科學(xué)中‘文化轉(zhuǎn)向（the cultural turn）的主要目的之一就是要說明社會階層并非自然而是構(gòu)建而成的，而這種構(gòu)建可采取視覺的形式?！崩?，玫瑰和十字形狀的視覺符號，在多數(shù)的社會文化語境下，分別標示著愛和基督教價值觀；豎形的條狀物則暗示著缺乏身或心的自由和空間。紅顏色在西方文化語境中意味著生氣或暴力，而在中國則是喜慶的象征。中國傳統(tǒng)文化中龍的形象與西方文化中的dragon也有很大的區(qū)別，例如在中國，龍的視覺形象代表皇權(quán)與吉祥，有騰飛、振奮、開拓、變化等寓意，在基督教文化中，dragon則是怪獸的形象，代表邪惡、兇殘，一些別有用心的西方政客由于害怕中國的崛起，常常利用中國人對龍的喜愛，借用西方龍的外形丑化中國的形象，宣揚所謂的“中國威脅論”。這些視覺符號都是在特定的社會文化中構(gòu)建而成，所以必須回到相應(yīng)的社會文化中加以解讀。

對多模態(tài)語篇的識讀不僅要理解圖像、文本和設(shè)計成分表達的是什么（what），更要理解這些成分是如何（how）、為何（why）被創(chuàng)作者用來表達意義。因此超越語篇本身而在一個更大的社會文化視域內(nèi)理解其含義是多模態(tài)語篇識讀不可或缺的策略。

盡管這四種策略對于多模態(tài)語篇的識讀者來說，每一種都是必需的，然而每一種都不足以獨立地應(yīng)用于視覺識讀。因為它們并非是一種嚴格的層級結(jié)構(gòu)，而是以元識讀策略為中心，感知策略一分析策略一社會文化策略依次推進的旋轉(zhuǎn)結(jié)構(gòu)（見圖1）。它們相互影響，動態(tài)協(xié)同，有助于識讀者理性地應(yīng)對多模態(tài)語篇視覺圖像和設(shè)計成分的復(fù)雜性。但無論是對視覺圖像的注意感知，還是內(nèi)涵解讀，都不可避免地受到識讀者的已有知識、個人經(jīng)歷、社會文化歷史背景的影響。

四、結(jié)語

文化理論學(xué)家米歇爾曾指出，21世紀的問題就是圖像的問題。成功地識讀當(dāng)代社會各種多模態(tài)語篇中的視覺圖像和設(shè)計成分對識讀者來說是一種挑戰(zhàn)，這不僅需要人們了解相關(guān)的藝術(shù)、媒體和符號學(xué)理論，還需要學(xué)會運用適當(dāng)?shù)淖R讀策略，熟悉特定社會文化語境中各種符號資源的意義潛勢，不斷地拓展識讀視角。在由單模態(tài)文字為主導(dǎo)轉(zhuǎn)向多模態(tài)，尤其是以視覺多模態(tài)語篇為主導(dǎo)的后印刷時代，圖像的生產(chǎn)和傳播高效而便捷，人們對感性、直觀、即時、娛樂的視覺體驗青睞有加，如何“讀”圖，不再僅限于專業(yè)人士，而是普通的傳播受眾都應(yīng)具備的識讀技能。

責(zé)任編輯 祁麗華endprint