高心怡

（西安外國語大學(xué)英文學(xué)院 陜西 西安 710128）

隨著科學(xué)技術(shù)的發(fā)展，以單一語言為媒介傳遞信息、互通有無的交際模式開始轉(zhuǎn)變，語言、聲音、圖像等多種模態(tài)構(gòu)建的交流模式開始登上歷史舞臺[1]。系統(tǒng)功能語言學(xué)對翻譯問題的多維研究促進(jìn)了系統(tǒng)功能語言學(xué)理論的應(yīng)用與發(fā)展[2]。20世紀(jì)90年代以來，基于系統(tǒng)功能語言學(xué)發(fā)展而來的多模態(tài)話語分析開始廣受關(guān)注。多模態(tài)，即可以同時表達(dá)意義的兩個或者兩個以上的單模態(tài)[3]。畫冊作為一種多模態(tài)語篇，包含圖像與文字兩種模態(tài)，常見于教學(xué)、娛樂等實踐。作為一種圖文并茂的表達(dá)，畫冊易讀性強、受眾面廣，而且可以生動傳遞作者想要表達(dá)的藝術(shù)與文學(xué)思想，在傳遞社會價值方面起著不可忽視的作用。然而，在多數(shù)研究中，研究者經(jīng)常會忽視圖像發(fā)揮的作用，認(rèn)為圖像只是輔助語言文本的表達(dá)[4]。作為一種典型的多模態(tài)語篇，圖像和文字用自己特有的語法和方式共同構(gòu)建了畫冊的意義[5]。本文將對比及物系統(tǒng)和敘事圖像中的敘事過程來分析圖像和文字是如何共同構(gòu)建了概念意義。

一、及物性系統(tǒng)：語言與圖像

系統(tǒng)功能語言學(xué)派把語言可以實現(xiàn)的意義分為三種，即概念意義、人際意義和語篇意義。概念意義是語言可以反映主客觀世界中人、物、時間以及發(fā)生的事情等，由及物性、語態(tài)和歸一度構(gòu)成。及物系統(tǒng)目的在于在語言中再現(xiàn)人的社會與心理經(jīng)歷，包含了過程、參與者和環(huán)境成分三大語義范疇。而其中最重要的過程分為：物質(zhì)過程、行為過程、言語過程、心理過程、關(guān)系過程、存在過程。物質(zhì)過程是做某件事情的過程，一般包含三個成分：動作者、動態(tài)動詞（吃、喝、看等動詞）、動作目標(biāo)。邏輯主語和目標(biāo)一般為名詞組成[6]80。心理過程分為情感過程、感知過程和認(rèn)知過程，與視覺語法中的心理過程基本一致。英文中表達(dá)情感過程的動詞有：like、hate；表達(dá)感知過程的動詞：look、hear；表達(dá)認(rèn)知過程的動詞：know、trust。心理過程一般為兩個參與者：感覺者和現(xiàn)象。關(guān)系過程是反映事物間存在何種關(guān)系的過程。關(guān)系過程分為歸屬和識別。歸屬類指的是事物具備的特性，識別類指一種事物是另一種事物的認(rèn)同。行為過程指生理活動過程，如：哭笑、呼吸等，行為過程一般只有一個參加者即行為者，該行為者一般為人；言語過程是通過說話從而交流信息的過程，常用動詞包括：說、曰、講、告訴等。言語過程包含三個成分，即講話者、受話者和講話內(nèi)容。講話者即發(fā)出指令的一方，可以是人，也可以非人。受話者即接收信息的一方，可作為參與者出現(xiàn)。講話內(nèi)容即該言語過程所傳遞的信息。存在過程表示有某物存在的過程[6]80，在英語里使用be、exist等動詞。漢語中可表現(xiàn)為有、是等動詞的用法。每個存在過程中包含一個存在物。

Kress&van Leeuwen的視覺圖像語法由系統(tǒng)功能語言學(xué)發(fā)展而來。在圖像的及物性系統(tǒng)中，Kress&van Leeuwen將圖像分為敘事圖像和概念圖像。敘事圖像通過矢量的連接傳遞了動作或者事情，概念圖像則是本質(zhì)與存在。敘事圖像包含敘事過程，根據(jù)載體的種類和參與主體的數(shù)量和種類分為動作過程、反應(yīng)過程、言語過程、心理過程、循環(huán)過程[7]。動作過程包括行動者，行動者通常通過規(guī)模、畫面中的位置、色彩構(gòu)成等成為最突出的參與者。反應(yīng)過程是向量由一個或者多個參與者的視線方向構(gòu)成，包含參與者和現(xiàn)象，經(jīng)常通過參與者的瞳孔和面部表情體現(xiàn)。言語過程和心理過程常見于連環(huán)畫中的特殊向量，常通過一個反映者表現(xiàn)出來。循環(huán)過程為一個事務(wù)流程鏈，如水循環(huán)示意圖等。

二、楊永青《琵琶行》畫冊圖文關(guān)系分析

本文選取的《琵琶行》畫冊由楊永青先生執(zhí)筆，1994年出版，畫冊中若干詩對應(yīng)一幅圖畫，并配有詩句注解。

1.物質(zhì)過程

物質(zhì)過程通常與動作過程類似，兩者?？梢韵鄬?yīng)或者相轉(zhuǎn)換，但是在某些特定情境下，存在圖文關(guān)系。

“千呼萬喚始出來，猶抱琵琶半遮面”這句話描寫了琵琶女的出場這一物質(zhì)過程，意為“琵琶女在眾賓客的呼喚中走出來，但她仍然抱著琵琶半遮著臉”。本小句中動態(tài)動詞為“出來”，動作者為琵琶女，沒有目標(biāo)，是主動語態(tài)。在敘事圖像中，我們可以看到琵琶女抱著琵琶遮臉的場景，女子、琵琶、遮面等在圖像中都存在對應(yīng)物且琵琶女這一形象在畫面最中央，是動作過程中最突出的行動者。除此之外，文字和圖像并不是一一對應(yīng)的關(guān)系。文字通過動態(tài)動詞使用、環(huán)境成分可以表達(dá)出琵琶女在眾人翹首企盼下走出的過程，敘事圖像卻因為圖片靜態(tài)的緣故不能描述動態(tài)的過程。在這一場景里，文字傳達(dá)的意義超過了圖像，形成了圖文互補關(guān)系。“低眉信手續(xù)續(xù)彈，說盡心中無限事。輕攏慢捻抹復(fù)挑，初為《霓裳》后《六幺》”一句，文字傳達(dá)的意義同樣超過了圖像，本小句中動態(tài)動詞為輕攏慢捻抹復(fù)挑，動作者為琵琶女，目標(biāo)為“初為《霓裳》后《六幺》”。而圖像中僅有琵琶女背身彈琵琶的場面，即對應(yīng)詩句里“低眉續(xù)續(xù)彈”這一低著頭彈奏琵琶的過程，但是敘事圖像無法體現(xiàn)信手彈即隨意彈奏的過程，也無法看到琵琶女彈奏琵琶的各種指法，即本應(yīng)是最重要的行動者琵琶女并沒有在圖像中處于相匹配的地方，體現(xiàn)不出“輕攏慢捻抹復(fù)挑”這一詩句。此處，圖文形成了互補關(guān)系，文字能為圖像提供補充。

2.心理過程

《琵琶行》中主要以表達(dá)情感過程和感知過程的文本為主，表達(dá)情感的動詞有：“妒”“嘆息”等，所對應(yīng)的文本為“妝成每被秋娘妒”“我聞琵琶已嘆息”等。以小句“曲罷曾教善才服，妝成每被秋娘妒”為例，為便于分析，我們將倒裝句還原為主動句語序，其正確語序應(yīng)為“曲罷善才曾服，妝成秋娘每妒”，這句話是指琵琶女技藝高超讓藝術(shù)大師佩服、姿容昳美讓歌姬舞姬嫉妒。情感動詞為“服”與“妒”，感覺者為“善才”和“秋娘”，現(xiàn)象為“曲罷”和“妝成”。本小句的畫面展現(xiàn)出琵琶女抱著琵琶，旁邊有一位“善才”和兩位“秋娘”。但是圖像未采取任何有效成分例如氣泡框等體現(xiàn)“服”和“妒”這兩個情感動詞，畫面中只能表達(dá)出感覺者這一成分。在這一程度上，文字意義大于了圖像意義，形成了圖文互補關(guān)系。表達(dá)感知的動詞有“見”，其對應(yīng)的詩句為“唯見江心秋月白”，這句話表達(dá)了作者及朋友被琵琶女的高超技藝所折服，感覺者是作者和他的朋友，現(xiàn)象是他們所看到的風(fēng)景。其對應(yīng)的敘事圖像，首先在圖中，我們可以看到“江心”“秋月”都有相對應(yīng)的成分，但是并沒有感覺者的成分的出現(xiàn)。其次，與上一案例所對應(yīng)的文本相似，敘事圖像只能展現(xiàn)出一幅江景圖，即眼中所見的真實存在的事物，而無法表達(dá)“見”這個感知動詞，由此可見，文字傳遞的意義仍然大于敘事圖像傳遞的意義，本小句也同樣形成了圖文互補關(guān)系。

以感知動詞和情感動詞的兩小句為例，我們可以推斷出在大多數(shù)只展現(xiàn)畫面而未在畫面中增加其他可以表征動詞的敘事圖像很難完全展現(xiàn)一個完整的心理過程。圖像不同于過程，其可以借助色彩、構(gòu)圖等從視覺上對欣賞者進(jìn)行沖擊，而很難像語言一樣將完全的心理活動或心理過程傳遞出來。

3.關(guān)系過程

在環(huán)境式歸屬類關(guān)系過程“十三學(xué)得琵琶成”一小句中，屬性為“十三”、載體為省略的主語琵琶女、關(guān)系動詞為“學(xué)得”。同樣，識別類關(guān)系過程小句“初為《霓裳》后《六幺》”意為：彈奏的樂曲先是《霓裳羽衣曲》再是《六幺》，其中“霓裳”和“六幺”為識別者，樂曲為被識別者。通常來說，語言和圖像皆可以表達(dá)關(guān)系過程。與視覺語法中的循環(huán)過程類似，圖像可以采用樹狀圖、關(guān)系圖等方式表達(dá)。然而在畫冊中，考慮到圖像的藝術(shù)性及美觀性的表達(dá)，本小句中的圖像并沒有采取較為嚴(yán)謹(jǐn)?shù)年P(guān)系表達(dá)法，故在圖像中并不能表達(dá)出原文應(yīng)有的關(guān)系過程。在本小句中，仍然是文字傳遞的意義大于圖像。

4.行為過程

行為過程與視覺語法中的動作過程類似。而行為過程與物質(zhì)過程的區(qū)分點在于行為是否與生理活動有關(guān)，動作過程則更關(guān)注色彩與圖像。行為過程也可以為兩個行為者。在《琵琶行》中，“夜深忽夢少年事，夢啼妝淚紅闌干”一句即為行為過程，其表達(dá)了琵琶女對自己命運多舛的感慨與無奈。其行為者是被省略的主語琵琶女，“夢”“啼”為過程。我們可以清晰看到圖畫中一女子在哭泣，除此之外，還有被褥、屋頂?shù)刃畔?，這些信息構(gòu)建了琵琶女哭泣的時間（晚上醒來）、地點（床鋪上），與文字所表達(dá)的意義一致，圖文之間傳遞的意義相同?！拔衣勁靡褔@息，又聞此語重唧唧”一小句中也存在類似的行為過程，其行為者為作者本人，“嘆息”是過程，“唧唧”意為感嘆，也可看作過程。該小句傳遞了作者對琵琶女的琵琶聲和故事的同情及由此聯(lián)想到自己被貶謫的無奈。然而本小句的敘事圖像其實并沒有描繪出作者的嘆息或者唧唧，畫像中只有作者拱手，琵琶女行禮的場景。故文字傳遞的意義大于圖像，形成了圖文互補關(guān)系。

5.言語過程

視覺語法中同樣也存在言語過程，漢語作為語法結(jié)構(gòu)較為松散的語言，往往需要聯(lián)系上下文分析各個成分。在視覺語法中的言語過程常見于連環(huán)畫中的特殊向量，即一個對話框，也可以說從說話者的嘴中發(fā)出的絲帶。如“尋聲暗問彈者誰，琵琶聲停欲語遲”一小句中，我們可以很清晰地分析出講話者是作者，聯(lián)系上一句“忽聞水上琵琶聲，主人忘歸客不發(fā)”可以分析出受話者為水上發(fā)出琵琶聲的人，講話內(nèi)容即為“彈者誰”。對應(yīng)至本小句的敘事圖像，圖像中有作者和他朋友，琵琶女船上的船夫，雖然圖像包含了講話者和受話者，但是并不包含講話內(nèi)容，無法構(gòu)成一個完整的言語過程。相較之下，文字傳遞的意義大于了圖像傳遞的意義，形成了圖文互補關(guān)系。在小句“自言本是京城女，家在蝦蟆陵下住”中，講話者為琵琶女，聯(lián)系上下文受話者為作者及他的朋友，講話內(nèi)容為琵琶女自述的身世。在圖中我們可以看到講話者琵琶女、受話者作者和他的朋友都清晰地表達(dá)出來，而講話內(nèi)容并沒有傳遞出來。同樣，文字傳遞的意義大于了圖像。

6.存在過程

例如小句“住近湓江地低濕，黃蘆苦竹繞宅生”可以譯為“我房子的周圍生長著很多黃蘆苦竹”，其存在物即是黃蘆苦竹等雜草，圍繞著房屋生長構(gòu)成了一個完整的存在過程。在本小句的敘事圖像可以看到，圖像中不僅有蘆葦、竹子的對應(yīng)物，還有作者本身、石頭等其他成分，敘事圖像的成分大于了文本中包含的成分，其傳遞的意義大于了文字所傳遞的意義，同樣形成了圖文互補關(guān)系。再例如小句“豈無山歌與村笛，嘔啞嘲哳難為聽”一小句，表達(dá)存在的動詞為“在”，存在物為山歌、村笛。但由于圖像本身屬性的限制，其敘事圖像無法傳遞出聲音，例如漢語中有“吱吱”，英語中有g(shù)iggle等擬聲詞，語言可以很形象地傳遞出對聲音的模擬，但是圖像并不具備這種功能。所以在本圖中圖像無法表達(dá)出嘔啞嘲哳的聲音，且圖中也不存在“山歌”“村笛”等文本中存在的成分，只是運用白描的畫面構(gòu)建出了一種氛圍感，但其并不能表現(xiàn)這種存在過程。故本小句的文字意義遠(yuǎn)大于圖像意義，甚至可以說文字占據(jù)其傳遞意義功能的絕大部分，而圖像只是在此基礎(chǔ)上進(jìn)行了一定的補充。

三、結(jié)語

本文在及物性范圍內(nèi)，以社會符號學(xué)視角通過對比系統(tǒng)功能語言學(xué)的過程和視覺語法的敘事圖像描述了圖文關(guān)系。由此可見，在多模態(tài)語篇畫冊信息的傳遞中，圖像和文字符號有著多種多樣的關(guān)系，不應(yīng)忽略圖像符號而只把它看作文字符號的附庸。兩者在構(gòu)建概念意義中同樣起著不可忽視的作用。