電子繪本中的數(shù)字?jǐn)⑹卵芯?/h1>
2018-01-17 03:10徐志武
出版科學(xué) 2018年6期
徐志武
[摘 要] 論述電子繪本中數(shù)字?jǐn)⑹碌牟襟E、內(nèi)容、形式以及互動(dòng)模式。首先，借鑒喬·蘭伯特（Joe Lambert）的觀點(diǎn)，將數(shù)字?jǐn)⑹職w納為確定故事主題、情感、轉(zhuǎn)折點(diǎn)，設(shè)計(jì)畫面、聲音并將其組合，分享給讀者7個(gè)步驟。其次，探究數(shù)字?jǐn)⑹聝?nèi)容（圖片、音頻、聲畫融合）和敘事形式（動(dòng)態(tài)敘事）及其開(kāi)發(fā)方法。最后，從環(huán)境、數(shù)據(jù)驅(qū)動(dòng)和語(yǔ)言3方面分析電子繪本敘事中的互動(dòng)模式。
[關(guān)鍵詞] 電子繪本 數(shù)字?jǐn)⑹?互動(dòng)敘事 數(shù)字出版物
[中圖分類號(hào)] G237[文獻(xiàn)標(biāo)識(shí)碼] A[文章編號(hào)] 1009-5853 （2018） 06-0094-05
Digital Storytelling in Electronic Picture Books
Xu Zhiwu
（School of Literature， South China Normal University， Guangzhou， 510006）
[Abstract] Mainly discusses digital storytelling of electronic picture books from the perspectives of digital narrative steps， content and forms， interactive modes. Firstly， according to Joe Lamberts viewpoint， digital narrative can be divided into seven main steps， which include determining the theme， emotion and narrative turning point， designing the picture， sound and their combination， and then sharing them with readers. Secondly， explores the development methods of digital narrative content （picture， audio， the combination of sound and picture） and narrative forms （dynamic narrative）. Finally， discusses the interactive modes of electronic picture books from three aspects： environment， data driven and language interaction.
[Key words] Electronic picture books Digital Storytelling Interactive narrative Digital publication
數(shù)字?jǐn)⑹拢―igital Storytelling，DS）指敘事者改變線性和平面敘事方式，運(yùn)用數(shù)字工具將靜態(tài)和動(dòng)態(tài)的圖像、音頻、視頻、文本等要素結(jié)合起來(lái)，以非線性或互動(dòng)形式講述故事的新實(shí)踐[1]。電子繪本是幫助兒童培養(yǎng)學(xué)識(shí)、構(gòu)建價(jià)值觀的重要工具，是一種重要的數(shù)字出版物形式。電子繪本中的敘事方式較傳統(tǒng)繪本發(fā)生了很大變化。但是，目前學(xué)界對(duì)此關(guān)注不多。因此，本文主要從電子繪本的敘事步驟、敘事內(nèi)容和形式、敘事中的互動(dòng)模式3方面展開(kāi)探討。
1 敘事步驟
2012年，美國(guó)故事中心（Story Center）執(zhí)行主任喬·蘭伯特（Joe Lambert）提出數(shù)字?jǐn)⑹碌?步驟[2]。電子繪本敘事亦可借鑒。
1.1 在敘事前期，確定故事主題、情感和轉(zhuǎn)折點(diǎn)
電子繪本敘事的前期包含3個(gè)步驟。首先，確定主題是電子繪本敘事的基礎(chǔ)。繪本主題應(yīng)具有廣泛（Extensive）、獨(dú)特（Unique）、有力（Powerful）等特點(diǎn)[3]。具體而言，故事主題應(yīng)來(lái)自生活的方方面面，以幫助兒童讀者了解和認(rèn)識(shí)世界。同時(shí)，故事應(yīng)讓小讀者見(jiàn)證故事角色在面對(duì)矛盾或困難時(shí)內(nèi)心經(jīng)歷的掙扎及掙扎后的變化，從而實(shí)現(xiàn)兒童讀者價(jià)值觀引導(dǎo)及情商培養(yǎng)等功能。其次，構(gòu)建故事的整體情感基調(diào)。為此，敘事者需挑出最令自己感動(dòng)的故事情節(jié)，將故事角色融入其中進(jìn)行情感加工，并識(shí)別兒童讀者在閱讀故事時(shí)及閱讀后可能產(chǎn)生的情感體驗(yàn)。敘事者需重點(diǎn)考慮角色面對(duì)不同情境時(shí)的情感反應(yīng)，并將其與自我的情感分開(kāi)。應(yīng)細(xì)膩地描繪情感，如交待故事角色感到快樂(lè)的原因以及當(dāng)時(shí)的表情等，并將情感與環(huán)境因素相結(jié)合，如用灰暗暗示悲傷、陽(yáng)光表示歡快，等等。這樣兒童讀者更容易體會(huì)敘事者所要傳達(dá)的感情[4]。再次，厘清敘事轉(zhuǎn)折，使其承載故事主旨。為厘清敘事轉(zhuǎn)折，敘事者需要思考故事情節(jié)或故事角色發(fā)生變化的時(shí)刻。角色在何時(shí)及何種情況下意識(shí)到自我改變？如果有多個(gè)轉(zhuǎn)折，其分別傳遞何種含義[5]？ 例如，電子繪本《小刺猬亨利》（Henry the Hedgehog）設(shè)置了兩個(gè)轉(zhuǎn)折：一是兔子、蝴蝶、蜜蜂對(duì)刺猬由嫌棄轉(zhuǎn)為喜歡;二是刺猬由孤獨(dú)到幸福。轉(zhuǎn)折發(fā)生在刺猬幫兔子趕走狐貍，從蜘蛛網(wǎng)上解救蝴蝶，以及幫蜜蜂傳播花種之后。其中分別折射出善待朋友與樂(lè)于助人的價(jià)值觀[6]。
1.2 在敘事中后期，確定、組織畫面和聲音并分享給讀者
在電子繪本敘事的中后期，需確定、組織畫面和聲音，并將之傳達(dá)給讀者。敘事過(guò)程中，為確定敘事畫面，敘事者需思考當(dāng)兒童讀者在閱讀故事時(shí)出現(xiàn)在腦海中的第一畫面是什么？從而決定該使用什么畫面？為什么是該畫面？它傳遞的情感是什么？它的寓意是明確還是具體？它表達(dá)單層還是多層含義？如果是多層含義，具體含義又是哪些[7]？其次，電子繪本需確定故事中的聲音。為此，敘事者要構(gòu)建滿足敘事目標(biāo)且條理分明的敘事計(jì)劃和結(jié)構(gòu)，并明確音頻在敘事中承擔(dān)的功能。一般來(lái)說(shuō)，聲音在電子繪本中主要承擔(dān)兩大功能：一是敘事功能，包括直接敘事和潛意識(shí)敘事。前者多通過(guò)對(duì)話或敘述方式講述故事內(nèi)容;后者則潛在地為故事服務(wù)，如敲門聲、電話聲等。二是語(yǔ)法功能，即聲音敘事風(fēng)格在頁(yè)面切換過(guò)程中保持不變，作為內(nèi)容銜接要素[8]。依據(jù)敘事功能，可確定所需音頻內(nèi)容，并做好收集聲音和音樂(lè)的準(zhǔn)備[9]。當(dāng)故事素材準(zhǔn)備好后，需要將故事組合起來(lái)。在組織結(jié)構(gòu)上，可以采用跳脫時(shí)間順序或直接因果模式等非線性結(jié)構(gòu)。在組織視角上，可將洞悉全局的“他”者視角和限知局部的“我”者視角結(jié)合起來(lái)[10]。在敘事節(jié)奏上，由于兒童讀者的認(rèn)知水平不高，一開(kāi)始不可釋放太多信息，而是保持張力，緩慢釋放信息，以利于讀者理解。同時(shí)，可將故事的部分轉(zhuǎn)折或高潮放在開(kāi)頭，激起他們的閱讀興趣[11]。
最后，要將故事分享給讀者。在分享前，敘事者需反復(fù)審核敘事內(nèi)容，消除其中的錯(cuò)誤并確定故事內(nèi)容是否偏離當(dāng)初設(shè)想。分享后，敘事者可通過(guò)調(diào)查法、觀察法等多種方法收集讀者（包括父母和兒童）對(duì)電子繪本主題、內(nèi)容以及互動(dòng)的反饋，以便改進(jìn)。
2 敘事內(nèi)容與形式
在敘事內(nèi)容與形式上，電子繪本倚重圖片和音頻敘事，也強(qiáng)調(diào)聲畫融合敘事，同時(shí)更傾向于動(dòng)態(tài)敘事。
2.1 具有情感交流功能的敘事圖片
由于兒童閱讀能力有限，加之注意力持續(xù)的時(shí)間較短，所以圖片無(wú)疑需發(fā)揮情感交流功能以吸引讀者[12]。借鑒克萊爾·佩因特（Clare Painter）等人提出的閱讀社交關(guān)系理論，電子繪本圖片可通過(guò)視覺(jué)聚焦（Focalisation）敘事、情感（Affection）畫像敘事以及場(chǎng)景（Ambience）敘事發(fā)揮情感交流功能[13]。
第一，視覺(jué)聚焦敘事指依靠圖像中人、動(dòng)物或人格化客體的眼神吸引兒童參與敘事。它有兩種類型：一是接觸（Contact）敘事，即故事角色直接凝視讀者。它多營(yíng)造較嚴(yán)肅的氛圍，傳遞故事角色內(nèi)心失望、迷茫、無(wú)助等復(fù)雜情感。二是觀察（Observe）敘事，即故事角色目光不直接接觸讀者，而是通過(guò)廣而遠(yuǎn)的畫面視角將讀者獨(dú)立于故事外，使其自主觀察[14]。它傳遞的情感較少，主要靠環(huán)境烘托情感。從吸引效果看，接觸敘事用眼神的壓迫感招徠讀者，吸引效果優(yōu)于觀察敘事。
第二，情感畫像敘事指通過(guò)不同風(fēng)格的人物畫像吸引讀者并傳遞情感。它可以分為3種：一是簡(jiǎn)約風(fēng)格（minimalist style）。即圖像的線條、色彩和構(gòu)圖都較簡(jiǎn)單，如用圓或橢圓表示頭部，用點(diǎn)或小圈代替眼睛等，如圖1。這種風(fēng)格往往可最大限度描繪角色的情緒，也可用于發(fā)揮幽默的感覺(jué)。二是普通風(fēng)格（generic style）。即重點(diǎn)描繪角色的嘴部表情，如撅嘴或抿嘴等，如圖2。其具有倡導(dǎo)兒童讀者向畫面角色學(xué)習(xí)的潛在含義。三是自然風(fēng)格（naturalistic style）。即重點(diǎn)描繪實(shí)體人物的眼睛、皮膚和表情等細(xì)節(jié)，如圖3。它可突出角色內(nèi)心微妙的情感，更適用于培養(yǎng)兒童面對(duì)棘手問(wèn)題時(shí)的價(jià)值觀，如理解死亡等[15][16][17]。從吸引效果看，自然風(fēng)格有視覺(jué)壓迫感和強(qiáng)制意味，最具吸引力。普通風(fēng)格突出描繪臉部和嘴部表情，也有一定的視覺(jué)沖擊力，效果次之。簡(jiǎn)約風(fēng)格由于表情和整體較簡(jiǎn)單，吸引效果最弱。
第三，場(chǎng)景氛圍敘事指利用畫面中色彩的色相、純度和明度等要素吸引讀者。一般來(lái)說(shuō)，電子繪本整體場(chǎng)景氛圍應(yīng)是歡快積極的，以便向兒童傳達(dá)活躍、溫暖和熟悉的感覺(jué)。為達(dá)到這種效果，在色相上，電子繪本應(yīng)使用橙色、紅色、黃色及其組合形成的暖色調(diào);同時(shí)，如配上藍(lán)、綠、淡紫色等冷色調(diào)，則可以起到鎮(zhèn)靜和舒緩的效果[18]。在色彩純度上，電子繪本應(yīng)使用中高純度。因?yàn)榧兌雀叩纳拭髁疗G麗，更容易引起視覺(jué)興奮;而中純度色彩基調(diào)豐滿柔和，能使讀者保持長(zhǎng)時(shí)間注視[19]。在色彩明度上，電子繪本應(yīng)多采用紅色、綠色這些中間明度色相，以保護(hù)視力。
2.2 簡(jiǎn)單生動(dòng)的敘事音頻
在電子繪本的音頻敘事過(guò)程中，考慮到兒童讀者的理解和接受能力不強(qiáng)、注意力持續(xù)時(shí)間短等特點(diǎn)，音頻的敘事文本應(yīng)簡(jiǎn)短精練，少長(zhǎng)句、多短句。敘事者要表達(dá)清晰、語(yǔ)速緩慢、音調(diào)自然，而且還需具有獨(dú)自分飾或者與他人配合飾演一種或多種角色的能力。敘事者應(yīng)尊重小讀者，在敘述他人的故事時(shí)，仿佛自己是故事的親歷者，能富有情感地表達(dá)。此外，可在故事中添加生活中的真實(shí)音效，如汽車?guó)Q笛、鳥(niǎo)鳴、飛機(jī)轟鳴等。這些可幫助讀者建立空間位置感和現(xiàn)場(chǎng)感。如《古堡鬼鼠》第一節(jié)嵌入寒風(fēng)呼嘯聲，就生動(dòng)地襯托出故事發(fā)生當(dāng)晚的恐怖情形。此外，應(yīng)注重使用音樂(lè)，尤其是器樂(lè)，以改變敘事的情感基調(diào)并激起情感共鳴[20][21]。
2.3 自然真實(shí)的聲畫融合敘事
聲畫融合敘事是指電子繪本中的聲音和畫面協(xié)調(diào)統(tǒng)一，共同凸顯故事主題。它不僅可以增強(qiáng)閱讀的趣味性，還可以將兒童讀者從枯燥的“聽(tīng)書”中解放出來(lái)并助益理解[22]。電子繪本的聲畫融合敘事可通過(guò)聲畫同步敘事和聲畫對(duì)位敘事實(shí)現(xiàn)[23]。前者指聲音與畫面中的動(dòng)作、情感以及節(jié)奏等要素相一致，畫面真實(shí)、自然。如電子繪本《回家》中，故事角色對(duì)白時(shí)，畫面就配以故事角色嘴開(kāi)合、點(diǎn)頭等動(dòng)效，以增強(qiáng)真實(shí)感[24]。后者指電子繪本中聲音和畫面分別表達(dá)不同內(nèi)容，且各自以其特有的節(jié)奏獨(dú)立發(fā)展，但它們的最終目標(biāo)是從不同方面說(shuō)明故事主題[25]。聲畫對(duì)位敘事包括兩種類型：一種是聲畫彼此獨(dú)立，在兩條線上并行發(fā)展[26]。如在《小刺猬亨利》中，畫面展示小刺猬亨利正在睡覺(jué)的場(chǎng)景，而畫外音卻講述亨利因?yàn)樯砩系拇潭y以交到朋友的事實(shí)以及它渴望交到朋友的心理。雖然畫面和聲音各行其是，但其共同傳遞出小刺猬因沒(méi)有朋友而產(chǎn)生的孤獨(dú)、難過(guò)之情。二是聲畫對(duì)立，即聲音和畫面在情緒、氛圍、節(jié)奏等方面是完全相反的，通過(guò)對(duì)比敘事凸顯和深化故事主旨。如某個(gè)畫面中角色在思念它逝去的孩子，表情傷心落寞;這時(shí)畫面外傳來(lái)孩子歡樂(lè)的笑聲，那是它曾經(jīng)最幸福的時(shí)光。如此一喜一悲，凸顯出故事強(qiáng)烈的傷感情緒[27][28]。
2.4 生動(dòng)活潑的動(dòng)態(tài)敘事
動(dòng)態(tài)敘事主要指電子繪本中的人物、動(dòng)物或物體在讀者閱讀過(guò)程中出現(xiàn)簡(jiǎn)單的變化或位移效果。它可以變抽樣為形象，化靜態(tài)為動(dòng)態(tài)，易于兒童讀者理解和接受[29]。電子繪本的動(dòng)態(tài)敘事主要由動(dòng)態(tài)的故事角色和動(dòng)態(tài)的故事場(chǎng)景構(gòu)成。
首先，對(duì)于動(dòng)態(tài)故事角色，敘事者通常會(huì)運(yùn)用一些夸張但遵循真實(shí)生活的動(dòng)作形態(tài)來(lái)渲染故事角色眼睛、表情、頭部及四肢的變化，以創(chuàng)造出一種流暢且真實(shí)的視覺(jué)效果[30]。如《拔蘿卜》中，老婆婆、老爺爺和小孫女3人拉著葉子一起有節(jié)奏地往后移動(dòng)，生動(dòng)地體現(xiàn)出他們吃力的樣子。其次，動(dòng)態(tài)故事場(chǎng)景（指畫面背景）在敘事過(guò)程中也非常重要。動(dòng)態(tài)場(chǎng)景一般通過(guò)3種方式增強(qiáng)繪本的敘事效果。一是依靠色彩的動(dòng)態(tài)變化烘托敘事環(huán)境。如《我喜歡做我自己》中，通過(guò)燈光閃爍帶來(lái)的明暗對(duì)比，烘托出森林的神秘感和角色冒險(xiǎn)的緊張感 [31]。二是拓展敘事空間。在畫面中引入運(yùn)動(dòng)元素，打破書頁(yè)邊框和靜態(tài)畫面對(duì)敘事的限制，極大地拓展了繪本敘事的立體空間。如《神奇飛書》中，書本在靜態(tài)書架面前的橫向運(yùn)動(dòng)就充分體現(xiàn)了畫面的縱深感，極大增強(qiáng)了繪本的可觀賞性[32]。三是將生活中的場(chǎng)景融入到故事中，增強(qiáng)敘事的真實(shí)性。如《長(zhǎng)鼻子和長(zhǎng)尾巴》中，當(dāng)小象和小猴子睡覺(jué)時(shí)，讀者只要點(diǎn)擊床頭的臺(tái)燈，整個(gè)畫面就會(huì)暗下來(lái)，營(yíng)造關(guān)燈的真實(shí)感。
3 電子繪本敘事的互動(dòng)模式
互動(dòng)指電子繪本與讀者之間相互作用和相互影響的過(guò)程，它是區(qū)別電子繪本與傳統(tǒng)繪本的根本要素[33]。根據(jù)克里斯·克勞福德（Chris Crawford）的劃分，電子繪本互動(dòng)模式包括3種：環(huán)境互動(dòng)（environmental approaches）、數(shù)據(jù)驅(qū)動(dòng)互動(dòng)（data-driven strategies）及語(yǔ)言互動(dòng)（language-based approaches）[34]。
3.1 環(huán)境互動(dòng)模式
環(huán)境互動(dòng)模式是通過(guò)鼓勵(lì)用戶參與互動(dòng)系統(tǒng)，用自己的即時(shí)行動(dòng)串聯(lián)起故事情節(jié)的互動(dòng)模式[35]。常見(jiàn)的環(huán)境互動(dòng)模式有游戲互動(dòng)模式、觸感互動(dòng)模式、介質(zhì)互動(dòng)模式和增強(qiáng)現(xiàn)實(shí)互動(dòng)模式等[36]。
游戲互動(dòng)包括交互敘述（Interactive narration）和互動(dòng)敘事（Interactive narrative）兩種。前者要求用戶積極參與故事中的小游戲以實(shí)現(xiàn)敘事的連續(xù)性或完整性[37]。如《拯救了圣誕節(jié)的鐘表匠》（The Watchmaker）中，讀者可將界面下方彩色鐘表零件鑲嵌到灰色部位，以實(shí)現(xiàn)敘事的完整性[38]。后者往往由多條分支結(jié)構(gòu)組成，每條分支獨(dú)立發(fā)生發(fā)展，用戶可根據(jù)自己的偏好選擇敘事路徑。如探險(xiǎn)類游戲繪本中，游戲被分為經(jīng)典、冒險(xiǎn)和休閑3種模式，系統(tǒng)會(huì)根據(jù)讀者選擇跳轉(zhuǎn)頁(yè)碼[39]。在《丹雪和時(shí)間線WW1》（Timeline WW1 with Dan Snow）中，用戶可按不同時(shí)間線重溫一戰(zhàn)的圖片、音頻、視頻和地圖等[40]。
觸感互動(dòng)是基于讀者觸摸、點(diǎn)擊、按壓等動(dòng)作而產(chǎn)生的互動(dòng)[41]。這是目前電子繪本中最常用的互動(dòng)模式。如《暖陽(yáng)陽(yáng)的紅絲帶》中，讀者只要點(diǎn)擊畫面中的紅絲帶，紅絲帶就會(huì)自動(dòng)系到瓶口上;讀者點(diǎn)擊畫面中的瓶子，瓶子就會(huì)自動(dòng)跳到獾婆婆手上。口紅棒糖果出版社（Push Pop）推出的《我們的選擇》（Our Choices）中，當(dāng)讀者對(duì)著書中的風(fēng)車吹氣時(shí)，電力風(fēng)車就會(huì)自動(dòng)旋轉(zhuǎn)，并給畫面中的房子充電[42]?！遁p叩神奇樹(shù)》（Tap the Magic Tree）中，讀者只需要輕輕敲擊或者搖晃iPad，畫面中的樹(shù)葉就一片片飄落下來(lái)[43]。
介質(zhì)互動(dòng)是數(shù)字媒介和傳統(tǒng)媒介融合形成的互動(dòng)模式，它目前雖運(yùn)用得不多，但具有極強(qiáng)吸引力，市場(chǎng)前景廣闊。如《橋接書》（Bridging Book）便是一種在實(shí)體書中植入磁鐵，在平板電腦中植入數(shù)字羅盤的繪本形態(tài)。當(dāng)兩者按上下順序拼放在一起時(shí)，會(huì)呈現(xiàn)出完整的畫面效果。讀者如果翻動(dòng)實(shí)體書頁(yè)，電子書也會(huì)自動(dòng)翻頁(yè)[44]。
增強(qiáng)現(xiàn)實(shí)（Augment Reality，AR）互動(dòng)是通過(guò)計(jì)算機(jī)生成逼真的視、聽(tīng)、力、觸和動(dòng)等感覺(jué)，使用戶突破時(shí)間、空間等限制，在虛擬環(huán)境中體驗(yàn)“身臨其境”的互動(dòng)方式。如《科學(xué)跑出來(lái)》中，讀者只要在書中啟動(dòng)增強(qiáng)現(xiàn)實(shí)應(yīng)用程序，并將智能移動(dòng)設(shè)備的相機(jī)鏡頭對(duì)準(zhǔn)平攤的實(shí)體書，讀者便可體驗(yàn)暴龍?jiān)谧约铱蛷d行走，八大行星在手上轉(zhuǎn)動(dòng)，親手制造一個(gè)龍卷風(fēng)等驚喜[45]。
3.2 數(shù)據(jù)驅(qū)動(dòng)互動(dòng)模式和語(yǔ)言互動(dòng)模式
數(shù)據(jù)驅(qū)動(dòng)互動(dòng)要求敘事者首先建立“故事構(gòu)成要素”綜合數(shù)據(jù)庫(kù)。當(dāng)讀者發(fā)出互動(dòng)請(qǐng)求時(shí)，繪本可對(duì)讀者行為做出反應(yīng)并與之互動(dòng)。目前其在電子繪本中最具前景的實(shí)踐是人機(jī)對(duì)話。當(dāng)兒童讀者輸入想說(shuō)的內(nèi)容后，電子繪本數(shù)據(jù)庫(kù)會(huì)依據(jù)內(nèi)容輸出相應(yīng)答案。相較環(huán)境互動(dòng)模式，數(shù)據(jù)驅(qū)動(dòng)互動(dòng)模式最大的優(yōu)勢(shì)是內(nèi)容具有綜合性和普遍性。但它的不足是前期投入較大，因?yàn)椴粌H需要建立基于文本的開(kāi)放式交互敘事架構(gòu)，構(gòu)建更大的語(yǔ)料庫(kù)，還需要分析敘事內(nèi)容、改進(jìn)語(yǔ)義相似度并建構(gòu)實(shí)例驅(qū)動(dòng)的自適應(yīng)模型。目前，南加利福尼亞大學(xué)的創(chuàng)新技術(shù)項(xiàng)目小組正在開(kāi)展的數(shù)據(jù)驅(qū)動(dòng)的互動(dòng)敘事引擎（Data-driven Interactive Narrative Engine）課題，研究的正是這些關(guān)鍵技術(shù)問(wèn)題[46]。
在基于語(yǔ)言的互動(dòng)模式中，敘事系統(tǒng)能夠理解用戶某些特定的話語(yǔ)，并對(duì)其作出反應(yīng)。如在《心靈澆灌》（Mind Watering）中，讀者通過(guò)對(duì)iPad說(shuō)“行動(dòng)”（action）一詞發(fā)出命令，繪本便可自動(dòng)翻頁(yè)[47]。語(yǔ)言互動(dòng)模式往往結(jié)合游戲進(jìn)行敘事。如《杰克和仙豆》（Jack and the Beanstalk by Nosy Crow）為鼓勵(lì)讀者朗讀，將部分單詞標(biāo)紅，讀者朗讀正確以后，便可解救大房子中被困的動(dòng)物作為獎(jiǎng)勵(lì)[48]。
4結(jié) 語(yǔ)
電子繪本中的數(shù)字?jǐn)⑹虏粌H需要設(shè)計(jì)深入人心的故事情節(jié)，還需設(shè)計(jì)具有情感交流功能的敘事圖片和簡(jiǎn)單生動(dòng)的敘事音頻。在此基礎(chǔ)上，構(gòu)建生動(dòng)活潑的動(dòng)態(tài)敘事和協(xié)調(diào)統(tǒng)一的聲畫融合敘事。因此，電子繪本數(shù)字?jǐn)⑹碌年P(guān)鍵在于增加互動(dòng)中介（Interactive agency）功能，設(shè)計(jì)基于環(huán)境、數(shù)據(jù)及語(yǔ)言的多種互動(dòng)模式，使讀者參與其中，由單純接受者變?yōu)閿⑹聟⑴c者[49]。
注 釋
[1]徐麗芳，曾李.數(shù)字?jǐn)⑹屡c互動(dòng)數(shù)字?jǐn)⑹耓J].出版科學(xué)，2016，24（3）：96-101
[2][3][5][7][11][20]Joe Lambert. Digital Storytelling： Capturing Lives， Creating Community[M]. Routledge， 2012：53-69
[4]Wiki How. Adding Emotion to Your Own Story[EB/OL]. [2016-06-19].http：//www.wikihow.com/Add-Emotion-to-a-Story
[6]Nezhabooks. Henry the Hedgehog[OL].[2016-06-19]. http：//www.neumedias.com/intro/products.html#3434
[8]邵萍.大型電子游戲的數(shù)字?jǐn)⑹耓J]. 出版科學(xué)， 2016， 24（3）：106-109
[9]DisignLab[OL].[2016-07-29].https：//designlab.wisc.edu/audio-narrative
[10]敬鵬林. 非線性敘事：電影敘事范式的異變與擴(kuò)展[J]. 重慶郵電大學(xué)學(xué)報(bào)（社會(huì)科學(xué)版）， 2015， 27（4）：142-146
[12]Rose D. Meaning beyond the margins： learning to interact with books[J]. Semiotic Margins： reclaiming meaning， 2011： 177-209
[13][14][15]Painter C， Martin J R， Unsworth L. Reading Visual Narratives[M]. London： Equi-nox， 2012：15-46
[16]Welch A. The illustration of facial affect in childrens literature[R]. Sydney ：University of Sydney， 2005
[17]Tian P. Multimodal evaluation： sense and sensibility in Anthony Browne's picture books[D]. Sydney：University of Sydney 2011
[18]Warm Colors and Cool Colors[OL]. [2016-06-28].http：//interiordec.about.com/od/bedrooms/a/Bedroom-Paint-Colors.htm
[19]正確理解色彩的純度[OL]. [2016-06-28].http：//www.art456.com/st/1099232_1.html
[21]Audio Narrative Project： Wild Weekend[OL].[2016-06-28].http：//web.mit.edu/cms.845/www/projects/spring-04/audio-projects/wild-weekend/index.html
[22][24]方睿， 孔曉燕. 基于電影語(yǔ)言的電子兒童繪本敘事表現(xiàn)策略與實(shí)踐[J]. 科技與出版， 2017（1）：67-71
[23][25][27]封敏. 聲音與畫面的關(guān)系[J]. 電影評(píng)介，1991（7）：25
[26][28]周建青. 當(dāng)代視聽(tīng)節(jié)目編導(dǎo)與制作[M]. 北京：中國(guó)廣播電視出版社， 2014：94
[29]高培. 繪本與動(dòng)畫的藝術(shù)融合[D]. 北京：北京服裝學(xué)院， 2013：9-10
[30][32]張曉博.兒童電子繪本中的插畫動(dòng)態(tài)化應(yīng)用研究[D].長(zhǎng)春：東北師范大學(xué)， 2016：5-7
[31]金巍. 殊途同歸——基于媒介差異的成人繪本審美研究[D]. 杭州：浙江理工大學(xué)， 2016：55-56
[33]程文婷， 王軍. 親子閱讀視角下電子繪本與紙質(zhì)繪本的閱讀差異研究[J]. 圖書情報(bào)工作， 2015， 59（22）：64-71
[34]Crawford C. Chris Crawford on interactive storytelling[M]. New Riders， 2012：115-151
[35]Wikipedia. Interactive storytelling[OL].[2016-10-29]. https：//en.wikipedia.org/wiki/Interactive_storytelling#cite_note-crawford2005Chapters-13
[36]陳兵. 數(shù)字?jǐn)⑹轮械挠脩魠⑴c行為研究[J]. 出版科學(xué)， 2018（2）：92-96
[37]Wikipedia. Narrative structure[EB/OL]. [2017-06-18].https：//en.wikipedia.org/wiki/Narrative_structure
[38][41]彭飛. 電子互動(dòng)繪本的設(shè)計(jì)藝術(shù)研究[D]. 武漢：華中師范大學(xué)， 2013：22-23
[39]GamebookQuickstart Guide[OL].[2017-06-30].http：//gamebookadventures.com/quickstart-guide/
[40]Interactive book apps – 10 of the best[OL].[2017-06-30]. https：//www.theguardian.com/technology/2015/sep/14/ten-best-interactive-book-apps-ios-android
[42]TED. A next-generation digital book[OL]. [2017-06-30].https：//www.ted.com/talks/mike_matas
[43]Goodreads. Tap the Magic Tree[OL].[2017-06-30]. https：//www.goodreads.com/book/show/17383992-tap-the-magic-tree
[44]InteractiveeBooks. Bridging Book[OL].[2016-06-30].http：//www.bestinteractiveebooks.com/2013/06/bridging-book
[45]Amazon.科學(xué)跑出來(lái)系列[OL].[2016-07-03]. https：//www.amazon.cn
[46]Project： Data-driven Interactive Narrative Engine[OL]. [2016-07-01].http：//narrative.ict.usc.edu/data-driven-interactive-narrative-engine.html
[47]Mind Watering[OL]. [2016-07-02].http：//www.bestinteractiveebooks.com/2013/05/mind-watering-lookcook
[48]Fairy Tales： Jack and the Beanstalk[OL]. [2016-07-02].http：//nosycrow.com/product/jack-and-the-beanstalk
[49]王鈺.電子書互動(dòng)敘事結(jié)構(gòu)研究[J].出版科學(xué)，2018，26（4）：84-88
徐志武
[摘 要] 論述電子繪本中數(shù)字?jǐn)⑹碌牟襟E、內(nèi)容、形式以及互動(dòng)模式。首先，借鑒喬·蘭伯特（Joe Lambert）的觀點(diǎn)，將數(shù)字?jǐn)⑹職w納為確定故事主題、情感、轉(zhuǎn)折點(diǎn)，設(shè)計(jì)畫面、聲音并將其組合，分享給讀者7個(gè)步驟。其次，探究數(shù)字?jǐn)⑹聝?nèi)容（圖片、音頻、聲畫融合）和敘事形式（動(dòng)態(tài)敘事）及其開(kāi)發(fā)方法。最后，從環(huán)境、數(shù)據(jù)驅(qū)動(dòng)和語(yǔ)言3方面分析電子繪本敘事中的互動(dòng)模式。
[關(guān)鍵詞] 電子繪本 數(shù)字?jǐn)⑹?互動(dòng)敘事 數(shù)字出版物
[中圖分類號(hào)] G237[文獻(xiàn)標(biāo)識(shí)碼] A[文章編號(hào)] 1009-5853 （2018） 06-0094-05
Digital Storytelling in Electronic Picture Books
Xu Zhiwu
（School of Literature， South China Normal University， Guangzhou， 510006）
[Abstract] Mainly discusses digital storytelling of electronic picture books from the perspectives of digital narrative steps， content and forms， interactive modes. Firstly， according to Joe Lamberts viewpoint， digital narrative can be divided into seven main steps， which include determining the theme， emotion and narrative turning point， designing the picture， sound and their combination， and then sharing them with readers. Secondly， explores the development methods of digital narrative content （picture， audio， the combination of sound and picture） and narrative forms （dynamic narrative）. Finally， discusses the interactive modes of electronic picture books from three aspects： environment， data driven and language interaction.
[Key words] Electronic picture books Digital Storytelling Interactive narrative Digital publication
數(shù)字?jǐn)⑹拢―igital Storytelling，DS）指敘事者改變線性和平面敘事方式，運(yùn)用數(shù)字工具將靜態(tài)和動(dòng)態(tài)的圖像、音頻、視頻、文本等要素結(jié)合起來(lái)，以非線性或互動(dòng)形式講述故事的新實(shí)踐[1]。電子繪本是幫助兒童培養(yǎng)學(xué)識(shí)、構(gòu)建價(jià)值觀的重要工具，是一種重要的數(shù)字出版物形式。電子繪本中的敘事方式較傳統(tǒng)繪本發(fā)生了很大變化。但是，目前學(xué)界對(duì)此關(guān)注不多。因此，本文主要從電子繪本的敘事步驟、敘事內(nèi)容和形式、敘事中的互動(dòng)模式3方面展開(kāi)探討。
1 敘事步驟
2012年，美國(guó)故事中心（Story Center）執(zhí)行主任喬·蘭伯特（Joe Lambert）提出數(shù)字?jǐn)⑹碌?步驟[2]。電子繪本敘事亦可借鑒。
1.1 在敘事前期，確定故事主題、情感和轉(zhuǎn)折點(diǎn)
電子繪本敘事的前期包含3個(gè)步驟。首先，確定主題是電子繪本敘事的基礎(chǔ)。繪本主題應(yīng)具有廣泛（Extensive）、獨(dú)特（Unique）、有力（Powerful）等特點(diǎn)[3]。具體而言，故事主題應(yīng)來(lái)自生活的方方面面，以幫助兒童讀者了解和認(rèn)識(shí)世界。同時(shí)，故事應(yīng)讓小讀者見(jiàn)證故事角色在面對(duì)矛盾或困難時(shí)內(nèi)心經(jīng)歷的掙扎及掙扎后的變化，從而實(shí)現(xiàn)兒童讀者價(jià)值觀引導(dǎo)及情商培養(yǎng)等功能。其次，構(gòu)建故事的整體情感基調(diào)。為此，敘事者需挑出最令自己感動(dòng)的故事情節(jié)，將故事角色融入其中進(jìn)行情感加工，并識(shí)別兒童讀者在閱讀故事時(shí)及閱讀后可能產(chǎn)生的情感體驗(yàn)。敘事者需重點(diǎn)考慮角色面對(duì)不同情境時(shí)的情感反應(yīng)，并將其與自我的情感分開(kāi)。應(yīng)細(xì)膩地描繪情感，如交待故事角色感到快樂(lè)的原因以及當(dāng)時(shí)的表情等，并將情感與環(huán)境因素相結(jié)合，如用灰暗暗示悲傷、陽(yáng)光表示歡快，等等。這樣兒童讀者更容易體會(huì)敘事者所要傳達(dá)的感情[4]。再次，厘清敘事轉(zhuǎn)折，使其承載故事主旨。為厘清敘事轉(zhuǎn)折，敘事者需要思考故事情節(jié)或故事角色發(fā)生變化的時(shí)刻。角色在何時(shí)及何種情況下意識(shí)到自我改變？如果有多個(gè)轉(zhuǎn)折，其分別傳遞何種含義[5]？ 例如，電子繪本《小刺猬亨利》（Henry the Hedgehog）設(shè)置了兩個(gè)轉(zhuǎn)折：一是兔子、蝴蝶、蜜蜂對(duì)刺猬由嫌棄轉(zhuǎn)為喜歡;二是刺猬由孤獨(dú)到幸福。轉(zhuǎn)折發(fā)生在刺猬幫兔子趕走狐貍，從蜘蛛網(wǎng)上解救蝴蝶，以及幫蜜蜂傳播花種之后。其中分別折射出善待朋友與樂(lè)于助人的價(jià)值觀[6]。
1.2 在敘事中后期，確定、組織畫面和聲音并分享給讀者
在電子繪本敘事的中后期，需確定、組織畫面和聲音，并將之傳達(dá)給讀者。敘事過(guò)程中，為確定敘事畫面，敘事者需思考當(dāng)兒童讀者在閱讀故事時(shí)出現(xiàn)在腦海中的第一畫面是什么？從而決定該使用什么畫面？為什么是該畫面？它傳遞的情感是什么？它的寓意是明確還是具體？它表達(dá)單層還是多層含義？如果是多層含義，具體含義又是哪些[7]？其次，電子繪本需確定故事中的聲音。為此，敘事者要構(gòu)建滿足敘事目標(biāo)且條理分明的敘事計(jì)劃和結(jié)構(gòu)，并明確音頻在敘事中承擔(dān)的功能。一般來(lái)說(shuō)，聲音在電子繪本中主要承擔(dān)兩大功能：一是敘事功能，包括直接敘事和潛意識(shí)敘事。前者多通過(guò)對(duì)話或敘述方式講述故事內(nèi)容;后者則潛在地為故事服務(wù)，如敲門聲、電話聲等。二是語(yǔ)法功能，即聲音敘事風(fēng)格在頁(yè)面切換過(guò)程中保持不變，作為內(nèi)容銜接要素[8]。依據(jù)敘事功能，可確定所需音頻內(nèi)容，并做好收集聲音和音樂(lè)的準(zhǔn)備[9]。當(dāng)故事素材準(zhǔn)備好后，需要將故事組合起來(lái)。在組織結(jié)構(gòu)上，可以采用跳脫時(shí)間順序或直接因果模式等非線性結(jié)構(gòu)。在組織視角上，可將洞悉全局的“他”者視角和限知局部的“我”者視角結(jié)合起來(lái)[10]。在敘事節(jié)奏上，由于兒童讀者的認(rèn)知水平不高，一開(kāi)始不可釋放太多信息，而是保持張力，緩慢釋放信息，以利于讀者理解。同時(shí)，可將故事的部分轉(zhuǎn)折或高潮放在開(kāi)頭，激起他們的閱讀興趣[11]。
最后，要將故事分享給讀者。在分享前，敘事者需反復(fù)審核敘事內(nèi)容，消除其中的錯(cuò)誤并確定故事內(nèi)容是否偏離當(dāng)初設(shè)想。分享后，敘事者可通過(guò)調(diào)查法、觀察法等多種方法收集讀者（包括父母和兒童）對(duì)電子繪本主題、內(nèi)容以及互動(dòng)的反饋，以便改進(jìn)。
2 敘事內(nèi)容與形式
在敘事內(nèi)容與形式上，電子繪本倚重圖片和音頻敘事，也強(qiáng)調(diào)聲畫融合敘事，同時(shí)更傾向于動(dòng)態(tài)敘事。
2.1 具有情感交流功能的敘事圖片
由于兒童閱讀能力有限，加之注意力持續(xù)的時(shí)間較短，所以圖片無(wú)疑需發(fā)揮情感交流功能以吸引讀者[12]。借鑒克萊爾·佩因特（Clare Painter）等人提出的閱讀社交關(guān)系理論，電子繪本圖片可通過(guò)視覺(jué)聚焦（Focalisation）敘事、情感（Affection）畫像敘事以及場(chǎng)景（Ambience）敘事發(fā)揮情感交流功能[13]。
第一，視覺(jué)聚焦敘事指依靠圖像中人、動(dòng)物或人格化客體的眼神吸引兒童參與敘事。它有兩種類型：一是接觸（Contact）敘事，即故事角色直接凝視讀者。它多營(yíng)造較嚴(yán)肅的氛圍，傳遞故事角色內(nèi)心失望、迷茫、無(wú)助等復(fù)雜情感。二是觀察（Observe）敘事，即故事角色目光不直接接觸讀者，而是通過(guò)廣而遠(yuǎn)的畫面視角將讀者獨(dú)立于故事外，使其自主觀察[14]。它傳遞的情感較少，主要靠環(huán)境烘托情感。從吸引效果看，接觸敘事用眼神的壓迫感招徠讀者，吸引效果優(yōu)于觀察敘事。
第二，情感畫像敘事指通過(guò)不同風(fēng)格的人物畫像吸引讀者并傳遞情感。它可以分為3種：一是簡(jiǎn)約風(fēng)格（minimalist style）。即圖像的線條、色彩和構(gòu)圖都較簡(jiǎn)單，如用圓或橢圓表示頭部，用點(diǎn)或小圈代替眼睛等，如圖1。這種風(fēng)格往往可最大限度描繪角色的情緒，也可用于發(fā)揮幽默的感覺(jué)。二是普通風(fēng)格（generic style）。即重點(diǎn)描繪角色的嘴部表情，如撅嘴或抿嘴等，如圖2。其具有倡導(dǎo)兒童讀者向畫面角色學(xué)習(xí)的潛在含義。三是自然風(fēng)格（naturalistic style）。即重點(diǎn)描繪實(shí)體人物的眼睛、皮膚和表情等細(xì)節(jié)，如圖3。它可突出角色內(nèi)心微妙的情感，更適用于培養(yǎng)兒童面對(duì)棘手問(wèn)題時(shí)的價(jià)值觀，如理解死亡等[15][16][17]。從吸引效果看，自然風(fēng)格有視覺(jué)壓迫感和強(qiáng)制意味，最具吸引力。普通風(fēng)格突出描繪臉部和嘴部表情，也有一定的視覺(jué)沖擊力，效果次之。簡(jiǎn)約風(fēng)格由于表情和整體較簡(jiǎn)單，吸引效果最弱。
第三，場(chǎng)景氛圍敘事指利用畫面中色彩的色相、純度和明度等要素吸引讀者。一般來(lái)說(shuō)，電子繪本整體場(chǎng)景氛圍應(yīng)是歡快積極的，以便向兒童傳達(dá)活躍、溫暖和熟悉的感覺(jué)。為達(dá)到這種效果，在色相上，電子繪本應(yīng)使用橙色、紅色、黃色及其組合形成的暖色調(diào);同時(shí)，如配上藍(lán)、綠、淡紫色等冷色調(diào)，則可以起到鎮(zhèn)靜和舒緩的效果[18]。在色彩純度上，電子繪本應(yīng)使用中高純度。因?yàn)榧兌雀叩纳拭髁疗G麗，更容易引起視覺(jué)興奮;而中純度色彩基調(diào)豐滿柔和，能使讀者保持長(zhǎng)時(shí)間注視[19]。在色彩明度上，電子繪本應(yīng)多采用紅色、綠色這些中間明度色相，以保護(hù)視力。
2.2 簡(jiǎn)單生動(dòng)的敘事音頻
在電子繪本的音頻敘事過(guò)程中，考慮到兒童讀者的理解和接受能力不強(qiáng)、注意力持續(xù)時(shí)間短等特點(diǎn)，音頻的敘事文本應(yīng)簡(jiǎn)短精練，少長(zhǎng)句、多短句。敘事者要表達(dá)清晰、語(yǔ)速緩慢、音調(diào)自然，而且還需具有獨(dú)自分飾或者與他人配合飾演一種或多種角色的能力。敘事者應(yīng)尊重小讀者，在敘述他人的故事時(shí)，仿佛自己是故事的親歷者，能富有情感地表達(dá)。此外，可在故事中添加生活中的真實(shí)音效，如汽車?guó)Q笛、鳥(niǎo)鳴、飛機(jī)轟鳴等。這些可幫助讀者建立空間位置感和現(xiàn)場(chǎng)感。如《古堡鬼鼠》第一節(jié)嵌入寒風(fēng)呼嘯聲，就生動(dòng)地襯托出故事發(fā)生當(dāng)晚的恐怖情形。此外，應(yīng)注重使用音樂(lè)，尤其是器樂(lè)，以改變敘事的情感基調(diào)并激起情感共鳴[20][21]。
2.3 自然真實(shí)的聲畫融合敘事
聲畫融合敘事是指電子繪本中的聲音和畫面協(xié)調(diào)統(tǒng)一，共同凸顯故事主題。它不僅可以增強(qiáng)閱讀的趣味性，還可以將兒童讀者從枯燥的“聽(tīng)書”中解放出來(lái)并助益理解[22]。電子繪本的聲畫融合敘事可通過(guò)聲畫同步敘事和聲畫對(duì)位敘事實(shí)現(xiàn)[23]。前者指聲音與畫面中的動(dòng)作、情感以及節(jié)奏等要素相一致，畫面真實(shí)、自然。如電子繪本《回家》中，故事角色對(duì)白時(shí)，畫面就配以故事角色嘴開(kāi)合、點(diǎn)頭等動(dòng)效，以增強(qiáng)真實(shí)感[24]。后者指電子繪本中聲音和畫面分別表達(dá)不同內(nèi)容，且各自以其特有的節(jié)奏獨(dú)立發(fā)展，但它們的最終目標(biāo)是從不同方面說(shuō)明故事主題[25]。聲畫對(duì)位敘事包括兩種類型：一種是聲畫彼此獨(dú)立，在兩條線上并行發(fā)展[26]。如在《小刺猬亨利》中，畫面展示小刺猬亨利正在睡覺(jué)的場(chǎng)景，而畫外音卻講述亨利因?yàn)樯砩系拇潭y以交到朋友的事實(shí)以及它渴望交到朋友的心理。雖然畫面和聲音各行其是，但其共同傳遞出小刺猬因沒(méi)有朋友而產(chǎn)生的孤獨(dú)、難過(guò)之情。二是聲畫對(duì)立，即聲音和畫面在情緒、氛圍、節(jié)奏等方面是完全相反的，通過(guò)對(duì)比敘事凸顯和深化故事主旨。如某個(gè)畫面中角色在思念它逝去的孩子，表情傷心落寞;這時(shí)畫面外傳來(lái)孩子歡樂(lè)的笑聲，那是它曾經(jīng)最幸福的時(shí)光。如此一喜一悲，凸顯出故事強(qiáng)烈的傷感情緒[27][28]。
2.4 生動(dòng)活潑的動(dòng)態(tài)敘事
動(dòng)態(tài)敘事主要指電子繪本中的人物、動(dòng)物或物體在讀者閱讀過(guò)程中出現(xiàn)簡(jiǎn)單的變化或位移效果。它可以變抽樣為形象，化靜態(tài)為動(dòng)態(tài)，易于兒童讀者理解和接受[29]。電子繪本的動(dòng)態(tài)敘事主要由動(dòng)態(tài)的故事角色和動(dòng)態(tài)的故事場(chǎng)景構(gòu)成。
首先，對(duì)于動(dòng)態(tài)故事角色，敘事者通常會(huì)運(yùn)用一些夸張但遵循真實(shí)生活的動(dòng)作形態(tài)來(lái)渲染故事角色眼睛、表情、頭部及四肢的變化，以創(chuàng)造出一種流暢且真實(shí)的視覺(jué)效果[30]。如《拔蘿卜》中，老婆婆、老爺爺和小孫女3人拉著葉子一起有節(jié)奏地往后移動(dòng)，生動(dòng)地體現(xiàn)出他們吃力的樣子。其次，動(dòng)態(tài)故事場(chǎng)景（指畫面背景）在敘事過(guò)程中也非常重要。動(dòng)態(tài)場(chǎng)景一般通過(guò)3種方式增強(qiáng)繪本的敘事效果。一是依靠色彩的動(dòng)態(tài)變化烘托敘事環(huán)境。如《我喜歡做我自己》中，通過(guò)燈光閃爍帶來(lái)的明暗對(duì)比，烘托出森林的神秘感和角色冒險(xiǎn)的緊張感 [31]。二是拓展敘事空間。在畫面中引入運(yùn)動(dòng)元素，打破書頁(yè)邊框和靜態(tài)畫面對(duì)敘事的限制，極大地拓展了繪本敘事的立體空間。如《神奇飛書》中，書本在靜態(tài)書架面前的橫向運(yùn)動(dòng)就充分體現(xiàn)了畫面的縱深感，極大增強(qiáng)了繪本的可觀賞性[32]。三是將生活中的場(chǎng)景融入到故事中，增強(qiáng)敘事的真實(shí)性。如《長(zhǎng)鼻子和長(zhǎng)尾巴》中，當(dāng)小象和小猴子睡覺(jué)時(shí)，讀者只要點(diǎn)擊床頭的臺(tái)燈，整個(gè)畫面就會(huì)暗下來(lái)，營(yíng)造關(guān)燈的真實(shí)感。
3 電子繪本敘事的互動(dòng)模式
互動(dòng)指電子繪本與讀者之間相互作用和相互影響的過(guò)程，它是區(qū)別電子繪本與傳統(tǒng)繪本的根本要素[33]。根據(jù)克里斯·克勞福德（Chris Crawford）的劃分，電子繪本互動(dòng)模式包括3種：環(huán)境互動(dòng)（environmental approaches）、數(shù)據(jù)驅(qū)動(dòng)互動(dòng)（data-driven strategies）及語(yǔ)言互動(dòng)（language-based approaches）[34]。
3.1 環(huán)境互動(dòng)模式
環(huán)境互動(dòng)模式是通過(guò)鼓勵(lì)用戶參與互動(dòng)系統(tǒng)，用自己的即時(shí)行動(dòng)串聯(lián)起故事情節(jié)的互動(dòng)模式[35]。常見(jiàn)的環(huán)境互動(dòng)模式有游戲互動(dòng)模式、觸感互動(dòng)模式、介質(zhì)互動(dòng)模式和增強(qiáng)現(xiàn)實(shí)互動(dòng)模式等[36]。
游戲互動(dòng)包括交互敘述（Interactive narration）和互動(dòng)敘事（Interactive narrative）兩種。前者要求用戶積極參與故事中的小游戲以實(shí)現(xiàn)敘事的連續(xù)性或完整性[37]。如《拯救了圣誕節(jié)的鐘表匠》（The Watchmaker）中，讀者可將界面下方彩色鐘表零件鑲嵌到灰色部位，以實(shí)現(xiàn)敘事的完整性[38]。后者往往由多條分支結(jié)構(gòu)組成，每條分支獨(dú)立發(fā)生發(fā)展，用戶可根據(jù)自己的偏好選擇敘事路徑。如探險(xiǎn)類游戲繪本中，游戲被分為經(jīng)典、冒險(xiǎn)和休閑3種模式，系統(tǒng)會(huì)根據(jù)讀者選擇跳轉(zhuǎn)頁(yè)碼[39]。在《丹雪和時(shí)間線WW1》（Timeline WW1 with Dan Snow）中，用戶可按不同時(shí)間線重溫一戰(zhàn)的圖片、音頻、視頻和地圖等[40]。
觸感互動(dòng)是基于讀者觸摸、點(diǎn)擊、按壓等動(dòng)作而產(chǎn)生的互動(dòng)[41]。這是目前電子繪本中最常用的互動(dòng)模式。如《暖陽(yáng)陽(yáng)的紅絲帶》中，讀者只要點(diǎn)擊畫面中的紅絲帶，紅絲帶就會(huì)自動(dòng)系到瓶口上;讀者點(diǎn)擊畫面中的瓶子，瓶子就會(huì)自動(dòng)跳到獾婆婆手上。口紅棒糖果出版社（Push Pop）推出的《我們的選擇》（Our Choices）中，當(dāng)讀者對(duì)著書中的風(fēng)車吹氣時(shí)，電力風(fēng)車就會(huì)自動(dòng)旋轉(zhuǎn)，并給畫面中的房子充電[42]?！遁p叩神奇樹(shù)》（Tap the Magic Tree）中，讀者只需要輕輕敲擊或者搖晃iPad，畫面中的樹(shù)葉就一片片飄落下來(lái)[43]。
介質(zhì)互動(dòng)是數(shù)字媒介和傳統(tǒng)媒介融合形成的互動(dòng)模式，它目前雖運(yùn)用得不多，但具有極強(qiáng)吸引力，市場(chǎng)前景廣闊。如《橋接書》（Bridging Book）便是一種在實(shí)體書中植入磁鐵，在平板電腦中植入數(shù)字羅盤的繪本形態(tài)。當(dāng)兩者按上下順序拼放在一起時(shí)，會(huì)呈現(xiàn)出完整的畫面效果。讀者如果翻動(dòng)實(shí)體書頁(yè)，電子書也會(huì)自動(dòng)翻頁(yè)[44]。
增強(qiáng)現(xiàn)實(shí)（Augment Reality，AR）互動(dòng)是通過(guò)計(jì)算機(jī)生成逼真的視、聽(tīng)、力、觸和動(dòng)等感覺(jué)，使用戶突破時(shí)間、空間等限制，在虛擬環(huán)境中體驗(yàn)“身臨其境”的互動(dòng)方式。如《科學(xué)跑出來(lái)》中，讀者只要在書中啟動(dòng)增強(qiáng)現(xiàn)實(shí)應(yīng)用程序，并將智能移動(dòng)設(shè)備的相機(jī)鏡頭對(duì)準(zhǔn)平攤的實(shí)體書，讀者便可體驗(yàn)暴龍?jiān)谧约铱蛷d行走，八大行星在手上轉(zhuǎn)動(dòng)，親手制造一個(gè)龍卷風(fēng)等驚喜[45]。
3.2 數(shù)據(jù)驅(qū)動(dòng)互動(dòng)模式和語(yǔ)言互動(dòng)模式
數(shù)據(jù)驅(qū)動(dòng)互動(dòng)要求敘事者首先建立“故事構(gòu)成要素”綜合數(shù)據(jù)庫(kù)。當(dāng)讀者發(fā)出互動(dòng)請(qǐng)求時(shí)，繪本可對(duì)讀者行為做出反應(yīng)并與之互動(dòng)。目前其在電子繪本中最具前景的實(shí)踐是人機(jī)對(duì)話。當(dāng)兒童讀者輸入想說(shuō)的內(nèi)容后，電子繪本數(shù)據(jù)庫(kù)會(huì)依據(jù)內(nèi)容輸出相應(yīng)答案。相較環(huán)境互動(dòng)模式，數(shù)據(jù)驅(qū)動(dòng)互動(dòng)模式最大的優(yōu)勢(shì)是內(nèi)容具有綜合性和普遍性。但它的不足是前期投入較大，因?yàn)椴粌H需要建立基于文本的開(kāi)放式交互敘事架構(gòu)，構(gòu)建更大的語(yǔ)料庫(kù)，還需要分析敘事內(nèi)容、改進(jìn)語(yǔ)義相似度并建構(gòu)實(shí)例驅(qū)動(dòng)的自適應(yīng)模型。目前，南加利福尼亞大學(xué)的創(chuàng)新技術(shù)項(xiàng)目小組正在開(kāi)展的數(shù)據(jù)驅(qū)動(dòng)的互動(dòng)敘事引擎（Data-driven Interactive Narrative Engine）課題，研究的正是這些關(guān)鍵技術(shù)問(wèn)題[46]。
在基于語(yǔ)言的互動(dòng)模式中，敘事系統(tǒng)能夠理解用戶某些特定的話語(yǔ)，并對(duì)其作出反應(yīng)。如在《心靈澆灌》（Mind Watering）中，讀者通過(guò)對(duì)iPad說(shuō)“行動(dòng)”（action）一詞發(fā)出命令，繪本便可自動(dòng)翻頁(yè)[47]。語(yǔ)言互動(dòng)模式往往結(jié)合游戲進(jìn)行敘事。如《杰克和仙豆》（Jack and the Beanstalk by Nosy Crow）為鼓勵(lì)讀者朗讀，將部分單詞標(biāo)紅，讀者朗讀正確以后，便可解救大房子中被困的動(dòng)物作為獎(jiǎng)勵(lì)[48]。
4結(jié) 語(yǔ)
電子繪本中的數(shù)字?jǐn)⑹虏粌H需要設(shè)計(jì)深入人心的故事情節(jié)，還需設(shè)計(jì)具有情感交流功能的敘事圖片和簡(jiǎn)單生動(dòng)的敘事音頻。在此基礎(chǔ)上，構(gòu)建生動(dòng)活潑的動(dòng)態(tài)敘事和協(xié)調(diào)統(tǒng)一的聲畫融合敘事。因此，電子繪本數(shù)字?jǐn)⑹碌年P(guān)鍵在于增加互動(dòng)中介（Interactive agency）功能，設(shè)計(jì)基于環(huán)境、數(shù)據(jù)及語(yǔ)言的多種互動(dòng)模式，使讀者參與其中，由單純接受者變?yōu)閿⑹聟⑴c者[49]。
注 釋
[1]徐麗芳，曾李.數(shù)字?jǐn)⑹屡c互動(dòng)數(shù)字?jǐn)⑹耓J].出版科學(xué)，2016，24（3）：96-101
[2][3][5][7][11][20]Joe Lambert. Digital Storytelling： Capturing Lives， Creating Community[M]. Routledge， 2012：53-69
[4]Wiki How. Adding Emotion to Your Own Story[EB/OL]. [2016-06-19].http：//www.wikihow.com/Add-Emotion-to-a-Story
[6]Nezhabooks. Henry the Hedgehog[OL].[2016-06-19]. http：//www.neumedias.com/intro/products.html#3434
[8]邵萍.大型電子游戲的數(shù)字?jǐn)⑹耓J]. 出版科學(xué)， 2016， 24（3）：106-109
[9]DisignLab[OL].[2016-07-29].https：//designlab.wisc.edu/audio-narrative
[10]敬鵬林. 非線性敘事：電影敘事范式的異變與擴(kuò)展[J]. 重慶郵電大學(xué)學(xué)報(bào)（社會(huì)科學(xué)版）， 2015， 27（4）：142-146
[12]Rose D. Meaning beyond the margins： learning to interact with books[J]. Semiotic Margins： reclaiming meaning， 2011： 177-209
[13][14][15]Painter C， Martin J R， Unsworth L. Reading Visual Narratives[M]. London： Equi-nox， 2012：15-46
[16]Welch A. The illustration of facial affect in childrens literature[R]. Sydney ：University of Sydney， 2005
[17]Tian P. Multimodal evaluation： sense and sensibility in Anthony Browne's picture books[D]. Sydney：University of Sydney 2011
[18]Warm Colors and Cool Colors[OL]. [2016-06-28].http：//interiordec.about.com/od/bedrooms/a/Bedroom-Paint-Colors.htm
[19]正確理解色彩的純度[OL]. [2016-06-28].http：//www.art456.com/st/1099232_1.html
[21]Audio Narrative Project： Wild Weekend[OL].[2016-06-28].http：//web.mit.edu/cms.845/www/projects/spring-04/audio-projects/wild-weekend/index.html
[22][24]方睿， 孔曉燕. 基于電影語(yǔ)言的電子兒童繪本敘事表現(xiàn)策略與實(shí)踐[J]. 科技與出版， 2017（1）：67-71
[23][25][27]封敏. 聲音與畫面的關(guān)系[J]. 電影評(píng)介，1991（7）：25
[26][28]周建青. 當(dāng)代視聽(tīng)節(jié)目編導(dǎo)與制作[M]. 北京：中國(guó)廣播電視出版社， 2014：94
[29]高培. 繪本與動(dòng)畫的藝術(shù)融合[D]. 北京：北京服裝學(xué)院， 2013：9-10
[30][32]張曉博.兒童電子繪本中的插畫動(dòng)態(tài)化應(yīng)用研究[D].長(zhǎng)春：東北師范大學(xué)， 2016：5-7
[31]金巍. 殊途同歸——基于媒介差異的成人繪本審美研究[D]. 杭州：浙江理工大學(xué)， 2016：55-56
[33]程文婷， 王軍. 親子閱讀視角下電子繪本與紙質(zhì)繪本的閱讀差異研究[J]. 圖書情報(bào)工作， 2015， 59（22）：64-71
[34]Crawford C. Chris Crawford on interactive storytelling[M]. New Riders， 2012：115-151
[35]Wikipedia. Interactive storytelling[OL].[2016-10-29]. https：//en.wikipedia.org/wiki/Interactive_storytelling#cite_note-crawford2005Chapters-13
[36]陳兵. 數(shù)字?jǐn)⑹轮械挠脩魠⑴c行為研究[J]. 出版科學(xué)， 2018（2）：92-96
[37]Wikipedia. Narrative structure[EB/OL]. [2017-06-18].https：//en.wikipedia.org/wiki/Narrative_structure
[38][41]彭飛. 電子互動(dòng)繪本的設(shè)計(jì)藝術(shù)研究[D]. 武漢：華中師范大學(xué)， 2013：22-23
[39]GamebookQuickstart Guide[OL].[2017-06-30].http：//gamebookadventures.com/quickstart-guide/
[40]Interactive book apps – 10 of the best[OL].[2017-06-30]. https：//www.theguardian.com/technology/2015/sep/14/ten-best-interactive-book-apps-ios-android
[42]TED. A next-generation digital book[OL]. [2017-06-30].https：//www.ted.com/talks/mike_matas
[43]Goodreads. Tap the Magic Tree[OL].[2017-06-30]. https：//www.goodreads.com/book/show/17383992-tap-the-magic-tree
[44]InteractiveeBooks. Bridging Book[OL].[2016-06-30].http：//www.bestinteractiveebooks.com/2013/06/bridging-book
[45]Amazon.科學(xué)跑出來(lái)系列[OL].[2016-07-03]. https：//www.amazon.cn
[46]Project： Data-driven Interactive Narrative Engine[OL]. [2016-07-01].http：//narrative.ict.usc.edu/data-driven-interactive-narrative-engine.html
[47]Mind Watering[OL]. [2016-07-02].http：//www.bestinteractiveebooks.com/2013/05/mind-watering-lookcook
[48]Fairy Tales： Jack and the Beanstalk[OL]. [2016-07-02].http：//nosycrow.com/product/jack-and-the-beanstalk
[49]王鈺.電子書互動(dòng)敘事結(jié)構(gòu)研究[J].出版科學(xué)，2018，26（4）：84-88
