王曉丹　劉世清

[摘要]當(dāng)前對(duì)于多媒體學(xué)習(xí)的認(rèn)識(shí)存在多種假說(shuō)，其中“通道說(shuō)”是多媒體學(xué)習(xí)領(lǐng)域一種非常重要的觀點(diǎn)。文章通過(guò)對(duì)多媒體學(xué)習(xí)研究歷史的分析，在眾多相關(guān)理論研究的基礎(chǔ)上，提出了“知覺(jué)、語(yǔ)義、動(dòng)覺(jué)”多媒體學(xué)習(xí)三通道假說(shuō)，并對(duì)其基本觀點(diǎn)進(jìn)行了詳細(xì)分析，旨在為多媒體學(xué)習(xí)中三類學(xué)習(xí)行為的整合提供理論依據(jù)。

[關(guān)鍵詞]多媒體學(xué)習(xí)；認(rèn)知加工；三通道假說(shuō)

[中圖分類號(hào)]G40-057 [文獻(xiàn)標(biāo)識(shí)碼]A [論文編號(hào)]1009-8097（2012）10-0072-05

一、多媒體學(xué)習(xí)三通道的背景

多媒體學(xué)習(xí)理論的發(fā)展為現(xiàn)代教育注入了新的活力，已成為現(xiàn)代教育不可或缺的一部分。當(dāng)前對(duì)多媒體學(xué)習(xí)的認(rèn)識(shí)，主要包括以下三種：

1.媒介技術(shù)層面

媒介技術(shù)層面的多媒體學(xué)習(xí)又可以被稱為“多媒介學(xué)習(xí)”，是在學(xué)習(xí)活動(dòng)中運(yùn)用多種傳播媒介呈現(xiàn)教學(xué)信息，運(yùn)用多種媒介組合的方式進(jìn)行學(xué)習(xí)，例如黑板、電影、幻燈、印刷媒體等。這種認(rèn)識(shí)方式在多媒體技術(shù)引入到教育領(lǐng)域的最初階段占據(jù)著主要地位。

2.呈現(xiàn)方式層面

呈現(xiàn)方式層面的多媒體學(xué)習(xí)又可以被稱為是“多表征學(xué)習(xí)”，是在學(xué)習(xí)活動(dòng)中運(yùn)用兩種或兩種以上的表征來(lái)呈現(xiàn)材料，這里的表征指的是文字、圖片、音頻、視頻和虛擬現(xiàn)實(shí)等外部表征。呈現(xiàn)方式層面對(duì)多媒體學(xué)習(xí)的認(rèn)識(shí)較為直觀且具有較強(qiáng)的操作性和測(cè)量性，因此這種觀點(diǎn)得到廣泛的認(rèn)可。

3.感覺(jué)通道層面

Mayer在雙編碼理論基礎(chǔ)之上提出了“多通道學(xué)習(xí)”的概念，將多媒體學(xué)習(xí)看成學(xué)習(xí)者使用兩種或兩種以上的感覺(jué)系統(tǒng)進(jìn)行學(xué)習(xí)，這種感覺(jué)系統(tǒng)稱之為通道。在《多媒體學(xué)習(xí)》一書(shū)中，Mayer將通道劃分為視覺(jué)通道和聽(tīng)覺(jué)通道，強(qiáng)調(diào)的是學(xué)習(xí)者接受外界材料時(shí)所用到的如眼睛和耳朵這樣的感覺(jué)接收器。感覺(jué)通道層面的研究借助于信息加工認(rèn)知心理學(xué)的相關(guān)理論，開(kāi)創(chuàng)了對(duì)學(xué)習(xí)者內(nèi)部多媒體學(xué)習(xí)認(rèn)知加工方式研究的先河。

上述對(duì)多媒體學(xué)習(xí)的三種不同認(rèn)識(shí)，從不同層面促進(jìn)了多媒體學(xué)習(xí)理論和實(shí)踐的發(fā)展（見(jiàn)表1），對(duì)多媒體感覺(jué)通道層面的認(rèn)識(shí)，已經(jīng)開(kāi)始關(guān)注多媒體學(xué)習(xí)的內(nèi)部認(rèn)知過(guò)程，將焦點(diǎn)轉(zhuǎn)向了對(duì)多媒體學(xué)習(xí)本質(zhì)的研究，這是多媒體學(xué)習(xí)研究領(lǐng)域的一大突破。為人們研究多媒體學(xué)習(xí)開(kāi)辟了新的道路，然而受其理論基礎(chǔ)的制約，感覺(jué)通道的觀點(diǎn)存在某些局限，這些局限客觀上限制了多媒體學(xué)習(xí)的進(jìn)一步發(fā)展，在此背景下對(duì)“通道”的內(nèi)涵進(jìn)行新的界定已勢(shì)在必行。

二、多媒體學(xué)習(xí)三通道劃分的理論依據(jù)

多媒體學(xué)習(xí)的三通道觀點(diǎn)是在編碼理論基礎(chǔ)上提出的，認(rèn)知神經(jīng)科學(xué)也為多媒體學(xué)習(xí)的通道劃分提供了證據(jù)支持。

1.編碼理論研究——三通道劃分的理論基礎(chǔ)

編碼理論是通道研究的基礎(chǔ)，不同通道將采用小同的編碼方式。當(dāng)前編碼理論主要有以下幾種假說(shuō)。

（1）Paivio的雙重編碼理論

Paivio的雙編碼理論認(rèn)為，人類擁有兩個(gè)認(rèn)知編碼系統(tǒng)，即言語(yǔ)系統(tǒng)和表象系統(tǒng)。這兩個(gè)系統(tǒng)在功能和結(jié)構(gòu)上均不相同，相互獨(dú)立但又相互聯(lián)系。言語(yǔ)系統(tǒng)采用序列加工的形式對(duì)言語(yǔ)符號(hào)進(jìn)行加工；表象系統(tǒng)以同步的方式加工非言語(yǔ)信息。雙重編碼理論中存在三種加工類型：表征的、參照性的和聯(lián)想性的。

（2）Anderson命題符號(hào)編碼理論

命題代碼理論主張不論言語(yǔ)信息還是非言語(yǔ)信息的存儲(chǔ)都不依賴于其表層形式，而是以抽象的命題形式進(jìn)行編碼的?！懊}既不是句子，也不是由單詞組成的。相反，他是一個(gè)較為抽象的，由單詞所指的概念組成的實(shí)體?！蹦掣拍畹囊庀蠡蜓哉Z(yǔ)描述來(lái)自于同一個(gè)抽象系統(tǒng)，是從命題表征中重新構(gòu)造的。

上述兩種編碼理論都是基于認(rèn)知的編碼理論，認(rèn)為知覺(jué)和認(rèn)知是兩個(gè)相互分離的串行系統(tǒng)，知覺(jué)系統(tǒng)負(fù)責(zé)從環(huán)境中提取信息并傳遞給認(rèn)知系統(tǒng)，認(rèn)知系統(tǒng)負(fù)責(zé)對(duì)信息進(jìn)行編碼，強(qiáng)調(diào)知覺(jué)系統(tǒng)中未經(jīng)認(rèn)知系統(tǒng)編碼的信息不能夠直接進(jìn)入個(gè)體的知識(shí)體系中?；谡J(rèn)知的編碼理論則主張信息在加工系統(tǒng)中的重構(gòu)，如命題編碼認(rèn)為任何信息都需要經(jīng)過(guò)抽象的命題加工，而雙編碼則認(rèn)為無(wú)論是言語(yǔ)信息還是非言語(yǔ)信息都要經(jīng)過(guò)表征性加工、參照性加工或聯(lián)想性加工，無(wú)論是哪一種編碼方式都需要對(duì)信息進(jìn)行或多或少的語(yǔ)義性加工。雙編碼和命題編碼實(shí)際上關(guān)注的都是高級(jí)認(rèn)知學(xué)習(xí)活動(dòng)，對(duì)于較為復(fù)雜和抽象的學(xué)習(xí)具有很強(qiáng)的解釋性。然而隨著研究的深入，人們逐漸發(fā)現(xiàn)了一些基于認(rèn)知的編碼理論無(wú)法解釋的知覺(jué)編碼現(xiàn)象。在此背景下，一種新的知覺(jué)編碼理論應(yīng)運(yùn)而生。

（3）Barsalou的知覺(jué)符號(hào)編碼理論

Barsalou于20世紀(jì)末提出了知覺(jué)符號(hào)理論，知覺(jué)符號(hào)理論具有六個(gè)核心特征：知覺(jué)符號(hào)是感覺(jué)運(yùn)動(dòng)系統(tǒng)的神經(jīng)表征；知覺(jué)符號(hào)是圖解式的；知覺(jué)符號(hào)是多模式的；知覺(jué)符號(hào)進(jìn)一步組成仿真器；知覺(jué)符號(hào)系統(tǒng)中有多個(gè)框架；知覺(jué)符號(hào)跟言語(yǔ)符號(hào)密切相關(guān)。從知覺(jué)符號(hào)理論的核心特征中可以看出，Barsalou關(guān)注的編碼不僅僅包括感知覺(jué)，還包括運(yùn)動(dòng)知覺(jué)，這-兩種編碼產(chǎn)生的知覺(jué)符號(hào)都是神經(jīng)表征，而不是傳統(tǒng)編碼上的認(rèn)知表征。

綜上所述，編碼方式呈現(xiàn)出百家爭(zhēng)鳴、百花齊放的局面，各種編碼都有其理論和實(shí)驗(yàn)支持，極大地促進(jìn)了對(duì)學(xué)習(xí)者內(nèi)部心理活動(dòng)的研究。對(duì)上述編碼理論進(jìn)行分析，可以看出當(dāng)前存在的編碼形式大致可劃分為三種：知覺(jué)性、亞符號(hào)性和符號(hào)性。知覺(jué)性編碼形式保留了信息原始的知覺(jué)特征，包括視覺(jué)編碼、聽(tīng)覺(jué)編碼、觸覺(jué)編碼等感知覺(jué)編碼，也包括運(yùn)動(dòng)知覺(jué)編碼；符號(hào)性編碼形式則對(duì)信息進(jìn)行完全的抽象加工，僅保留語(yǔ)義信息；亞符號(hào)性的編碼形式則是介于知覺(jué)性編碼和符號(hào)性編碼之間，忽略部分細(xì)節(jié)的知覺(jué)信息，僅對(duì)部分特征信息進(jìn)行語(yǔ)義編碼。由于符號(hào)性編碼和亞符號(hào)性編碼都是對(duì)信息進(jìn)行語(yǔ)義加工，因此可以統(tǒng)稱其為語(yǔ)義性編碼形式。

編碼理論的研究促進(jìn)了多媒體學(xué)習(xí)模型與通道研究的發(fā)展，Mayer所提出的多媒體學(xué)習(xí)雙通道就是在雙重編碼理論的基礎(chǔ)上提出的。在編碼理論的不斷發(fā)展過(guò)程中，很多研究者致力于尋找這些編碼理論的契合點(diǎn)，試圖運(yùn)用混合編碼的觀點(diǎn)解釋學(xué)習(xí)者內(nèi)部心理活動(dòng)。編碼理論的發(fā)展和豐富，為多媒體學(xué)習(xí)的通道研究指明了方向。

2.認(rèn)知神經(jīng)科學(xué)理論研究——三通道劃分的證據(jù)支持

認(rèn)知神經(jīng)科學(xué)是由眾多學(xué)科整合起來(lái)的一門交叉邊緣學(xué)科，因而與許多學(xué)科都有著密不可分的聯(lián)系。近幾年來(lái)EEG、MEG和fMRI等技術(shù)極大地促進(jìn)了認(rèn)知神經(jīng)科學(xué)的研究，其研究成果為解釋人類復(fù)雜的認(rèn)知活動(dòng)奠定了基礎(chǔ)。在多媒體學(xué)習(xí)領(lǐng)域，認(rèn)知神經(jīng)科學(xué)從不同的側(cè)面對(duì)通道劃分提供證據(jù)支持。

（1）大腦皮質(zhì)的功能定位

認(rèn)知神經(jīng)學(xué)專家通過(guò)對(duì)腦損傷病人的研究，揭示了大腦皮質(zhì)具有以下功能。腦皮質(zhì)主要包括四部分：一是初級(jí)感覺(jué)區(qū)，包括視覺(jué)區(qū)、聽(tīng)覺(jué)區(qū)和體覺(jué)區(qū)，負(fù)責(zé)感知覺(jué)活動(dòng)：二是初級(jí)運(yùn)動(dòng)區(qū)，位于額葉中央溝正前方，是控制身體運(yùn)動(dòng)的區(qū)域；三是語(yǔ)言運(yùn)用區(qū)，主要位于大腦的左半球，由較廣的腦區(qū)組成；四是聯(lián)合區(qū)：不接受任何感覺(jué)系統(tǒng)的直接輸入，與感覺(jué)、運(yùn)動(dòng)程度無(wú)直接關(guān)系，但與皮層下中樞有聯(lián)系，而且更多的是在大腦皮層各中樞間起聯(lián)合與綜合的作用。

由此可見(jiàn)，大腦皮質(zhì)的不同區(qū)域負(fù)責(zé)不同的活動(dòng)，如負(fù)責(zé)感知覺(jué)的初級(jí)感覺(jué)區(qū)和感覺(jué)聯(lián)合區(qū)，負(fù)責(zé)動(dòng)作的初級(jí)運(yùn)動(dòng)區(qū)和運(yùn)動(dòng)聯(lián)合區(qū)，以及負(fù)責(zé)高級(jí)認(rèn)知活動(dòng)的語(yǔ)言運(yùn)用區(qū)和前額聯(lián)合區(qū)。對(duì)大腦皮質(zhì)的功能定位在一定程度上說(shuō)明了感知覺(jué)加工、運(yùn)動(dòng)加工和語(yǔ)義加工各有其物理基礎(chǔ)。

（2）長(zhǎng)時(shí)工作記憶的多重表征與其神經(jīng)機(jī)制

Tulving于1972年對(duì)長(zhǎng)時(shí)記憶進(jìn)行劃分，并于1995年進(jìn)行補(bǔ)充，將記憶系統(tǒng)區(qū)分為五大類：程序記憶系統(tǒng)、知覺(jué)表征系統(tǒng)、語(yǔ)義記憶系統(tǒng)、初級(jí)記憶系統(tǒng)和情節(jié)記憶系統(tǒng)。1985年，Graf和Schacter根據(jù)記憶過(guò)程中意識(shí)參與的程度，將記憶分為內(nèi)隱記憶和外顯記憶。Anderson于1980年將記憶分為陳述性記憶和程序性記憶。Squaire于1987年結(jié)合認(rèn)知神經(jīng)科學(xué)的新進(jìn)展對(duì)陳述性記憶和非陳述性記憶進(jìn)行區(qū)分，揭示了兩類記憶的功能和存儲(chǔ)部位。2002年Gazzaniga等人在Squaire研究的基礎(chǔ)之上，進(jìn)一步歸納總結(jié)出參與各種記憶類型的神經(jīng)系統(tǒng)。長(zhǎng)時(shí)記憶中的表征形式與編碼是對(duì)應(yīng)的，因此長(zhǎng)時(shí)記憶的多重表征間接說(shuō)明學(xué)習(xí)者對(duì)外部信息加工時(shí)采用了多種編碼方式，其加工的信息不僅僅局限于語(yǔ)義信息，還包括了動(dòng)作技能和知覺(jué)信息等。在多重表征系統(tǒng)中，動(dòng)作技能有其特殊性，即其神經(jīng)基礎(chǔ)不僅僅局限于大腦，骨骼肌、反射通路也是動(dòng)作信息加工的神經(jīng)結(jié)構(gòu)。

（3）知覺(jué)學(xué)習(xí)

知覺(jué)學(xué)習(xí)（perceptual learning）是一個(gè)新興領(lǐng)域，是當(dāng)前認(rèn)知神經(jīng)科學(xué)研究的熱點(diǎn)之一。Gibson于1963提出，“凡是由于訓(xùn)練或經(jīng)驗(yàn)?zāi)撤N刺激而引起的對(duì)于這種刺激的長(zhǎng)期而穩(wěn)定的知覺(jué)改變都可以認(rèn)為是知覺(jué)學(xué)習(xí)”。1991年Karni和Sagi提出，知覺(jué)學(xué)習(xí)表現(xiàn)為神經(jīng)器質(zhì)上的可塑性。在之后的研究中發(fā)現(xiàn)，知覺(jué)學(xué)習(xí)既可能發(fā)生在刺激特征編碼較特異的信息加工初級(jí)階段，也可能發(fā)生在信息加工的高級(jí)階段。

認(rèn)知神經(jīng)科學(xué)對(duì)多媒體學(xué)習(xí)多通道的劃分提供了重要的證據(jù)支持，從上述研究結(jié)果可以看出，人腦可以對(duì)知覺(jué)、語(yǔ)義和動(dòng)作三種類型的信息進(jìn)行處理，這三種信息在不同的腦區(qū)中進(jìn)行編碼，參與其存儲(chǔ)的神經(jīng)系統(tǒng)亦有所不同。

三、多媒體學(xué)習(xí)三通道的界定

本研究認(rèn)為，對(duì)多媒體學(xué)習(xí)通道的劃分應(yīng)該依據(jù)不同的信息加工系統(tǒng)，而不是感覺(jué)系統(tǒng)。本文的第二部分通過(guò)對(duì)編碼理論進(jìn)行分析，總結(jié)出了兩種信息加工形式——知覺(jué)性加工和語(yǔ)義性加工，兩種加工形式對(duì)應(yīng)著兩種不同的加工系統(tǒng)。將知覺(jué)加工系統(tǒng)從語(yǔ)義加工系統(tǒng)中劃分出來(lái)，得到了認(rèn)知神經(jīng)科學(xué)中知覺(jué)學(xué)習(xí)理論的支持。知覺(jué)學(xué)習(xí)理論發(fā)現(xiàn)知覺(jué)學(xué)習(xí)既可能發(fā)生在刺激特征編碼較特異的信息加工初級(jí)階段，也可能發(fā)生在信息加工的高級(jí)階段，那么知覺(jué)加工系統(tǒng)和語(yǔ)義加工系統(tǒng)應(yīng)該是一種并行結(jié)構(gòu)而不是串行結(jié)構(gòu)。

所以，本研究認(rèn)為存在著三種不同的信息加工系統(tǒng)，分別是知覺(jué)加工系統(tǒng)、語(yǔ)義加工系統(tǒng)和動(dòng)覺(jué)加工系統(tǒng)。多重記憶表征理論為三種信息加工系統(tǒng)的劃分提供了證據(jù)支持，長(zhǎng)時(shí)記憶中存在著不同類型的記憶，這些記憶的形成依賴于不同的信息加工系統(tǒng)。大腦皮質(zhì)功能區(qū)的劃分進(jìn)一步為三種信息加工系統(tǒng)奠定了生理基礎(chǔ)。

基于上述分析，對(duì)三種不同信息加工系統(tǒng)的劃分，形成了三種不同的多媒體學(xué)習(xí)加工通道，即知覺(jué)加工通道（Perceptual processing channel）、語(yǔ)義加工通道（Semantic processing channel）和動(dòng)覺(jué)加工通道（Kinesthetic processing channel）。下面將對(duì)多媒體學(xué)習(xí)三通道的內(nèi)涵進(jìn)行詳細(xì)分析與闡述。

四、多媒體學(xué)習(xí)三通道的內(nèi)涵及其相互關(guān)系

1.知覺(jué)加工通道（Perceptual processing channd）

原有多媒體學(xué)習(xí)理論認(rèn)為認(rèn)知系統(tǒng)中的知覺(jué)加工與語(yǔ)義加工是序列結(jié)構(gòu)，知覺(jué)加工是對(duì)外界環(huán)境信息的選擇，其輸出是語(yǔ)義加工的輸入，知覺(jué)信息必須進(jìn)入語(yǔ)義加工系統(tǒng)中進(jìn)行編碼后才可以被存儲(chǔ)。Barsalou的知覺(jué)符號(hào)編碼理論和認(rèn)知神經(jīng)科學(xué)的研究成果則否認(rèn)這種觀點(diǎn)，提出知覺(jué)加工并不是語(yǔ)義加工的早期階段，而是一種獨(dú)立的加工系統(tǒng)，其輸出的信息可以直接進(jìn)入到長(zhǎng)時(shí)記憶中進(jìn)行存儲(chǔ)，因而知覺(jué)加工和語(yǔ)義加工是一種并列的結(jié)構(gòu)。

知覺(jué)通道的加工內(nèi)容為外部環(huán)境中的感覺(jué)刺激，采用激活、聯(lián)接的方式進(jìn)行編碼，編碼后的信息以知覺(jué)模型的形式在長(zhǎng)時(shí)記憶中表征。對(duì)客觀事物的個(gè)別屬性的認(rèn)識(shí)是感覺(jué)，對(duì)同一事物的各種感覺(jué)的結(jié)合，就形成了這一事物的知覺(jué)。對(duì)知覺(jué)加工通道的研究需要以感覺(jué)為基礎(chǔ)。按照刺激性質(zhì)的不同，可以將感覺(jué)分為視覺(jué)、聽(tīng)覺(jué)、觸覺(jué)、味覺(jué)、嗅覺(jué)等。視覺(jué)、聽(tīng)覺(jué)、觸覺(jué)的刺激屬于物理刺激，味覺(jué)和嗅覺(jué)的刺激屬于化學(xué)刺激。當(dāng)前多媒體學(xué)習(xí)領(lǐng)域的技術(shù)可以很容易的實(shí)現(xiàn)物理刺激的模擬，但對(duì)化學(xué)刺激的呈現(xiàn)則較困難，因此對(duì)知覺(jué)通道的研究主要集中于視覺(jué)通道、聽(tīng)覺(jué)通道和觸覺(jué)通道。

外界的不同感覺(jué)刺激是以并列的形式進(jìn)入加工系統(tǒng)的，例如視覺(jué)信息通過(guò)眼睛進(jìn)入視覺(jué)通道，聽(tīng)覺(jué)信息通過(guò)耳朵進(jìn)入聽(tīng)覺(jué)通道，觸覺(jué)信息則是通過(guò)皮膚進(jìn)入觸覺(jué)通道，視覺(jué)通道、聽(tīng)覺(jué)通道和觸覺(jué)通道的刺激信號(hào)以并行的方式傳輸?shù)酱竽X皮層的初級(jí)感覺(jué)區(qū)激活相應(yīng)的細(xì)胞，在感覺(jué)聯(lián)合區(qū)的作用下，三通道的感覺(jué)信息相互激活和聯(lián)接，經(jīng)過(guò)多次的重復(fù)則會(huì)形成穩(wěn)定的神經(jīng)結(jié)構(gòu)，進(jìn)而在頭腦中形成對(duì)某一事物完整的知覺(jué)模型。由于知覺(jué)通道采用激活和聯(lián)接的形式，知覺(jué)模型的形成是感覺(jué)刺激多次重復(fù)后形成的穩(wěn)定的神經(jīng)器質(zhì)的改變，因而對(duì)意識(shí)參與的依賴性較低，只需要較少的認(rèn)知負(fù)荷。

從學(xué)習(xí)類型方面看，知覺(jué)加工通道對(duì)于初級(jí)認(rèn)知學(xué)習(xí)是十分重要的，它可以讓學(xué)習(xí)者不需要過(guò)多的注意和加工，較為容易地產(chǎn)生知覺(jué)模型，進(jìn)而為高級(jí)認(rèn)知學(xué)習(xí)奠定基礎(chǔ)。從學(xué)習(xí)者方面看，知覺(jué)加工通道對(duì)于低認(rèn)知能力的學(xué)習(xí)者意義較大，即知覺(jué)通道這種不需要過(guò)多的意識(shí)參與的信息加工系統(tǒng)似乎更有優(yōu)越性。雖然知覺(jué)加工通道對(duì)學(xué)習(xí)的意義較大，然而當(dāng)前的多媒體學(xué)習(xí)模型往往忽略了對(duì)知覺(jué)加工通道的研究，更加關(guān)注于高級(jí)學(xué)習(xí)活動(dòng)的語(yǔ)義加工通道。本研究在相關(guān)理論的基礎(chǔ)上將知覺(jué)加工通道與語(yǔ)義加工通道相區(qū)分，希望能引起人們對(duì)多媒體學(xué)習(xí)中知覺(jué)通道研究的關(guān)注。

2.語(yǔ)義加工通道（Semantic processing channd）

在認(rèn)知心理學(xué)的影響下，對(duì)語(yǔ)義加工通道的研究一直是多媒體學(xué)習(xí)關(guān)注的焦點(diǎn)。語(yǔ)義是指對(duì)于那些用來(lái)描述現(xiàn)實(shí)世界的符號(hào)的解釋，其本身是不存在的，而是人為規(guī)定的。因此，它體現(xiàn)的是一種人所特有的高級(jí)認(rèn)知活動(dòng)的抽象學(xué)習(xí)。語(yǔ)義加工通道加工的內(nèi)容為有意義的符號(hào)信息，這些信息不是來(lái)源于感覺(jué)器官的輸入，而是來(lái)源于知覺(jué)通道和動(dòng)覺(jué)通道。當(dāng)外界信息進(jìn)入知覺(jué)通道和動(dòng)覺(jué)通道時(shí)，有意義的符號(hào)被識(shí)別出來(lái)進(jìn)入到語(yǔ)義加工通道中，按照一定規(guī)則被解釋，經(jīng)過(guò)命題編碼和類比編碼的形式，最終形成命題和意象進(jìn)行存儲(chǔ)。從神經(jīng)機(jī)制的角度分析，當(dāng)外界刺激經(jīng)過(guò)傳輸激活大腦皮層感覺(jué)區(qū)域和運(yùn)動(dòng)區(qū)域后，有意義的信息會(huì)進(jìn)一步激活語(yǔ)言運(yùn)用區(qū)和前額聯(lián)合區(qū)，進(jìn)而形成高級(jí)認(rèn)知活動(dòng)。

在語(yǔ)義通道中存在兩種編碼方式：命題編碼和意象編碼。命題指不依賴于符號(hào)和圖像，以抽象的形式來(lái)表征事物的內(nèi)在意義的一種深層心理表征。例如對(duì)句子而言，不保留音、形等特征，對(duì)圖像而言，不保留具體的知覺(jué)形式，命題只表征其內(nèi)在意義。意象是對(duì)表象的概括和總結(jié)。例如對(duì)桌子而言，意象并不保留其具體特征，只表征其大致的輪廓，這種輪廓是在對(duì)桌子這一類事物總結(jié)和概括的基礎(chǔ)之上得出的。命題和意象的共同點(diǎn)在于二者都是對(duì)外部信息的重構(gòu)，都需要意識(shí)的控制，因此會(huì)產(chǎn)生較多的認(rèn)知負(fù)荷。二者的區(qū)別在于命題是完全抽象的，而意象則保留了一定的形象性。當(dāng)信息在語(yǔ)義通道中傳輸時(shí)，其編碼方式是由信息的特點(diǎn)、內(nèi)容決定的?？臻g結(jié)構(gòu)性強(qiáng)的語(yǔ)義信息會(huì)優(yōu)先采用類比編碼的形式形成意象，而時(shí)間邏輯性強(qiáng)的則會(huì)優(yōu)先采用命題編碼的形式形成命題。

3.動(dòng)覺(jué)加工通道（Kinesthetic processing channel）

動(dòng)覺(jué)是對(duì)身體各部位的位置和運(yùn)動(dòng)狀況的感覺(jué)，也就是肌肉、骨骼和關(guān)節(jié)的感覺(jué)。動(dòng)覺(jué)通道主要用于加工動(dòng)作信息，同知覺(jué)加工通道和語(yǔ)義加工通道一樣，該通道的加工也是以大腦為神經(jīng)基礎(chǔ)。但除此之外，脊髓、小腦和外周神經(jīng)對(duì)該通道的學(xué)習(xí)也發(fā)揮著重要作用。

動(dòng)覺(jué)通道主要是針對(duì)動(dòng)作技能，動(dòng)作技能指通過(guò)練習(xí)鞏固下來(lái)的、自動(dòng)化的動(dòng)作活動(dòng)方式，如寫(xiě)字、騎車、游泳等，是一種程序性知識(shí)的學(xué)習(xí)。對(duì)動(dòng)作技能的學(xué)習(xí)需要經(jīng)過(guò)兩個(gè)過(guò)程：認(rèn)識(shí)和操作。在認(rèn)識(shí)過(guò)程中，學(xué)習(xí)者必須借助于知覺(jué)通道和語(yǔ)義通道的加工作用，知覺(jué)通道對(duì)輸入感覺(jué)信息的加工，首先使學(xué)習(xí)者對(duì)動(dòng)作技能產(chǎn)生一個(gè)初步的感性的認(rèn)識(shí)，語(yǔ)義通道的加工可以使學(xué)習(xí)者從思維的角度掌握動(dòng)作的技巧，使感性認(rèn)識(shí)進(jìn)一步深化和精確，在此基礎(chǔ)上學(xué)習(xí)者會(huì)對(duì)動(dòng)作技能產(chǎn)生一個(gè)較為完整的認(rèn)識(shí)。在第二階段的操作過(guò)程中，學(xué)習(xí)者只需要在認(rèn)識(shí)的指導(dǎo)下，完成各種動(dòng)作，當(dāng)完成正確的動(dòng)作時(shí)，在運(yùn)動(dòng)器官、小腦和大腦皮質(zhì)運(yùn)動(dòng)區(qū)會(huì)形成穩(wěn)定的神經(jīng)結(jié)構(gòu)，進(jìn)而使動(dòng)作自動(dòng)化。但是，從認(rèn)識(shí)到動(dòng)作自動(dòng)化的過(guò)渡并不是一個(gè)簡(jiǎn)單容易的過(guò)程，例如學(xué)習(xí)騎自行車。雖然學(xué)習(xí)者已經(jīng)清楚騎車的步驟，但實(shí)際操作中還會(huì)遇到各種問(wèn)題。隨著科技的發(fā)展，多媒體技術(shù)為動(dòng)作技能的學(xué)習(xí)注入了新的活力，當(dāng)學(xué)習(xí)者進(jìn)行動(dòng)作技能類知識(shí)的學(xué)習(xí)時(shí)，將動(dòng)覺(jué)信息編碼成動(dòng)覺(jué)模型，在此過(guò)程中運(yùn)動(dòng)器官上會(huì)留有動(dòng)覺(jué)信息的記憶，進(jìn)而使學(xué)習(xí)者產(chǎn)生一種最為直接的動(dòng)作經(jīng)驗(yàn)，幫助實(shí)現(xiàn)自動(dòng)化，有效地促進(jìn)動(dòng)作技能的學(xué)習(xí)。綜上所述，多媒體學(xué)習(xí)認(rèn)知模型三通道加工信息類型、編碼方式和編碼后的表征形式可用表2表示。

4.三通道的相互關(guān)系

從上述分析中可以看出知覺(jué)通道、語(yǔ)義通道和動(dòng)覺(jué)通道是三個(gè)相互獨(dú)立的并行加工系統(tǒng)，但三通道之間并不是相互割裂的，而是一個(gè)有機(jī)整體。知覺(jué)通道為整個(gè)多媒體學(xué)習(xí)提供學(xué)習(xí)內(nèi)容的特征信息和有關(guān)學(xué)習(xí)環(huán)境的背景信息，對(duì)學(xué)習(xí)內(nèi)容產(chǎn)生感性的認(rèn)識(shí)；語(yǔ)義通道是在知覺(jué)通道的基礎(chǔ)上進(jìn)一步升華總結(jié)，使感性認(rèn)識(shí)升華成理性認(rèn)識(shí)；動(dòng)覺(jué)通道賦予這種認(rèn)識(shí)過(guò)程主觀能動(dòng)性。三個(gè)通道在構(gòu)成一個(gè)整體時(shí)相互依存，如語(yǔ)義通道意象的形成就是在知覺(jué)通道知覺(jué)表象形成的基礎(chǔ)之上抽象概括而得的；動(dòng)覺(jué)通道加工簡(jiǎn)單的動(dòng)作只需要重復(fù)的操作練習(xí)，但對(duì)復(fù)雜的動(dòng)作技能的學(xué)習(xí)則需要在自動(dòng)化過(guò)程之前借助于知覺(jué)通道和語(yǔ)義通道的作用而完成。

多媒體學(xué)習(xí)三通道假設(shè)對(duì)Mayer通道理論的改進(jìn)之處在于，將通道的劃分標(biāo)準(zhǔn)由原來(lái)的感覺(jué)獲取轉(zhuǎn)向信息處理。在三通道假設(shè)中，筆者將類比和命題兩種編碼從原來(lái)的視覺(jué)通道和聽(tīng)覺(jué)通道中提取出來(lái)，合并成語(yǔ)義通道，用于加工抽象的語(yǔ)義符號(hào)。而在語(yǔ)義通道的基礎(chǔ)之上增加了知覺(jué)通道和動(dòng)覺(jué)通道，用于處理知覺(jué)信息和動(dòng)作信息。這種新的劃分方式是在整合多種編碼理論的基礎(chǔ)之上提出的，并在一定程度上得到了認(rèn)知神經(jīng)科學(xué)的證據(jù)支持，強(qiáng)調(diào)了多媒體學(xué)習(xí)的多元性，擴(kuò)大了多媒體學(xué)習(xí)的研究范圍，進(jìn)一步拓展了多媒體學(xué)習(xí)過(guò)程中知覺(jué)特性、動(dòng)覺(jué)特性和時(shí)間特性的研究。三通道假設(shè)的提出，旨在引起人們對(duì)知覺(jué)學(xué)習(xí)和動(dòng)作學(xué)習(xí)的重視，為三類學(xué)習(xí)行為的整合提供理論依據(jù)。

基金項(xiàng)目：本文是2011年度教育部人文社會(huì)科學(xué)研究規(guī)劃基金項(xiàng)目“三通道多媒體學(xué)習(xí)過(guò)程信息獲取的眼動(dòng)腦電特征與認(rèn)知傳播模型”（編號(hào)：11YJA880058）的階段性研究成果。

作者簡(jiǎn)介：王曉丹，寧波大學(xué)教師教育學(xué)院，碩士，研究方向：多媒體學(xué)習(xí)。

收稿日期：2012年5月18日

編輯：李婷