劉思耘
摘要聯(lián)覺是當(dāng)個(gè)體感受到一種感覺刺激的同時(shí)體驗(yàn)到其它感覺的現(xiàn)象,主要分為強(qiáng)聯(lián)覺和弱聯(lián)覺兩種。本文主要介紹了強(qiáng)聯(lián)覺的各種類型及其相關(guān)腦機(jī)制的研究,分析和比較了前人從結(jié)構(gòu)和認(rèn)知加工角度建構(gòu)的多個(gè)強(qiáng)聯(lián)覺理論模型,總結(jié)了這些模型對(duì)強(qiáng)聯(lián)覺現(xiàn)象腦神經(jīng)機(jī)制的解釋。同時(shí)本文還探討了強(qiáng)聯(lián)覺與其它(如注意、記憶、創(chuàng)造力等)認(rèn)知加工過程的關(guān)系,對(duì)弱聯(lián)覺(即聯(lián)覺隱喻)的研究進(jìn)展和不足也進(jìn)行了分析和總結(jié),指出未來對(duì)聯(lián)覺的研究趨勢應(yīng)集中在弱聯(lián)覺的研究上。
關(guān)鍵詞(強(qiáng)/弱)聯(lián)覺;聯(lián)覺模型;聯(lián)覺隱喻
分類號(hào)B842
1引言
人類與外部世界的接觸是從各種感知覺開始的,不同感官為個(gè)體所帶來的感覺體驗(yàn)是不同的,而這些不同的體驗(yàn)是大腦不同的認(rèn)知加工方式造成的,因此探討各種感知覺現(xiàn)象及其相應(yīng)體驗(yàn)并揭示其內(nèi)在本質(zhì)是非常重要的。聯(lián)覺(synesthesia)是指當(dāng)個(gè)體受到來自一種感覺通道的刺激時(shí)會(huì)同時(shí)自動(dòng)體驗(yàn)到另外一種感覺的現(xiàn)象(Salzinger,2010;Ward&Cytowic,2006),如看到某種顏色的同時(shí)會(huì)聽到某種聲音,品嘗食物或聽音樂時(shí)會(huì)看到明顯的色彩,感覺疼痛時(shí)會(huì)看到某種顏色,等等。聯(lián)覺分為強(qiáng)聯(lián)覺和弱聯(lián)覺兩種(Salzinger,2010;Martino&Marks,2007)。強(qiáng)的聯(lián)覺體驗(yàn)只有少數(shù)人才有,其幾率僅為0.05%,且女性多于男性(Mulvenna&Walsh,2005)。聯(lián)覺者的聯(lián)覺能力通常是終身的,且有遺傳性(Pearce,2007)。研究者們把引起強(qiáng)聯(lián)覺的刺激叫做“誘因”(inducer,),把同時(shí)體驗(yàn)到的知覺叫做“同存”(concurrent),最常見的同存是顏色(color)(Ward,Simner,&Auyeung,2005)。研究發(fā)現(xiàn)聯(lián)覺所持續(xù)的時(shí)間是有差異的(Ward&Mattingley,2006),有些只出現(xiàn)在知覺層面,而有些則保持到了概念層面;因此如果持續(xù)時(shí)間較短的話,會(huì)發(fā)生同存和誘因早期一致而后期不一致的情況,而在不一致的情況下同存會(huì)阻礙誘因刺激的加工。
聯(lián)覺現(xiàn)象的普遍程度在一開始是被低估的(Baron-Cohen,Burt,Smith-Laittan,Harrison,&Bolton,1996),后來人們發(fā)現(xiàn)23人中就可能有1人擁有至少一種類型的聯(lián)覺能力(Simner et al.,2006),由此人們對(duì)聯(lián)覺的關(guān)注和研究才日益重視起來。但這種普遍性還只是針對(duì)強(qiáng)聯(lián)覺而言,對(duì)于弱聯(lián)覺來說,其普遍程度要更高。弱聯(lián)覺主要出現(xiàn)在各類文體的寫作、日常用語以及對(duì)跨通道聯(lián)覺現(xiàn)象描述的欣賞中(Martino&Mark,2007)。弱聯(lián)覺在語言中的具體表現(xiàn)是用語言文字描述多個(gè)通道的感覺,客觀上造成一種感覺向另一種感覺移動(dòng)的情況,如“甜蜜的聲音”,“冰冷的臉色”,“刺鼻的氣味”等普通常見短語;而更為生動(dòng)和有創(chuàng)意的弱聯(lián)覺描述則出現(xiàn)在諸多文學(xué)作品中,如:
(1)像知了坐在森林中的一棵樹上,傾斜下百合花也似的聲音。
——荷馬史詩《伊利亞特》
(2)自行車的鈴聲懸浮在空間
——舒婷《路遇》
(3)他的笑聲……,跳在空中蹦回到他臉上,抽打他的面頰
——張愛玲《第二爐香》
在句子(1)中,作者在聽覺(知了的叫聲)和視覺(白色的百合、百合的形狀)、嗅覺(百合的花香)、觸覺(傾斜導(dǎo)致的重感)之間創(chuàng)造了多感覺通道間的聯(lián)覺;在句子(2)中作者在聽覺(鈴聲)和觸覺(懸浮產(chǎn)生的較輕的壓迫感)之間創(chuàng)造了聯(lián)覺;而在句子(3)中,作者在聽覺(笑聲)和觸覺(抽打產(chǎn)生的痛覺)、空間知覺(跳在空中蹦回來)等多個(gè)感覺間創(chuàng)造了聯(lián)覺。而人們對(duì)這種不同類型及不同復(fù)雜程度的聯(lián)覺形式所產(chǎn)生的相應(yīng)的抽象體驗(yàn)有可能是不同的,可能還會(huì)表現(xiàn)出不同的偏好程度、不同的情緒體驗(yàn)、不同的記憶效果等。
由于弱聯(lián)覺的體驗(yàn)只在人們閱讀到新穎的語言描述時(shí)才會(huì)比較明顯,而對(duì)于習(xí)慣化了的聯(lián)覺短語(如:甜蜜的笑聲)人們一般很難意識(shí)到有這樣的體驗(yàn),這可能是導(dǎo)致研究者對(duì)聯(lián)覺的研究主要集中在強(qiáng)聯(lián)覺類型以及相應(yīng)腦機(jī)制問題上的主要原因。但隨著高科技技術(shù)的發(fā)展以及研究者對(duì)大腦皮層激活狀況觀察手段的成熟,未來對(duì)弱聯(lián)覺現(xiàn)象的探討必將逐步從純粹的修辭分析法過渡到深層的認(rèn)知加工及腦機(jī)制的探討上。而這種可以預(yù)見的趨勢將不僅可以完善對(duì)聯(lián)覺現(xiàn)象及相關(guān)理論模型的探討,更可以促進(jìn)語言研究的發(fā)展。
由于人們更早關(guān)注的是強(qiáng)聯(lián)覺現(xiàn)象,因此與強(qiáng)聯(lián)覺有關(guān)的研究成果比弱聯(lián)覺的研究成果要豐碩得多。本文首先回顧有關(guān)強(qiáng)聯(lián)覺的類型、相關(guān)理論模型及其與其它認(rèn)知能力的關(guān)系,然后分析和討論弱聯(lián)覺的相關(guān)研究,并探討其未來研究發(fā)展趨勢。本文的主要目的在于總結(jié)前人對(duì)強(qiáng)聯(lián)覺的研究成果,分析和討論弱聯(lián)覺研究發(fā)展的空間,期望喚起更多研究者對(duì)弱聯(lián)覺現(xiàn)象的興趣和關(guān)注。
2強(qiáng)聯(lián)覺研究
2.1強(qiáng)聯(lián)覺類型
強(qiáng)聯(lián)覺的類型有很多種,迄今為止所發(fā)現(xiàn)的有63種,其中比較常見的有19種(Ward&Cytowic,2006)。而在常見的強(qiáng)聯(lián)覺中,最常見的是字形一顏色聯(lián)覺(68.8%);其次是時(shí)間一顏色聯(lián)覺(23.3%)及各種聲音,顏色聯(lián)覺(音樂聲音19.2%;一般聲音14%;音樂音符10.6%,語音10.6%)。除此之外,還有顏色-味覺聯(lián)覺(Bayarri,Calvo,Costell,&Duran,2001),;顏色-嗅覺聯(lián)覺(Zellner&Whitten,1999);顏色-溫度聯(lián)覺(Michael&Rolhion,2008;Michael,Galich,Relland,&Prud'hon,2010);嗅覺-觸覺或嗅覺-顏色聯(lián)覺(Stevenson,Tomiczek,&Oaten,2007);顏色-觸覺聯(lián)覺和視覺-觸覺聯(lián)覺(Ward,Banissy,&Jonas,2008);視覺-聽覺聯(lián)覺(Hubbard,2008);時(shí)間-空間聯(lián)覺(Brang,Teuscher,Ramachandran,&Coulson,2010);序列-空間聯(lián)覺(Simner,2009;Ward,Sagiv,&Butterworth,2009);味覺-形狀聯(lián)覺(Spence&Gallace 2011);味覺-聲音聯(lián)覺(Spence&Gallace,2011);字詞-味覺聯(lián)覺:誘導(dǎo)出包括味道、嗅覺和體覺成分的感覺,如“jail”誘發(fā)出“冷硬的培根肉”的感覺(Simner&Haywood,2009;Ward&Simner,2003);語音-味覺聯(lián)覺(Ward&Cytowic,2006);輔音/元音-色彩聯(lián)覺(Ward,Simner,&Auyeung,2005)等等。字形-顏色聯(lián)覺還有性別和人格方面信息(Simner&Holenstein,2007),如A是藍(lán)色的聰明女人,3是綠色的頑皮的男孩,而且似乎數(shù)字越大顏色越深
(Cohen Kadosh,Henik,&Walsh,2007)。從所發(fā)現(xiàn)的這些強(qiáng)聯(lián)覺類型中我們可以看出,與顏色有關(guān)的聯(lián)覺類型是最多的,可以說視覺,特別是顏色,與其它所有感覺類型都有聯(lián)覺的可能,而其它感覺如嗅覺、味覺、觸覺、聽覺則似乎不是這樣。這是一個(gè)值得人們深入探討的現(xiàn)象,我們要弄清楚為什么視覺與其它感覺通道的聯(lián)覺最普遍,而不是其它感覺類型。另外,強(qiáng)聯(lián)覺中最普遍的聯(lián)覺類型在弱聯(lián)覺中是否也是最普遍的呢?如果是的話,似乎可以推測出兩者之間有相似的神經(jīng)加工機(jī)制;如果不是的話,似乎表明弱聯(lián)覺加工有其獨(dú)特的地方。關(guān)于這些疑問,我們最終需要研究者們提供確切的證據(jù)來進(jìn)行論證。
2.2強(qiáng)聯(lián)覺神經(jīng)機(jī)制
人類大腦在認(rèn)知上具有模塊化特征,這個(gè)在認(rèn)知科學(xué)界已基本達(dá)成共識(shí),即大腦無論從解剖學(xué)的角度還是功能的角度都已分化出特別的區(qū)域來加工特別的刺激,以求達(dá)到最大的效率。但是模塊和模塊之間在某些情況下會(huì)出現(xiàn)共同激活的情況,這是因?yàn)橛行┐碳ぐ卸喾N不同特征,分別由不同模塊來加工。但聯(lián)覺的情況是在只有一種類型刺激的情況下,無關(guān)聯(lián)的模塊也會(huì)同時(shí)得到激活,這是引起研究者濃厚興趣的地方。
關(guān)于明顯的強(qiáng)聯(lián)覺現(xiàn)象人們想知道的是聯(lián)覺者的聯(lián)覺體驗(yàn)是真實(shí)的還是虛假的。當(dāng)前的各種腦成像技術(shù)和手段為這個(gè)疑問提供了有力證據(jù),如人們用fMRI技術(shù)發(fā)現(xiàn)聯(lián)覺者在知覺到所誘發(fā)的感覺時(shí),相應(yīng)的腦區(qū)也有激活(Spector&Maurer,2009;Osterbauer et al.,2005),而且研究也發(fā)現(xiàn)調(diào)節(jié)聯(lián)覺過程中的大腦聯(lián)結(jié)和調(diào)節(jié)正常知覺過程的大腦聯(lián)結(jié)是相似的,兩者共享相似的神經(jīng)機(jī)制(Spector&Maurer,2009;Laeng,Hugdahl,&Specht,2011)。但是兩者在聯(lián)結(jié)強(qiáng)度上有所區(qū)別,如有研究采用彌散張量成像(diffusion tensor imaging,DTI)方法發(fā)現(xiàn)導(dǎo)致聯(lián)覺的是一種超聯(lián)結(jié)(hyperconnectivity),相對(duì)于非聯(lián)覺者來說,這種聯(lián)結(jié)更強(qiáng)(Rouw&Scholte,2007)。這些腦成像證據(jù)有力地證實(shí)了聯(lián)覺的真實(shí)存在。
前人在使用了不同腦成像方法對(duì)強(qiáng)聯(lián)覺的腦神經(jīng)機(jī)制作了初步探討后發(fā)現(xiàn),和強(qiáng)聯(lián)覺有關(guān)的腦區(qū)主要在梭狀回(fusiform gyrus)(V4)(尤其在左V4)和頂葉(程大志,隋光遠(yuǎn),陳春萍,2009;Esterman,Verstynen,Ivry,&Robertson,2006;Spector&Maurer,2009;Weiss&Fink,2009;Noesselt et,al.,2007);但也有研究發(fā)現(xiàn)大腦的上顳溝(superior temporal sulcus)也有參與(Noesseltet al.,2007)。但強(qiáng)聯(lián)覺腦區(qū)激活定位的研究成果似乎與研究者所研究的強(qiáng)聯(lián)覺類型有密切關(guān)系,如梭狀回(v4)區(qū)的發(fā)現(xiàn)就是因?yàn)榇蠖鄶?shù)強(qiáng)聯(lián)覺與顏色有關(guān),由此得到研究者最多的關(guān)注。但實(shí)際上還有很多其它類型的聯(lián)覺現(xiàn)象,雖然出現(xiàn)的頻率不高,但如果能夠?qū)ζ淠X區(qū)激活進(jìn)行探討,相信會(huì)有更多不同腦區(qū)的發(fā)現(xiàn)。
而在少量用ERP來探測聯(lián)覺現(xiàn)象的研究中,研究者利用一些公認(rèn)的、標(biāo)記正常認(rèn)知功能的ERP成分來探討聯(lián)覺體驗(yàn)和真實(shí)體驗(yàn)之問的差異。如有研究者利用N1,P3b,及pSW(positive Slow Wave)三個(gè)成分來觀察誘發(fā)空間感的時(shí)間線索(一年當(dāng)中的不同月份誘發(fā)不同的空間位置感覺)是否能夠有效地轉(zhuǎn)移時(shí)間-空間聯(lián)覺者的注意力以及產(chǎn)生相應(yīng)的知覺后效(Teuscher,Brang,Ramachandran,&Coulson,2010),這是因?yàn)樵谇叭说难芯恐性缫寻l(fā)現(xiàn)N1的晚成分和空間注意有關(guān),P3b和誘發(fā)刺激的出現(xiàn)頻率、刺激的顯著性有關(guān),pSW是隨P3b產(chǎn)生的小于2Hz的低空頻波。這些成分可以幫助確定聯(lián)覺所導(dǎo)致的腦激活與真實(shí)刺激所導(dǎo)致的激活是否相似。還有研究者利用N400成分在Stroop任務(wù)中對(duì)反應(yīng)沖突情況敏感的特性來探測意識(shí)對(duì)面孔-顏色聯(lián)覺者的聯(lián)覺體驗(yàn)重要性(Terhune,Cardena,&Lindgren,2010)。事實(shí)證明,利用現(xiàn)有已知的ERP成分探測聯(lián)覺體驗(yàn)的產(chǎn)生是可行的,但也可能還存在一些關(guān)于聯(lián)覺的特異ERP成分,這有待于將來在實(shí)驗(yàn)設(shè)計(jì)和方法上作出突破。
2.3基于強(qiáng)聯(lián)覺的理論建構(gòu)
國內(nèi)外已有相當(dāng)多的研究試圖解釋強(qiáng)聯(lián)覺產(chǎn)生的原因,并建構(gòu)了相關(guān)的腦機(jī)制模型和假說。但這些模型和假說都還處于建構(gòu)階段,未能在業(yè)界形成廣泛統(tǒng)一的認(rèn)可,均需要更多的證據(jù)加以支持和補(bǔ)充說明。但總的來說,這些理論模型都圍繞著一個(gè)主題在討論,那就是聯(lián)覺者的大腦結(jié)構(gòu)具有特異性嗎?如果有的話,是哪些?如果沒有,那是什么原因?qū)е侣?lián)覺現(xiàn)象的?分析現(xiàn)有的理論模型,可以把當(dāng)前的理論模型分成兩派,一派認(rèn)為聯(lián)覺者和非聯(lián)覺者的大腦結(jié)構(gòu)是有差異的,而另一派則認(rèn)為沒有,聯(lián)覺是由加工的特異性所導(dǎo)致的。
2.3.1主張結(jié)構(gòu)差異的理論模型:
關(guān)于大腦結(jié)構(gòu)性差異的假設(shè)目前有兩種,一種是神經(jīng)通路變異假說,偏向于認(rèn)為這種差異是天生的、自然發(fā)育導(dǎo)致的;第二種是相鄰交叉激活模型,認(rèn)為腦區(qū)的相鄰導(dǎo)致了后天長期特異性的加工,從而對(duì)大腦產(chǎn)生了結(jié)構(gòu)性的改變。
神經(jīng)通路變異假說認(rèn)為強(qiáng)烈跨通道調(diào)節(jié)效應(yīng)是神經(jīng)生物通路改變的結(jié)果,即正常的模塊化加工遭到破壞或者在神經(jīng)通路上受到重新組合,形成新的通路和聯(lián)結(jié)(Bargary&Mitchell,2008;Michael,et al.,2010)。持該觀點(diǎn)的還認(rèn)為所有新生兒在出生伊始有可能只有一種感覺,都是某種形式的聯(lián)覺者。但聯(lián)覺者在新生兒階段其大腦的分化(pruning)過程可能受到抑制,導(dǎo)致他們到后來還保留了這個(gè)能力(Machler,2009)。這個(gè)觀點(diǎn)得到一些研究結(jié)果的支持,如發(fā)現(xiàn)字形-顏色聯(lián)覺者的大腦灰質(zhì)體積在某些部位更大些(Weiss&Fink,2008),而且其不同腦區(qū)的神經(jīng)聯(lián)結(jié)更強(qiáng)(Machler,2009)。還有一類證據(jù)來自于大腦偏側(cè)化的機(jī)理,如有研究發(fā)現(xiàn),由于大腦功能偏側(cè)化的緣故,右側(cè)大腦對(duì)熱的感覺更敏感,而左側(cè)大腦對(duì)冷的感覺更敏感,當(dāng)顏色-溫度聯(lián)覺者用右鼻孔去嗅某種顏色時(shí),才能夠感覺到一種冷涼的感覺;而用左鼻孔去嗅另一種顏色時(shí),才能夠感受到溫?zé)岬母杏X(Michael et al.,2010)。
還有研究者提出“相鄰理論”(Adjacency Theory)(Ramachandran&Hubbard,2001),認(rèn)為聯(lián)覺的產(chǎn)生是因?yàn)樨?fù)責(zé)跨通道信息加工的腦區(qū)是相鄰的。如在字形一顏色聯(lián)覺現(xiàn)象中,字形的再認(rèn)區(qū)位于左梭狀回,與V4顏色區(qū)相鄰。但是另有研究在探討字形-味覺聯(lián)覺時(shí)發(fā)現(xiàn),味覺皮層分布在大腦兩側(cè)的前額葉、頂蓋(parietal opercula)及腦島
(insula)。這幾個(gè)區(qū)域明顯和左梭狀回的字形再認(rèn)區(qū)不相鄰,也離Wernicke音素區(qū)很遠(yuǎn)。盡管所有的感覺通道和內(nèi)臟環(huán)境(visceral milieu)在腦島得到表征,而且腦島參與言語知覺和產(chǎn)生的過程,但僅僅相鄰是不足以充分解釋聯(lián)覺的機(jī)制的(Cytowic,2003)。后來提出的交叉激活模型(Cross-Activation Model)在相鄰理論的基礎(chǔ)上作出了進(jìn)一步的假設(shè),認(rèn)為腦區(qū)的相鄰導(dǎo)致了不同腦區(qū)間的超聯(lián)接(hyperconnectivity),改變了大腦的神經(jīng)加工通路,并引起大腦結(jié)構(gòu)的變化。研究者以字形-顏色聯(lián)覺者為例,認(rèn)為字形-顏色聯(lián)覺的產(chǎn)生是由于涉及字形加工的后顳字形區(qū)(posterior temporal grapheme areas,PTGA)和鄰近的位于梭狀回和舌溝(lingual sulcus)的顏色加工區(qū)(V4)之間有超聯(lián)結(jié)(Brang,Hubbard,et al.,2010)。這個(gè)模型強(qiáng)調(diào)了這個(gè)超聯(lián)結(jié)的作用,認(rèn)為正是這種超聯(lián)結(jié)導(dǎo)致了跨通道的激活。有好幾個(gè)研究結(jié)果證實(shí)了這個(gè)觀點(diǎn),如發(fā)現(xiàn)字形一顏色聯(lián)覺者的下顳皮層(inferior temporal lobe)和非聯(lián)覺者明顯不一樣(Rouw&Scholte,2007),,而且聯(lián)覺者不僅灰質(zhì)體積要大一些(Jancke,Beeli,Eulig,&Hanggi,2009;Weiss&Fink,2008,),顏色選擇區(qū)域(包括V4)也要大些(Hubbard,Arman,Ramachandran,&Boynton,2005;Rouw&Scholte,2007;Speding,Prvulovic,Linden,Singer,&Stirn,2006)。也有用時(shí)間和空間分辨率均較好的MEG技術(shù)來探測字形和顏色激活時(shí)間和激活區(qū)域,發(fā)現(xiàn)兩者不僅區(qū)域相鄰,而且更重要的是時(shí)間幾乎是同時(shí)的(Brang,Hubbard,et al.,2010),進(jìn)一步支持了字形區(qū)和顏色激活區(qū)的超聯(lián)結(jié)方式。
2.3.2主張加工特異性的理論模型
主張加工特異性的理論模型比較繁多,并各持一方觀點(diǎn),沒有哪種觀點(diǎn)得到廣泛認(rèn)可。這可能是源于人們至今還未徹底揭示各種聯(lián)覺現(xiàn)象的加工過程及其本質(zhì),各理論模型間的交叉點(diǎn)和獨(dú)特性還未得到圓滿的解釋,由此也可知這方面的研究工作還有待進(jìn)一步加強(qiáng)。主張加工特異性的理論模型大致有四種,具體內(nèi)容如下:
習(xí)得論認(rèn)為強(qiáng)烈跨通道調(diào)節(jié)效應(yīng)是學(xué)習(xí)的結(jié)果,是個(gè)體對(duì)不同感覺間的對(duì)應(yīng)關(guān)系進(jìn)行長期學(xué)習(xí)和體驗(yàn)后形成的跨通道間的對(duì)應(yīng)(Michael et al.,2010)。聯(lián)覺習(xí)得的觀點(diǎn)得到所有語言聯(lián)覺以及食物味覺方面的支持,因?yàn)檎Z言和食物味道的體驗(yàn)是通過后天經(jīng)驗(yàn)習(xí)得的,所有和語言及食物味道一一對(duì)應(yīng)的關(guān)系也都應(yīng)該是后天逐步形成的。如語言的音素、字形、語素、字詞、詞匯重音和詞匯語義等均能觸發(fā)聯(lián)覺體驗(yàn),某些詞匯也能誘發(fā)某種特別食物的味道(如“slope”可以誘發(fā)熟透瓜果的味道)。因此可以說后天的學(xué)習(xí)在聯(lián)覺形成過程中起到不可忽略的作用(Sininer,2007)。
然而Cohen Kadosh&Walsh(2008)認(rèn)為結(jié)構(gòu)性差異的觀點(diǎn)并不成熟,那只表明了一種相關(guān)的關(guān)系,不能表明導(dǎo)致聯(lián)覺產(chǎn)生的原因。一個(gè)可行的觀點(diǎn)是聯(lián)覺者與非聯(lián)覺者并沒有皮層結(jié)構(gòu)上的差異,而是由于腦區(qū)皮層抑制的解脫(CorticalDisinhibition Hypothesis)造成的?;谶@個(gè)理論,研究者還進(jìn)一步提出了兩個(gè)假設(shè):腦區(qū)間的抑制解脫和腦區(qū)內(nèi)的抑制解脫。發(fā)育早期不同腦區(qū)間的抑制解脫可能最終導(dǎo)致了不同皮層的聯(lián)結(jié)方式,這就好比Hebb規(guī)則(Hebb's rule)所說的很多個(gè)細(xì)胞同時(shí)激活最終導(dǎo)致突觸力量的顯著增強(qiáng)。抑制解脫假設(shè)得到一些研究的支持(Brosch,Selezneva,&Scheich,2005;Fitzgibbon,Giummarra,Georgiou-Karistianis,Enticott,&Bradshaw,2010)。也有研究者把這種模型叫做皮層抑制解脫反饋模型(cortical disinhibited feedback model),是基于對(duì)字形一顏色聯(lián)覺的研究提出的,認(rèn)為這種聯(lián)覺是由于先前的反饋聯(lián)結(jié)抑制得到解除造成的。在這個(gè)研究中,作者采用MEG來探測V4區(qū)和PTGA區(qū)激活的機(jī)會(huì)是否是同時(shí)的(如交叉激活理論所說的那樣),或者說V4的激活僅僅只在最初的字形加工階段完成后才發(fā)生(如反饋抑制解除理論所預(yù)測的那樣)。結(jié)果發(fā)現(xiàn),聯(lián)覺者在PTGA區(qū)的激活水平和控制組被試的沒有顯著差異(表明他們有相似的字形加工機(jī)制),而聯(lián)覺者V4區(qū)的激活顯著大于控制組被試(Brang,Hubbard,et al.,2010),支持了皮層抑制解脫假說。
和皮層抑制解脫假設(shè)有些不一樣的是基于字形一顏色聯(lián)覺類型提出的重復(fù)加工模型(Re-EntrantProcessing)(Hubbard,2007;Smilek,Dixon,Cudahy,&Merikle,2001;Myles,Dixon,Smilek,&Merikle,2003)。該模型認(rèn)為由于受到認(rèn)知加工環(huán)境中自上而下信息的影響,形狀信息在從正常的V1區(qū)傳導(dǎo)到V4區(qū),然后從后下顳葉區(qū)(posterior inferior temporal region)傳入前下顳葉區(qū)時(shí),神經(jīng)傳輸發(fā)生了異常,導(dǎo)致信息從前下顳葉區(qū)重新進(jìn)入后下顳葉區(qū)和V4區(qū),得到二次加工,由此導(dǎo)致顏色的聯(lián)覺。
還有研究者從信息整合的角度解釋強(qiáng)聯(lián)覺現(xiàn)象,提出超捆綁式(Hyper-Binding)理論假說(Esterman et al.,2006;Hubbard,2007;Robertson,2003)。該理論認(rèn)為由于大腦的頂葉負(fù)責(zé)整合各種信息的不同特征,但在過度激活的情況下頂葉的這種整合機(jī)制會(huì)把一些不“應(yīng)該”捆綁的特征整合在一起了。這個(gè)理論從某種角度看與前文所述的交叉激活模型有相似之處,認(rèn)為聯(lián)覺產(chǎn)生的根本原因是發(fā)生了過度激活,但不同的是超捆綁式理論假說并不認(rèn)為由此導(dǎo)致了大腦結(jié)構(gòu)的變化。
最近還有人提出層疊交叉調(diào)節(jié)式(cascaded cross-tuning,CCT)聯(lián)覺者模型來解釋字形一顏色聯(lián)覺現(xiàn)象(Brang,Hubbard,et al.,2010),認(rèn)為在聯(lián)覺者中字形區(qū)和V4顏色區(qū)之間的聯(lián)結(jié)處于一種競爭狀態(tài),而聯(lián)覺到的顏色在字形還未被整合時(shí)勝出。該模型預(yù)測那些共享某些特征(如線條、曲線等)的字形應(yīng)該激活相似的聯(lián)覺色彩,而相關(guān)的研究結(jié)果證實(shí)了這個(gè)假設(shè),表明在形狀上更相似的字形,其相應(yīng)的聯(lián)覺色彩也更相似,支持了CCT的聯(lián)覺模型,表明誘發(fā)聯(lián)覺色彩的過程發(fā)生在知覺加工的早期。
2.4強(qiáng)聯(lián)覺與其它認(rèn)知能力的關(guān)系
除了關(guān)注聯(lián)覺現(xiàn)象的腦機(jī)制,研究者們還想
知道聯(lián)覺的加工到底出現(xiàn)在認(rèn)知加工的哪個(gè)階段,有哪些后效的影響或影響因素(Ward&Mattingley,2006)等。盡管到目前為止對(duì)這幾個(gè)問題還沒有十分明確的答案,但是研究者已從聯(lián)覺與注意力、記憶力、創(chuàng)造力及認(rèn)知加工方式的關(guān)系上獲得了某些啟示,如發(fā)現(xiàn)注意力是調(diào)節(jié)聯(lián)覺的一個(gè)重要因素(Rich&Mattingley,2010;Smilek,Callejas,Dixon,&Merikle,2007;Smilek,Dixon,&Merikle,2003;Palmeri,Blake,Marois,F(xiàn)lanery,&Whetsell,2002;Sagiv,Heer,&Robertson,2006);某些類型的強(qiáng)聯(lián)覺者表現(xiàn)出記憶的優(yōu)勢(Smilek et al.,2001),盡管這種優(yōu)勢不是很普遍(Rothen&Meier,2010);還發(fā)現(xiàn)與高創(chuàng)造力有一定聯(lián)系(Ward,Thompson-Lake,Ely,&Kaminski,2008);另外,認(rèn)知加工情境也會(huì)直接影響聯(lián)覺者的聯(lián)覺體驗(yàn)(Barnett&Newell,2008;Dixon,Smilek,Duffy,Zanna,&Merikle,2006;Jansari,Spiller,&Redfern,2006)。所有這些證據(jù)表明,雖然聯(lián)覺的加工階段還不是很明朗,但至少我們知道聯(lián)覺的產(chǎn)生可能是無意識(shí)的,而且聯(lián)覺的類型對(duì)聯(lián)覺者在其它認(rèn)知能力(如創(chuàng)造力)上的表現(xiàn)起到不可忽略的作用。對(duì)于聯(lián)覺的認(rèn)知加工與其它認(rèn)知能力間的關(guān)系還有待進(jìn)一步研究。
3弱聯(lián)覺研究
弱聯(lián)覺最主要的表現(xiàn)形式為聯(lián)覺隱喻。聯(lián)覺隱喻是隱喻的一種,屬于概念性隱喻。它以語言文字為依托,關(guān)注的是聯(lián)覺體驗(yàn)在文字上的建構(gòu)而不是多種感知覺的建構(gòu)(Tsur,1992),反映的是思維的方式和內(nèi)容。隱喻的認(rèn)知理論認(rèn)為隱喻在人們的生活中是無處不在的,它是人們理解抽象事物并形成相關(guān)概念的一種方法和手段(e.g.:Lakoff,1986;1987,1993;Lakoff&Johnson,1980,1999;Lakoff&Turner,1989;Turner,1991)。早先認(rèn)知語言學(xué)家就隱喻的認(rèn)知加工機(jī)制提出的理想化認(rèn)知模型(idealized cognitive models,ICMs)(Lakoff,1987)將語言加工分為四種類型:命題(propositional)、意象圖式(image-schematic)、隱喻(metaphoric)、轉(zhuǎn)喻(metonymic)和象征(symbolic)。其中意象圖式被認(rèn)為是最基本的一種認(rèn)知模式,人類在形成各種概念之前均在這個(gè)層面形成最基本的感知覺體驗(yàn),這些體驗(yàn)在后期人類與外界更為頻繁與復(fù)雜地交互過程中,通過格式塔知覺、肌肉運(yùn)動(dòng)及相應(yīng)豐富的心理表象,形成更為復(fù)雜的體驗(yàn)和概念(Lakoff,1987)。
研究者認(rèn)為聯(lián)覺隱喻的認(rèn)知模式主要由意象圖式(image-schema)和隱喻兩部分組成,即某一感官范疇的認(rèn)知域?qū)α硪桓泄俜懂牭恼J(rèn)知域的映射,抑或源域(source domain)對(duì)目標(biāo)域(target domain)的映射(王志紅,2005)。人類的感知覺通道分為五種,由低到高依次為:觸覺、味覺、嗅覺、聽覺和視覺(Yu,2003)。而文學(xué)創(chuàng)作上的聯(lián)覺在不同感知覺域間的投射并不是隨意的,而是有選擇性的,表現(xiàn)在它們跨通道轉(zhuǎn)移的方向上。如Ullmann(1959,轉(zhuǎn)引自Yu,2003)在研究了英文、法文和匈牙利文的詩歌后提出文學(xué)上的聯(lián)覺,不論種族、年齡、國籍或性格,存在著共同的理解基礎(chǔ),表現(xiàn)在三種相似的聯(lián)覺傾向上:a)層次分布:不同感知覺通道間的轉(zhuǎn)換通常是由低到高的,即觸覺味覺嗅覺聽覺視覺;b)處于最低感覺層次的觸覺是建構(gòu)聯(lián)覺轉(zhuǎn)換的主要來源;c)聽覺,而不是視覺,是聯(lián)覺轉(zhuǎn)換的主要目的通道。Yu(2003)在研究了漢語聯(lián)覺隱喻詞匯之后發(fā)現(xiàn),漢語聯(lián)覺隱喻也大致遵循Ullmann所提出的幾個(gè)聯(lián)覺建構(gòu)規(guī)律,同時(shí)發(fā)現(xiàn)漢語還有一些特別的地方,就是表示維度方向的詞匯不僅被轉(zhuǎn)化成色彩和聲音,還轉(zhuǎn)化成味覺和嗅覺。
總的來說,聯(lián)覺隱喻的認(rèn)知研究還處于嘗試階段,研究成果相對(duì)比較零散。大部分關(guān)于聯(lián)覺隱喻的研究是從修辭或語言應(yīng)用的角度去描述的,而這并不能從本質(zhì)上揭示人類加工聯(lián)覺隱喻的過程。由于聯(lián)覺隱喻是隱喻的一種,但同時(shí)又具有其自身的特點(diǎn),因此聯(lián)覺隱喻的加工在哪些方面符合一般隱喻加工的特點(diǎn),又在哪些方面有其特殊性是值得探討的。盡管腦成像證據(jù)有力地證實(shí)了強(qiáng)聯(lián)覺的真實(shí)存在,但作為弱聯(lián)覺的聯(lián)覺隱喻及其相關(guān)體驗(yàn)還未得到充分的腦機(jī)制方面的探索。隨著越來越多的證據(jù)顯示強(qiáng)聯(lián)覺現(xiàn)象與大腦特定激活部位或方式之間的特定關(guān)聯(lián),相信人們也能夠用同樣的手段揭示弱聯(lián)覺體驗(yàn)的認(rèn)知加工機(jī)制及其腦激活方式。
4結(jié)論與展望
人類的感覺不僅對(duì)我們與外部世界的日常交往有重要意義,還對(duì)人與人之間的日常交流有重要意義。我們常常并未意識(shí)到我們?cè)谌粘U勗捴杏卸嘁蕾囄覀冏陨淼母杏X系統(tǒng),我們不僅在書面上依賴它,還在日常對(duì)話中從隱喻的角度去使用它。有時(shí)一種感覺的隱喻用法比其書面用法更頻繁,更有效,以至有時(shí)某個(gè)感覺只會(huì)用于隱喻形式(Salzinger,2010)。
人類大腦可能存在普遍跨通道聯(lián)結(jié)的現(xiàn)象,這是大腦在長期進(jìn)化之后為了提升對(duì)客體和事件的指認(rèn)速度和準(zhǔn)確率以及對(duì)合適反應(yīng)的選擇所獲取的一種能力,只是大部分個(gè)體對(duì)這種微弱形式的跨通道交互作用沒有明顯的意識(shí)(Evans&Treisman 2010)。比如有研究發(fā)現(xiàn)不管是聯(lián)覺者還是非聯(lián)覺者,他們都會(huì)把音高較高的聲音和更為明亮的光聯(lián)系起來(Ward,Huckstep,&Tsakanikos,2006),這個(gè)暗示了聯(lián)覺在普通人身上存在的可能性。雖然強(qiáng)聯(lián)覺現(xiàn)象在研究上具有一定優(yōu)勢,如在觀察聯(lián)覺者的腦激活時(shí)更容易觀察到他們與非聯(lián)覺者之間的差異,但考慮到強(qiáng)聯(lián)覺者在人群中的比例畢竟占少數(shù),在強(qiáng)聯(lián)覺者身上所獲取的研究結(jié)果對(duì)正常認(rèn)知模型的借鑒具有一定的局限性,因此有必要對(duì)大多數(shù)群體所擁有的弱聯(lián)覺現(xiàn)象進(jìn)行研究和探討,由此才可推廣所建立起來的相應(yīng)的認(rèn)知模型。
漢語的日常用語及文學(xué)作品中充滿了大量的聯(lián)覺隱喻,是我們研究弱聯(lián)覺現(xiàn)象并探究其本質(zhì)的理想的材料。國內(nèi)諸多研究人員對(duì)漢語隱喻的認(rèn)知加工及相關(guān)ERP神經(jīng)成像的研究已有較多成果(如:王小潞,2009;梳德明,劉電芝,2009),但對(duì)聯(lián)覺隱喻的研究還不太普遍,最近的研究中只有段紅(2010)比較了漢語和英語中味覺和嗅覺聯(lián)覺隱喻的差異,并從認(rèn)知神經(jīng)科學(xué)和認(rèn)知語言學(xué)的角度探討了聯(lián)覺隱喻體驗(yàn)的基礎(chǔ)??偟恼f來,對(duì)于聯(lián)覺隱喻的研究需要跳出純語言研究的圈子,從認(rèn)知神經(jīng)信息加工的角度提供充分的實(shí)證證據(jù)與討論。因此,未來對(duì)弱聯(lián)覺(即聯(lián)覺隱喻)現(xiàn)象的探討還有賴于從認(rèn)知神經(jīng)加工的角度去分析,同時(shí)輔助以現(xiàn)代高科技實(shí)驗(yàn)技術(shù),如眼動(dòng)追蹤、ERP腦電記錄、fMRI等,才有望揭示其內(nèi)在的工作機(jī)制和大腦加工過程。