陳 彧，黃金峰，陳彥婷

（1.天津理工大學(xué)a.聾人工學(xué)院，b.馬克思主義學(xué)院，天津 300384；2.筑波大學(xué) 人類綜合科學(xué)學(xué)術(shù)院，日本茨城縣 305-8577）

病理語(yǔ)音是指罹患各類聽(tīng)力言語(yǔ)等相關(guān)疾病的 人群因自身發(fā)音障礙而產(chǎn)出的異常語(yǔ)音[1]。其中，耳聾特別是學(xué)語(yǔ)前耳聾（語(yǔ)前聾）是造成病理語(yǔ)音現(xiàn)象的主要疾病之一。由于耳聾發(fā)生在語(yǔ)言能力形成之前，語(yǔ)前聾人的聽(tīng)皮質(zhì)無(wú)法獲取聽(tīng)覺(jué)刺激并形成刺激與意義之間的聯(lián)系，致使這一群體極易在實(shí)現(xiàn)聽(tīng)力通道重構(gòu)、接受言語(yǔ)康復(fù)后仍然面臨嚴(yán)重的病理語(yǔ)音問(wèn)題，從而對(duì)其人際交往、接受教育、融入社會(huì)等帶來(lái)嚴(yán)峻地挑戰(zhàn)。

病理語(yǔ)音評(píng)測(cè)是評(píng)估人工助聽(tīng)、輔聽(tīng)工具使用和言語(yǔ)康復(fù)訓(xùn)練工作效果的重要方法。目前，病理語(yǔ)音評(píng)測(cè)主要有兩條路徑，即基于言語(yǔ)治療師聽(tīng)辯的主觀評(píng)估[2-3]和基于語(yǔ)音聲學(xué)測(cè)量的客觀評(píng)估[4-5]。當(dāng)前，主觀評(píng)估主要依靠言語(yǔ)治療師個(gè)體性的主觀評(píng)測(cè)，缺乏多人評(píng)測(cè)結(jié)果的綜合比對(duì)，具有較強(qiáng)的主觀性。而客觀評(píng)估雖已在參數(shù)選取和測(cè)評(píng)方面取得了一定進(jìn)展，但仍缺乏可靠的及將主、客觀評(píng)估結(jié)合起來(lái)的病理語(yǔ)音評(píng)測(cè)工具。

鑒于目前國(guó)內(nèi)外尚未有針對(duì)漢語(yǔ)的病理語(yǔ)音的評(píng)估工具，本項(xiàng)目組開(kāi)發(fā)了一套病理語(yǔ)音規(guī)模主觀評(píng)測(cè)系統(tǒng)，分別邀請(qǐng)多人使用該系統(tǒng)對(duì)一組包括語(yǔ)前聾兒病理語(yǔ)音和健聽(tīng)兒童正常語(yǔ)音等語(yǔ)音數(shù)據(jù)開(kāi)展主觀評(píng)測(cè)，將主觀評(píng)測(cè)結(jié)果與病理語(yǔ)音的聲學(xué)測(cè)量數(shù)據(jù)進(jìn)行比對(duì)，以檢驗(yàn)使用該系統(tǒng)的規(guī)模主觀評(píng)測(cè)結(jié)果的評(píng)測(cè)效果，為改進(jìn)該系統(tǒng)、并進(jìn)一步設(shè)計(jì)將主、客觀評(píng)估結(jié)合起來(lái)的評(píng)測(cè)工具提供思路。

1 病理語(yǔ)音規(guī)模主觀評(píng)測(cè)系統(tǒng)

在特定語(yǔ)言社團(tuán)中，作為非專家的母語(yǔ)者具有天然的語(yǔ)音質(zhì)量評(píng)判能力。因此，在邀請(qǐng)非專家評(píng)測(cè)者開(kāi)展發(fā)音質(zhì)量評(píng)判時(shí)，當(dāng)評(píng)判者達(dá)到一定數(shù)量，所做判斷將更為收斂、且評(píng)判結(jié)果存在較好的客觀性。

基于這一理念，課題組利用Matlab（版本號(hào)：2019a）[6]開(kāi)發(fā)了病理語(yǔ)音規(guī)模主觀評(píng)測(cè)系統(tǒng)（speech subjective evaluation system traintng model，SSEST）。其中，該系統(tǒng)使用了Voicebox工具箱進(jìn)行語(yǔ)音信號(hào)處理，采用了Guide工具模塊進(jìn)行用于交互的圖形界面設(shè)計(jì)，目前系統(tǒng)版本為2.6，語(yǔ)音主觀評(píng)測(cè)系統(tǒng)主界面如圖1所示。

圖1 語(yǔ)音主觀評(píng)測(cè)系統(tǒng)主界面Fig.1 The main interface of subjective assessment system of speech sound

目前，該系統(tǒng)有“評(píng)測(cè)人信息錄入”、“設(shè)置評(píng)測(cè)參數(shù)”和“導(dǎo)入訓(xùn)練材料”3個(gè)主菜單組成。其中，“評(píng)測(cè)人信息錄入”菜單用以錄入評(píng)測(cè)人姓名、年齡和有無(wú)病理評(píng)測(cè)經(jīng)驗(yàn)等背景信息；“設(shè)置評(píng)測(cè)參數(shù)”用以設(shè)置空白界面顯示時(shí)長(zhǎng)、評(píng)測(cè)音播放次數(shù)和提示音等；“導(dǎo)入訓(xùn)練材料”用以導(dǎo)入訓(xùn)練和評(píng)測(cè)材料的位置索引信息文件，導(dǎo)入該文件后，系統(tǒng)自動(dòng)對(duì)評(píng)測(cè)語(yǔ)音數(shù)據(jù)進(jìn)行隨機(jī)亂序。依次完成3個(gè)菜單的設(shè)置后，系統(tǒng)會(huì)自動(dòng)生成一個(gè)評(píng)測(cè)人數(shù)據(jù)集以記錄評(píng)測(cè)人的數(shù)據(jù)。評(píng)測(cè)過(guò)程中所有設(shè)置菜單被鎖定，均將無(wú)法再行修改并自動(dòng)進(jìn)入語(yǔ)音主觀評(píng)測(cè)環(huán)節(jié)。

評(píng)測(cè)開(kāi)始后，軟件界面右側(cè)會(huì)出現(xiàn)評(píng)測(cè)開(kāi)始時(shí)間、當(dāng)前評(píng)測(cè)項(xiàng)目等信息，并提供播放和提交等操作選項(xiàng)；界面左側(cè)上半部分出現(xiàn)待評(píng)測(cè)項(xiàng)目寬帶語(yǔ)譜圖，用以展示語(yǔ)音的聲學(xué)特征；下半部分則出現(xiàn)評(píng)測(cè)者在聽(tīng)辯后所需回答的問(wèn)題。其中，主要問(wèn)題包括輸入所聽(tīng)到的音節(jié)讀音拼寫、給所聽(tīng)到音節(jié)的聲韻調(diào)分別打分等。聲、韻和調(diào)打分取值范圍從最差至最好依次為1-5分，如“無(wú)法分辨”則賦值為0分。在每次評(píng)測(cè)任務(wù)過(guò)程中，評(píng)測(cè)人都可以通過(guò)點(diǎn)擊“再次播放”按鈕來(lái)反復(fù)聽(tīng)辯評(píng)測(cè)語(yǔ)音，以得到最準(zhǔn)確的評(píng)測(cè)結(jié)果，提高評(píng)測(cè)數(shù)據(jù)的準(zhǔn)確性和可靠性。

在評(píng)測(cè)過(guò)程中，評(píng)測(cè)者可以隨時(shí)關(guān)閉系統(tǒng)退出評(píng)測(cè)，已完成的評(píng)測(cè)結(jié)果會(huì)自動(dòng)保存在評(píng)測(cè)人數(shù)據(jù)集中以便再次展開(kāi)評(píng)測(cè)。下次評(píng)測(cè)開(kāi)始時(shí)，評(píng)測(cè)會(huì)自動(dòng)讀取評(píng)測(cè)人數(shù)據(jù)集，并從有記錄的最后一條完成評(píng)測(cè)項(xiàng)目的下一條項(xiàng)目開(kāi)始。當(dāng)評(píng)測(cè)完成全部評(píng)測(cè)項(xiàng)目后，系統(tǒng)會(huì)出現(xiàn)評(píng)測(cè)完成的提示信息。

2 病理語(yǔ)音數(shù)據(jù)的主、客觀評(píng)測(cè)

2.1 評(píng)測(cè)材料

評(píng)測(cè)材料為項(xiàng)目組所構(gòu)建的語(yǔ)前聾兒病理語(yǔ)音數(shù)據(jù)庫(kù)中的語(yǔ)音數(shù)據(jù)。該庫(kù)收集了天津市殘疾人康復(fù)中心、中國(guó)聽(tīng)力語(yǔ)言康復(fù)研究中心（原中國(guó)聾兒康復(fù)研究中心）的28名語(yǔ)前聾兒、語(yǔ)前聾兒年齡為5歲6個(gè)月至6歲6個(gè)月，接受人工耳蝸植入3年左右、參與言語(yǔ)康復(fù)2年左右，除耳聾外無(wú)其他殘疾及認(rèn)知功能缺陷。健聽(tīng)兒童與語(yǔ)前聾兒匹配，信陽(yáng)市一所無(wú)聽(tīng)力私立幼兒園的24名健聽(tīng)兒童的發(fā)音數(shù)據(jù)（無(wú)言語(yǔ)疾病及其他認(rèn)知功能缺陷）。在語(yǔ)前聾兒病理語(yǔ)音數(shù)據(jù)庫(kù)中，每名兒童各有7 044條發(fā)音數(shù)據(jù)，內(nèi)容為包含漢語(yǔ)普通話全部21個(gè)聲母、39個(gè)韻母和4個(gè)聲調(diào)并兼顧聲韻調(diào)平衡分布的雙音節(jié)詞語(yǔ)。各條發(fā)音數(shù)據(jù)的探測(cè)目標(biāo)為前字或后字，探測(cè)目標(biāo)之外的另一音節(jié)，則是為照顧兒童語(yǔ)言特點(diǎn)而添加的前后綴成分如“小”、“子”等以增加發(fā)音詞表的自然度。

針對(duì)52名兒童的366 288條待評(píng)測(cè)發(fā)音數(shù)據(jù)，項(xiàng)目組分別開(kāi)展了主、客觀評(píng)測(cè)。其中，主觀評(píng)測(cè)通過(guò)將數(shù)據(jù)導(dǎo)入病理語(yǔ)音規(guī)模主觀評(píng)測(cè)系統(tǒng)開(kāi)展，客觀評(píng)測(cè)則通過(guò)提取發(fā)音人頂點(diǎn)元音的共振峰參數(shù)進(jìn)行評(píng)測(cè)。

2.2 主觀評(píng)測(cè)

主觀評(píng)測(cè)共招募20名評(píng)測(cè)人，9男11女，年齡18歲至21歲（Mean=19.42，Std=0.99），均為具有一定評(píng)測(cè)經(jīng)驗(yàn)的病理語(yǔ)言康復(fù)專業(yè)大學(xué)生，無(wú)聽(tīng)覺(jué)和言語(yǔ)障礙史。評(píng)測(cè)工作在滄州師范學(xué)院滄州市兒童研究所的實(shí)驗(yàn)室中開(kāi)展，評(píng)測(cè)人使用相同型號(hào)的實(shí)驗(yàn)主機(jī)、耳機(jī)等硬件設(shè)備，使用相同的操作系統(tǒng)環(huán)境和病理語(yǔ)音規(guī)模主觀評(píng)測(cè)系統(tǒng)版本。評(píng)測(cè)工作不設(shè)時(shí)間限制，評(píng)測(cè)人根據(jù)各自的節(jié)奏開(kāi)展評(píng)測(cè)工作。最終，評(píng)測(cè)人完成全部評(píng)測(cè)工作的時(shí)間大致在2周至6周之間。

完成主觀評(píng)測(cè)后，將打分結(jié)果導(dǎo)出評(píng)測(cè)系統(tǒng)?？紤]到主觀評(píng)分中的人際差異，首先將每位評(píng)測(cè)人的全部評(píng)分結(jié)果利用公式（1）將原始評(píng)分轉(zhuǎn)換為Z-Score數(shù)據(jù)[7]，其計(jì)算公式為：

式中，x為某評(píng)測(cè)人就某條發(fā)音數(shù)據(jù)的原始評(píng)分，μ為該評(píng)測(cè)人總體樣本空間的評(píng)分均值，σ則為其總體樣本空間的標(biāo)準(zhǔn)差，z為該條發(fā)音數(shù)據(jù)經(jīng)過(guò)轉(zhuǎn)換的Z-Score值。

完成數(shù)據(jù)轉(zhuǎn)換后，就各條發(fā)音數(shù)據(jù)求取20名評(píng)測(cè)人的評(píng)測(cè)結(jié)果的平均值，得到54名發(fā)音人各7 044條發(fā)音數(shù)據(jù)評(píng)分。進(jìn)而就每名發(fā)音人求取全部元音發(fā)音數(shù)據(jù)評(píng)分均值A(chǔ)ll，以及各發(fā)音人以頂點(diǎn)元音[a]、[i]、[u]單獨(dú)為韻母音節(jié)的數(shù)據(jù)評(píng)分均值Corner，共得到52名發(fā)音人兩組數(shù)據(jù)評(píng)分均值的數(shù)據(jù)，主觀評(píng)測(cè)Z-Score數(shù)據(jù)的描述性統(tǒng)計(jì)結(jié)果，如表1所示。

表1 主觀評(píng)測(cè)Z-Score數(shù)據(jù)的描述性統(tǒng)計(jì)結(jié)果Tab.1 The descriptive statistical results of Z-Score data of subjective assessment

2.3 客觀評(píng)測(cè)

元音空間的計(jì)算分析是病理語(yǔ)音客觀評(píng)測(cè)的常用方法。在某特定語(yǔ)言中，通過(guò)測(cè)量其元音系統(tǒng)中的頂點(diǎn)元音的前兩個(gè)共振峰數(shù)據(jù)，計(jì)算相關(guān)聲學(xué)指標(biāo)，從而達(dá)到客觀評(píng)測(cè)元音發(fā)音情況的目的。目前，元音空間計(jì)算的聲學(xué)指標(biāo)主要有3個(gè)評(píng)測(cè)參數(shù)，元音空間面積（vowel space area，VSA）、共振峰中心化比率（formant centralization ratio，F(xiàn)CR）和元音發(fā)音指數(shù)（vowel articulation index，VAI）[8]。

利用Praat（版本號(hào)：6.1.52）[9]提取語(yǔ)音數(shù)據(jù)中單獨(dú)以頂點(diǎn)元音為[a]、[i]、[u]韻母的元音共振峰數(shù)據(jù)，分別計(jì)算52名發(fā)音人[i]、[a]、[u]的前兩個(gè)共振峰均值數(shù)據(jù)F1i、F2i、F1a、F2a、F1u、F2u。進(jìn)而，運(yùn)用公式（2）-（4）分別求取了各發(fā)音人的VSA、FCR和VAI數(shù)據(jù)，所得到的客觀評(píng)測(cè)參數(shù)的描述性統(tǒng)計(jì)結(jié)果，如表2所示。

表2 客觀評(píng)測(cè)參數(shù)的描述性統(tǒng)計(jì)結(jié)果Tab.2 The descriptive statistical results of objective evaluation parameters

3 效果驗(yàn)證

為驗(yàn)證評(píng)測(cè)的客觀性，可以將前文得到的主、客觀評(píng)測(cè)數(shù)據(jù)結(jié)合起來(lái)開(kāi)展相關(guān)分析。一方面，可以檢測(cè)主、客觀評(píng)測(cè)內(nèi)部各參數(shù)的相關(guān)性；另一方面，可以通過(guò)考察主、客觀評(píng)測(cè)數(shù)據(jù)間的關(guān)聯(lián)，驗(yàn)證規(guī)模主觀評(píng)測(cè)結(jié)果的客觀性。

將All、Corner、VSA、FCR、VAI數(shù)據(jù)代入R（版本號(hào)：4.0.5）環(huán)境[10]，采用Hmisc包[11]計(jì)算各參數(shù)之間的相關(guān)性和顯著水平，得到主、客觀參數(shù)量之間相關(guān)性系數(shù)及顯著性結(jié)果，如表3所示。主、客觀參數(shù)的相關(guān)分析結(jié)果，如圖2所示，則藉由corrplot包[12]實(shí)現(xiàn)。

圖2 主、客觀參數(shù)的相關(guān)分析結(jié)果Fig.2 The correlation analysis results of subjective and objective parameters

由表3和圖2可見(jiàn)，在客觀評(píng)測(cè)數(shù)據(jù)方面，F(xiàn)CR分別與VSI、VAI存在強(qiáng)負(fù)相關(guān)，VSI與VAI之間存在強(qiáng)正相關(guān)關(guān)系；在主觀評(píng)測(cè)數(shù)據(jù)方面，All與Corner存在強(qiáng)正相關(guān)關(guān)系；在主、客觀評(píng)測(cè)數(shù)據(jù)方面，除All與VSA處于邊緣顯著水平（p=0.069）的弱相關(guān)外，其余參數(shù)之間均呈現(xiàn)顯著的中等相關(guān)關(guān)系[13]。對(duì)比兩組主觀評(píng)測(cè)參數(shù)可以發(fā)現(xiàn)，Corner與VSA、VAI、FCR的相關(guān)系數(shù)r的絕對(duì)值分別為0.304、0.356、0.383，均大于All與3個(gè)客觀參數(shù)間相關(guān)系數(shù)的絕對(duì)值，表明Corner與3個(gè)客觀參數(shù)間表現(xiàn)出了更強(qiáng)的相關(guān)關(guān)系。

對(duì)于上述相關(guān)分析的結(jié)果，可以有以下3點(diǎn)考慮：

1）All與Corner存在強(qiáng)正相關(guān)關(guān)系，說(shuō)明即使在數(shù)據(jù)規(guī)模較小的情況，頂點(diǎn)元音韻母數(shù)據(jù)評(píng)分均值仍然具有良好的代表性和穩(wěn)定性，可以有效地反映全體韻母的主觀評(píng)測(cè)結(jié)果的全貌。因此，在更大規(guī)模數(shù)據(jù)的情況下，Corner參數(shù)將具有更好的魯棒性，從而替代All參數(shù)，以實(shí)現(xiàn)病理語(yǔ)音快速、準(zhǔn)確的主觀評(píng)測(cè)的目標(biāo)。

2）3個(gè)客觀參數(shù)不僅彼此間存在強(qiáng)相關(guān)性，而且與All相比，三者與Corner參數(shù)也顯示出了更強(qiáng)的相關(guān)性?？紤]到這些元音空間的客觀參數(shù)可以通過(guò)映射發(fā)音生理空間邊界來(lái)反映語(yǔ)音發(fā)音質(zhì)量[14]，而Corner參數(shù)又可以代表全部元音韻母發(fā)音質(zhì)量的主觀評(píng)測(cè)結(jié)果，主觀評(píng)測(cè)結(jié)果和客觀評(píng)測(cè)結(jié)果之間所存在的一致關(guān)系，一方面顯示出基于非專家評(píng)測(cè)者的規(guī)?；饔^評(píng)測(cè)存在較好的客觀性，另一方面也展現(xiàn)出將主、客觀評(píng)測(cè)參數(shù)結(jié)合起來(lái)，開(kāi)展病理語(yǔ)音自動(dòng)評(píng)測(cè)的可能性。

3）All參數(shù)與3個(gè)客觀參數(shù)具有一定的相關(guān)性但相關(guān)程度不如Corner參數(shù)的原因可能在于：Corner與客觀參數(shù)都是與頂點(diǎn)元音直接相關(guān)的，而All參數(shù)則反映了全部元音韻母發(fā)音質(zhì)量的主觀評(píng)測(cè)結(jié)果。一般而言，頂點(diǎn)元音是各種語(yǔ)言元音系統(tǒng)中最先和最易于掌握的元音[15]。因此，在現(xiàn)有的主觀評(píng)測(cè)結(jié)果數(shù)據(jù)中，以頂點(diǎn)元音單獨(dú)做韻母的主觀評(píng)測(cè)得分應(yīng)該明顯高于某些韻母特別是復(fù)雜韻母的得分。可能正是那些主觀評(píng)測(cè)得分較低的韻母的存在，造成All與基于頂點(diǎn)元音的客觀參數(shù)的相關(guān)關(guān)系不如Corner的結(jié)果。

4 結(jié)論

隨著經(jīng)濟(jì)社會(huì)和科學(xué)技術(shù)的快速發(fā)展，病理語(yǔ)音檢測(cè)工作日益繁重，開(kāi)發(fā)和完善針對(duì)漢語(yǔ)普通話的病理語(yǔ)音自動(dòng)評(píng)估工具成為當(dāng)前相關(guān)領(lǐng)域的重點(diǎn)工作之一。本文簡(jiǎn)要介紹了項(xiàng)目組開(kāi)發(fā)的一套病理語(yǔ)音規(guī)模主觀評(píng)測(cè)系統(tǒng)，利用該系統(tǒng)對(duì)語(yǔ)前聾兒、健聽(tīng)兒童等語(yǔ)音數(shù)據(jù)開(kāi)展主觀評(píng)測(cè)，根據(jù)評(píng)測(cè)結(jié)果提取的All和Corner參數(shù)，將其與語(yǔ)音數(shù)據(jù)的客觀評(píng)測(cè)參數(shù)VSA、VAI、FCR開(kāi)展了相關(guān)分析，并對(duì)相關(guān)分析的結(jié)果進(jìn)行了比對(duì)分析。結(jié)果表明，基于非專家評(píng)測(cè)者的規(guī)模主觀評(píng)測(cè)具有良好的客觀性，主觀評(píng)測(cè)參數(shù)特別是Corner參數(shù)具備作為病理語(yǔ)音規(guī)模主觀評(píng)測(cè)系統(tǒng)參數(shù)的潛力，并有可能與客觀參數(shù)一起，成為病理語(yǔ)音自動(dòng)評(píng)測(cè)的指標(biāo)之一。這一結(jié)果，為進(jìn)一步改進(jìn)病理語(yǔ)音規(guī)模主觀評(píng)測(cè)系統(tǒng)、并進(jìn)而設(shè)計(jì)將主、客觀評(píng)估結(jié)合起來(lái)的評(píng)測(cè)工具提供了研究思路。