国产日韩欧美一区二区三区三州_亚洲少妇熟女av_久久久久亚洲av国产精品_波多野结衣网站一区二区_亚洲欧美色片在线91_国产亚洲精品精品国产优播av_日本一区二区三区波多野结衣 _久久国产av不卡

?

基于聲控游戲的兒童言語(yǔ)障礙康復(fù)系統(tǒng)設(shè)計(jì)

2013-04-29 02:48:58司博宇高棟周林燦黃昭鳴
現(xiàn)代教育技術(shù) 2013年5期

司博宇 高棟 周林燦 黃昭鳴

[摘要]根據(jù)言語(yǔ)障礙兒童學(xué)習(xí)能力的發(fā)展,提出基于聲控游戲的兒童言語(yǔ)障礙康復(fù)系統(tǒng)。該系統(tǒng)基于Visual C++語(yǔ)言開(kāi)發(fā),內(nèi)容專門針對(duì)兒童言語(yǔ)障礙患者設(shè)計(jì),將日??祻?fù)訓(xùn)練所使用的聲學(xué)參數(shù)與游戲中的動(dòng)畫主角建立聯(lián)系,使患兒在游戲中逐步鍛煉言語(yǔ)能力,恢復(fù)正常功能。

[關(guān)鍵詞]聲控游戲;兒童言語(yǔ)康復(fù);游戲治療;語(yǔ)音信號(hào)處理

[中圖分類號(hào)]G40-057 [文獻(xiàn)標(biāo)識(shí)碼]A [論文編號(hào)]1009-8097(2013)05-0103-05 [DOI]10.3969/j.issn.1009-8097.2013.05.021

一、引言

特殊教育是我國(guó)教育體系中不可或缺的重要組成部分,提高特殊人群的生活質(zhì)量,解決他們的社會(huì)需求,尤其是特殊兒童的教育、康復(fù)和保健問(wèn)題,使其身心得到全面發(fā)展,是維持我國(guó)社會(huì)和諧穩(wěn)定健康發(fā)展的重要基礎(chǔ)。在我國(guó),各類言語(yǔ)障礙患者數(shù)量高達(dá)幾千萬(wàn),致病原因包括生理病變、功能損失、情緒緊張等多方面,尤其對(duì)于兒童患者,言語(yǔ)障礙會(huì)影響其語(yǔ)言表達(dá)和日常交流,影響身心的健康發(fā)展,甚至可能成為影響社會(huì)安定的隱患。目前,言語(yǔ)障礙的康復(fù)治療依次包括評(píng)估和訓(xùn)練兩大部分,“評(píng)估”旨在用聲學(xué)參數(shù)和生理指標(biāo)評(píng)價(jià)患者的言語(yǔ)功能是否存在障礙,根據(jù)這些參數(shù)和指標(biāo)代表的臨床含義來(lái)診斷言語(yǔ)障礙的具體類型;“訓(xùn)練”則是根據(jù)評(píng)估結(jié)果對(duì)患者的言語(yǔ)障礙類型開(kāi)展針對(duì)性的康復(fù)工作。在我國(guó),言語(yǔ)障礙的評(píng)估方法已經(jīng)形成較為成熟的體系,但是相關(guān)康復(fù)訓(xùn)練的手段仍比較單一,由醫(yī)生或言語(yǔ)康復(fù)師對(duì)患者進(jìn)行面對(duì)面的康復(fù)訓(xùn)練,輔助訓(xùn)練工具種類較少,例如,播放正常語(yǔ)音讓患者練習(xí)跟讀或利用印有文字和圖像內(nèi)容的卡片對(duì)患者進(jìn)行誘導(dǎo)訓(xùn)練等。這些手段對(duì)于具備一定學(xué)習(xí)能力和知識(shí)積累的成人患者來(lái)說(shuō)較為合適,而兒童患者的智力尚未發(fā)育成熟,學(xué)習(xí)能力有限,個(gè)別患者還可能伴有腦癱、自閉癥等更為復(fù)雜的病癥,上述訓(xùn)練方式在吸引兒童注意力、激勵(lì)他們的學(xué)習(xí)熱情上很難發(fā)揮作用,因此,如何為兒童言語(yǔ)障礙患者設(shè)計(jì)更適合他們的康復(fù)訓(xùn)練系統(tǒng),已成為特殊教育和康復(fù)科學(xué)領(lǐng)域的熱門問(wèn)題。

游戲?qū)和l(fā)展的重要作用已被多數(shù)教育工作者認(rèn)同,作為兒童生命早期的主導(dǎo)活動(dòng),游戲是兒童學(xué)習(xí)和融入社會(huì)的途徑,對(duì)兒童身體發(fā)育和心智發(fā)展具有重要意義。將游戲與康復(fù)治療結(jié)合的應(yīng)用已經(jīng)取得了很大的進(jìn)展,這是由于將游戲融入治療并非某一學(xué)科或者學(xué)派的特有方法,而是任何一種治療都可以采用的工具,作為治療和訓(xùn)練的一種中介。兒童言語(yǔ)障礙的康復(fù)訓(xùn)練能否借助游戲形式將復(fù)雜的監(jiān)控指標(biāo)動(dòng)畫化,讓兒童在接受治療的過(guò)程中逐步對(duì)語(yǔ)音及其特性,諸如響度、音調(diào)和起音等建立感性認(rèn)識(shí),這一問(wèn)題的答案是肯定的。游戲訓(xùn)練的主體是兒童自己,由于身心發(fā)展的需要,他們迫切想要找到一種自主控制的感覺(jué),如果游戲內(nèi)容的設(shè)計(jì)具有互動(dòng)性,使兒童在無(wú)論是否有能力完成游戲訓(xùn)練內(nèi)容的情況下,都能夠得到游戲中虛擬伙伴的表?yè)P(yáng)或鼓勵(lì),心理上獲得的成就感或安慰可以刺激他們繼續(xù)完成后續(xù)內(nèi)容的學(xué)習(xí)熱情,有助于提高康復(fù)訓(xùn)練效率。綜上所述,提出一種基于聲控游戲的兒童言語(yǔ)障礙康復(fù)訓(xùn)練系統(tǒng),運(yùn)用Visual C++程序語(yǔ)言,主要面向兒童言語(yǔ)障礙患者,使他們?cè)谏术r艷、畫面生動(dòng)的動(dòng)畫環(huán)境中循序漸進(jìn)地提高言語(yǔ)能力,一定程度上克服心理障礙,同時(shí)為特殊教育同行設(shè)計(jì)游戲訓(xùn)練系統(tǒng)提供借鑒。

二、游戲設(shè)計(jì)

本訓(xùn)練系統(tǒng)專門針對(duì)兒童由于言語(yǔ)障礙而導(dǎo)致的言語(yǔ)功能低下或缺失而設(shè)計(jì),目的是能夠使他們重新掌握控制言語(yǔ)發(fā)聲的能力,如對(duì)語(yǔ)音響度、起音、最長(zhǎng)聲時(shí)、音調(diào)和構(gòu)音等的控制能力。本系統(tǒng)基于較為成熟的語(yǔ)音信號(hào)處理技術(shù),直接對(duì)語(yǔ)音進(jìn)行聲學(xué)分析,提取用于監(jiān)控康復(fù)過(guò)程的聲學(xué)參數(shù),嚴(yán)格遵循兒童言語(yǔ)功能發(fā)育的過(guò)程編排康復(fù)訓(xùn)練內(nèi)容,將復(fù)雜的語(yǔ)音信號(hào)處理過(guò)程用生動(dòng)活潑的游戲替代,將言語(yǔ)運(yùn)動(dòng)過(guò)程與連貫的動(dòng)畫建立對(duì)應(yīng)關(guān)系,使兒童能夠?qū)ρ哉Z(yǔ)過(guò)程和語(yǔ)音特性產(chǎn)生感性認(rèn)識(shí),增強(qiáng)學(xué)習(xí)興趣。

按照兒童言語(yǔ)功能的發(fā)展規(guī)律,本系統(tǒng)的訓(xùn)練游戲內(nèi)容依次設(shè)計(jì)為五級(jí):第一級(jí)為認(rèn)識(shí)聲音,第二級(jí)為起音和最長(zhǎng)聲時(shí),第三級(jí)為語(yǔ)音的響度和音調(diào),第四級(jí)為單元音及多元音構(gòu)音,第五級(jí)為清濁音。下面按照上述順序闡述系統(tǒng)設(shè)計(jì)過(guò)程。

1.認(rèn)識(shí)聲音

“認(rèn)識(shí)聲音”模塊主要面向年齡較小的幼兒或者對(duì)語(yǔ)音缺乏知覺(jué)的言語(yǔ)障礙重度患者設(shè)計(jì)。該游戲模塊的設(shè)計(jì)理念是讓兒童通過(guò)視覺(jué)變化來(lái)感受語(yǔ)音的存在,對(duì)語(yǔ)音建立感性認(rèn)識(shí),同時(shí),也要考慮到兒童注意力集中范圍受限的因素,因此,游戲畫面呈現(xiàn)的是以一個(gè)體積較大的動(dòng)畫角色為主,若干體積較小的輔助動(dòng)畫角色作為配合。當(dāng)患者通過(guò)麥克風(fēng)發(fā)出任意語(yǔ)音的時(shí)候,主要?jiǎng)赢嫿巧洼o助動(dòng)畫角色都會(huì)在各自原始的位置發(fā)生動(dòng)作,如圖1所示的“快樂(lè)熊”游戲,患者發(fā)音時(shí),畫面上的主要?jiǎng)赢嫿巧笮軙?huì)在原地打擊手中的樂(lè)器,而旁邊的小老鼠則會(huì)拍手?;純簳?huì)在訓(xùn)練過(guò)程中將注意力集中在這些色彩鮮艷、形象可愛(ài)的卡通游戲角色上面,感受到語(yǔ)音的產(chǎn)生實(shí)際上是一種變化過(guò)程,引起他們對(duì)說(shuō)話的興趣。

2.起音和最長(zhǎng)聲時(shí)

起音障礙是兒童言語(yǔ)障礙的常見(jiàn)類型,起音過(guò)程屬于前發(fā)聲期階段,作用時(shí)間很短,是能否發(fā)出正常、連貫語(yǔ)音的重要前提。起音障礙產(chǎn)生的原因可能是構(gòu)音器官運(yùn)動(dòng)不協(xié)調(diào),患者需要進(jìn)行連續(xù)的訓(xùn)練才能掌握起音技巧?!捌鹨簟庇?xùn)練游戲的設(shè)計(jì)遵循臨床康復(fù)的實(shí)際需要,讓患者在一定時(shí)間內(nèi)完成一連串重復(fù)的起音動(dòng)作,以該模塊中的“啟動(dòng)汽車”為例,如圖2所示,患者在言語(yǔ)康復(fù)師的指導(dǎo)下,通過(guò)完成連續(xù)起音的動(dòng)作,幫助老鼠先生點(diǎn)亮指示燈。指示燈一共有5個(gè),患者每進(jìn)行一次起音(通常是短促的發(fā)/a/音),指示燈就會(huì)點(diǎn)亮一個(gè),當(dāng)五個(gè)指示燈在規(guī)定時(shí)間內(nèi)全部點(diǎn)亮,老鼠先生就可以發(fā)動(dòng)汽車?yán)^續(xù)前進(jìn),否則汽車無(wú)法開(kāi)動(dòng)。針對(duì)不同言語(yǔ)障礙程度的患者,治療師可以設(shè)置不同的規(guī)定時(shí)間,讓患者有合適的時(shí)間完成游戲,每次訓(xùn)練時(shí)再根據(jù)患者前一次的完成情況來(lái)調(diào)整游戲的規(guī)定時(shí)間。

兒童言語(yǔ)障礙患者中也經(jīng)常出現(xiàn)發(fā)音方式正確,但是軟綿無(wú)力,無(wú)法持續(xù)發(fā)音,甚至“有口形,無(wú)語(yǔ)音”的情況。這通常與患兒的呼吸功能異常,尤其是呼吸支持不足有關(guān)。臨床康復(fù)訓(xùn)練中,監(jiān)控呼吸能力最常用的指標(biāo)是“最長(zhǎng)聲時(shí)”,即讓患者深吸氣后一口氣發(fā)元音/a/所持續(xù)的最長(zhǎng)時(shí)間。一般,呼吸功能異?;純旱臏y(cè)量結(jié)果通常只有幾秒鐘,遠(yuǎn)低于正常水平。本系統(tǒng)基于呼吸功能異??祻?fù)訓(xùn)練的基本理念,設(shè)計(jì)了“最長(zhǎng)聲時(shí)”游戲模塊,患者通過(guò)一次性持續(xù)發(fā)元音的方式完成游戲,從而達(dá)到訓(xùn)練的目的。如圖3所示,以“買蛋糕”游戲?yàn)槔?,游戲初始畫面左邊有一只小貓,畫面右?cè)則是一臺(tái)自動(dòng)蛋糕販?zhǔn)蹤C(jī),患者深吸氣后持續(xù)的發(fā)出元音/a/,會(huì)驅(qū)動(dòng)小貓不斷地向蛋糕販?zhǔn)蹤C(jī)方向行走,如果患者在規(guī)定時(shí)間內(nèi)幫助小貓買到蛋糕,游戲就會(huì)呈現(xiàn)小貓手捧蛋糕并開(kāi)心大笑的畫面:若患者發(fā)音持續(xù)時(shí)間較短,無(wú)法完成游戲任務(wù),小貓則會(huì)在停止的位置開(kāi)始哭泣。這種多結(jié)局的游戲設(shè)計(jì),能夠讓患兒在一定程度上體會(huì)到言語(yǔ)障礙所給日常生活帶來(lái)的不便。在言語(yǔ)康復(fù)師的循循善誘下,患兒在游戲過(guò)程中逐步幫助小貓成功買到蛋糕,提高自身的最長(zhǎng)聲時(shí)水平,強(qiáng)化言語(yǔ)呼吸功能。

3.響度和音調(diào)

響度和音調(diào)是語(yǔ)音的兩大重要特征。響度異常表現(xiàn)為語(yǔ)音音量過(guò)大或者過(guò)小,音調(diào)異常表現(xiàn)為音調(diào)過(guò)高、過(guò)低或者過(guò)于單一,不僅影響語(yǔ)音的可懂度,還可能對(duì)構(gòu)音器官造成器質(zhì)性上海。響度異常矯治訓(xùn)練游戲的設(shè)計(jì)思路是使患者意識(shí)到自身存在的障礙,并引導(dǎo)他們降低或者提高言語(yǔ)響度。以提高響度的游戲“長(zhǎng)頸鹿”為例(圖4),長(zhǎng)頸鹿的脖子會(huì)隨著患者語(yǔ)音音量的增加或降低而伸長(zhǎng)或縮短,言語(yǔ)康復(fù)師引導(dǎo)兒童盡可能的大聲發(fā)音,目的是為幫助長(zhǎng)頸鹿的脖子伸到足夠長(zhǎng),在規(guī)定時(shí)間內(nèi)能夠吃到樹(shù)上的葉子。訓(xùn)練過(guò)程中,需要根據(jù)患兒語(yǔ)音的實(shí)際情況設(shè)定響度基準(zhǔn),只有響度大于該基準(zhǔn)的語(yǔ)音才能驅(qū)動(dòng)長(zhǎng)頸鹿等動(dòng)畫角色的運(yùn)動(dòng)。降低響度的游戲設(shè)計(jì)思路基本類似,誘導(dǎo)兒童通過(guò)降低語(yǔ)音響度,控制動(dòng)畫角色實(shí)現(xiàn)下降動(dòng)作以完成游戲。

音調(diào)異常訓(xùn)練的游戲設(shè)計(jì)兼顧音調(diào)過(guò)高、過(guò)低和過(guò)于單一三種主要障礙類型,以游戲“茶壺”為例,如圖5所示,兒童在言語(yǔ)康復(fù)師的指導(dǎo)下通過(guò)改變自己的音調(diào)控制畫面上的擬人化茶壺穿過(guò)由茶杯組成的陣列。茶杯陣列的類型包括“穿越”和“定向”兩種,“穿越”是指茶壺在語(yǔ)音控制下穿過(guò)茶杯陣列,保證不與茶杯相撞,一旦兩者發(fā)聲碰撞,本次訓(xùn)練終止,當(dāng)茶壺成功穿過(guò)茶杯陣列,系統(tǒng)會(huì)顯示為茶壺頒發(fā)獎(jiǎng)杯的畫面,對(duì)患兒的訓(xùn)練成果給予肯定和鼓勵(lì)?!岸ㄏ颉眲t是指患者利用語(yǔ)音控制茶壺與陣列中的每一個(gè)茶杯完成碰撞,以達(dá)到提高音調(diào)、降低音調(diào)或者變化音調(diào)的目的。兩種訓(xùn)練類型的結(jié)合,能夠使患兒通過(guò)不同的訓(xùn)練形式,鍛煉音調(diào)控制能力。

4.單元音和多元音構(gòu)音

發(fā)聲功能正常(能夠正常起音,語(yǔ)音的音調(diào)和響度正常),但是語(yǔ)音清晰度仍然較差的兒童言語(yǔ)障礙患者并不少見(jiàn),這大多是由于患者的構(gòu)音器官協(xié)調(diào)運(yùn)動(dòng)出現(xiàn)問(wèn)題而導(dǎo)致的構(gòu)音障礙。對(duì)于絕大多數(shù)語(yǔ)種來(lái)說(shuō),元音都是語(yǔ)音的核心,是評(píng)估構(gòu)音功能正常與否,以及進(jìn)行構(gòu)音異常訓(xùn)練的最基本材料。本系統(tǒng)選取普通話單元音a、o、e、i和u作為訓(xùn)練材料,設(shè)計(jì)以發(fā)單個(gè)元音或者多個(gè)元音為手段的達(dá)成目標(biāo)類游戲,完成構(gòu)音障礙訓(xùn)練之目的。訓(xùn)練游戲包括單個(gè)元音到四個(gè)元音等四種訓(xùn)練模式。以兩個(gè)元音的訓(xùn)練游戲“灰姑娘”為例,如圖6。首先,患者需要錄制樣本元音并選擇訓(xùn)練的元音個(gè)數(shù),才能正式進(jìn)入游戲。游戲中,患者需要按照錄制的樣本元音發(fā)音,每個(gè)元音對(duì)應(yīng)畫面上的一個(gè)游戲?qū)ο?。在“灰姑娘”游戲中,兩個(gè)元音分別對(duì)應(yīng)灰姑娘和馬車車夫,系統(tǒng)會(huì)自動(dòng)對(duì)患者的發(fā)音進(jìn)行識(shí)別,兩個(gè)動(dòng)畫對(duì)象只有在患者的構(gòu)音語(yǔ)音與樣本元音完全一致時(shí)才會(huì)運(yùn)動(dòng),直到在規(guī)定時(shí)問(wèn)內(nèi)到達(dá)系統(tǒng)規(guī)定的位置才能完成任務(wù)。這類游戲的最大特點(diǎn)是游戲重復(fù)利用率高,同一款游戲能夠?qū)Σ煌脑暨M(jìn)行訓(xùn)練,游戲目的在畫面中能夠直觀體現(xiàn),易于被患兒理解并接受。

5.清濁音

構(gòu)音語(yǔ)音的分類,通常根據(jù)聲帶是否振動(dòng)分為濁音和清音兩類。在普通話中,清音都是輔音,清音構(gòu)音出現(xiàn)障礙,勢(shì)必影響語(yǔ)音的可懂度。在本系統(tǒng)中,清濁音訓(xùn)練游戲的設(shè)計(jì)依照目前普遍使用的以不同顏色區(qū)分語(yǔ)音類型的方法,用紅色動(dòng)畫主體表示濁音,而清音則用綠色動(dòng)畫主體來(lái)表示。以游戲“賽車”為例,如圖7所示,畫面上有左右兩條賽道,左側(cè)行駛的是代表清音的綠色賽車,右側(cè)行駛的是代表濁音的紅色賽車?;颊咝枰凑昭哉Z(yǔ)康復(fù)師的指導(dǎo),在規(guī)定時(shí)間內(nèi)交替發(fā)出指定的清濁音,驅(qū)動(dòng)兩輛賽車前進(jìn),即患者發(fā)濁音時(shí)紅色賽車前進(jìn),發(fā)清音時(shí)綠色賽車前進(jìn),若患者不發(fā)音,則兩輛車都不會(huì)產(chǎn)生動(dòng)作。言語(yǔ)治療師可以根據(jù)實(shí)際情況,設(shè)計(jì)能夠讓患兒在規(guī)定時(shí)間內(nèi)將兩輛賽車都驅(qū)動(dòng)到終點(diǎn)的清濁音訓(xùn)練語(yǔ)料。任務(wù)完成時(shí),系統(tǒng)畫面將會(huì)為到達(dá)終點(diǎn)的賽車手頒發(fā)獎(jiǎng)杯,以鼓勵(lì)兒童成功完成本次的訓(xùn)練任務(wù)。

綜上所述,本系統(tǒng)包含的每一級(jí)言語(yǔ)障礙訓(xùn)練模塊,其內(nèi)部包含4~5個(gè)玩法基本相同的小游戲。系統(tǒng)為使用者提供操作簡(jiǎn)便而功能強(qiáng)大的設(shè)置選項(xiàng),如,環(huán)境噪聲設(shè)置、游戲時(shí)間控制、實(shí)時(shí)錄音、語(yǔ)音信號(hào)波形和圖譜顯示、用戶記錄保存、快速游戲切換以及快速重啟游戲等。本系統(tǒng)涵蓋了大部分言語(yǔ)障礙兒童的訓(xùn)練目標(biāo)及其相關(guān)內(nèi)容,游戲難度適宜,畫面鮮艷可愛(ài),易被兒童接受和完成。同時(shí),豐富的系統(tǒng)內(nèi)容還能幫助特殊教育教師和言語(yǔ)康復(fù)工作者節(jié)省為每一位患者分別制定訓(xùn)練材料的時(shí)間,將大幅提高治療效率。

三、游戲?qū)崿F(xiàn)

本系統(tǒng)利用Visual C++語(yǔ)言在微軟Windows操作系統(tǒng)平臺(tái)上進(jìn)行開(kāi)發(fā),游戲主程序、uI菜單界面基于MFC開(kāi)發(fā),聲控動(dòng)畫游戲的實(shí)現(xiàn)則是基于DirectDraw開(kāi)發(fā)包和語(yǔ)音信號(hào)處理算法。由于Visual C++語(yǔ)言具有運(yùn)行效率高的優(yōu)勢(shì),配合成熟可靠的語(yǔ)音處理技術(shù),足以在普通家用計(jì)算機(jī)上提供出色的聲控游戲使用體驗(yàn)。

1.語(yǔ)音信號(hào)處理技術(shù)

聲控游戲的實(shí)現(xiàn)分為兩步,首先是選定并提取聲學(xué)參數(shù),然后再建立聲學(xué)參數(shù)與游戲動(dòng)作之間的關(guān)聯(lián)。不同類型的言語(yǔ)障礙對(duì)應(yīng)不同的聲學(xué)參數(shù),這些參數(shù)都是康復(fù)訓(xùn)練中常用的監(jiān)控指標(biāo)。本系統(tǒng)包含了五個(gè)級(jí)別的言語(yǔ)障礙訓(xùn)練聲控游戲,根據(jù)語(yǔ)音信號(hào)處理方法和提取聲學(xué)參數(shù)類型的不同,可將“認(rèn)識(shí)聲音”、“起音”、“最長(zhǎng)聲時(shí)”和“響度”歸為第一類,主要計(jì)算語(yǔ)音信號(hào)的幅度和能量,第二類則是“音調(diào)”和“清濁音”,主要計(jì)算語(yǔ)音的基音頻率,而“單元音及多元音構(gòu)音”需要利用語(yǔ)音信號(hào)的共振峰進(jìn)行簡(jiǎn)單的語(yǔ)音識(shí)別,故作為第三類。提取這三類聲學(xué)參數(shù)的語(yǔ)音信號(hào)處理方法框架如圖8,這些技術(shù)均基于實(shí)際應(yīng)用非常廣泛的成熟算法,故不再贅述。圖中白色方框?yàn)檎Z(yǔ)音信號(hào)處理的具體方法,灰色方框?yàn)樾枰獙?shí)現(xiàn)的游戲訓(xùn)練項(xiàng)目,實(shí)線箭頭指向的是語(yǔ)音信號(hào)處理的流程,虛線箭頭指向的是最終實(shí)現(xiàn)的游戲訓(xùn)練項(xiàng)目。

2.界面設(shè)計(jì)

系統(tǒng)界面依次為初始界面、用戶記錄界面、環(huán)境噪聲設(shè)置界面、游戲菜單界面以及游戲訓(xùn)練界面。打開(kāi)系統(tǒng)即可進(jìn)入初始界面,確認(rèn)使用系統(tǒng)則首先進(jìn)入用戶記錄界面,由言語(yǔ)康復(fù)師填寫患者的個(gè)人信息,保存后進(jìn)入環(huán)境噪聲設(shè)置,記錄環(huán)境噪聲的目的是在語(yǔ)音處理過(guò)程中排除環(huán)境噪聲對(duì)語(yǔ)音的干擾。游戲菜單界面包括訓(xùn)練項(xiàng)目菜單和每個(gè)項(xiàng)目下包含的游戲名稱圖標(biāo),用鼠標(biāo)單擊菜單或圖標(biāo)即可進(jìn)入相應(yīng)的訓(xùn)練項(xiàng)目或訓(xùn)練游戲。游戲訓(xùn)練界面包含游戲場(chǎng)景、音頻控制(錄音、播放)、參數(shù)設(shè)置、錄音時(shí)間進(jìn)度條、訓(xùn)練模塊及游戲快速切換菜單等。

3.功能模塊

聲控游戲的功能模塊包括:錄音及播放模塊、語(yǔ)音處理模塊、圖像繪制模塊。其中,圖像繪制模塊基于DireetDrawSDK開(kāi)發(fā),能夠提供比GDI層次更高、功能更強(qiáng)大的繪圖機(jī)制,并且同樣具有與硬件屬性無(wú)關(guān)的優(yōu)良特性充分,利用圖形圖像硬件設(shè)備的加速特性為用戶提供最優(yōu)的顯示速度和效果。游戲過(guò)程中,用戶的語(yǔ)音經(jīng)過(guò)語(yǔ)音處理模塊進(jìn)行實(shí)時(shí)特征參數(shù)提取,用于實(shí)現(xiàn)聲控游戲的后臺(tái)控制。同時(shí),用戶的語(yǔ)音被錄音及播放模塊保存成WAV格式的音頻文件,可以實(shí)現(xiàn)音頻與聲控游戲的回放。

四、總結(jié)

針對(duì)目前國(guó)內(nèi)特殊教育和殘疾兒童康復(fù)領(lǐng)域缺乏符合兒童學(xué)習(xí)能力和理解能力要求的康復(fù)教育與訓(xùn)練輔助手段的現(xiàn)狀,提出了基于聲控游戲的言語(yǔ)障礙康復(fù)訓(xùn)練系統(tǒng)。在設(shè)計(jì)游戲內(nèi)容時(shí),選取動(dòng)物、植物、生活用品等常見(jiàn)事物,繪制成兒童喜聞樂(lè)見(jiàn)的動(dòng)畫形象,通過(guò)成熟而先進(jìn)的語(yǔ)音信號(hào)處理技術(shù),計(jì)算得到用于監(jiān)控各類言語(yǔ)障礙類型的聲學(xué)特征參數(shù),利用這些監(jiān)控參數(shù)的數(shù)值或相關(guān)變化規(guī)律控制游戲主角的活動(dòng),巧妙地融合了康復(fù)訓(xùn)練與游戲任務(wù)?;純涸谕瓿蛇@些游戲任務(wù)的同時(shí),潛移默化地恢復(fù)自身的言語(yǔ)語(yǔ)言功能,還能夠在游戲中培養(yǎng)自身的優(yōu)良品格,例如,樂(lè)于助人、團(tuán)結(jié)友愛(ài)、遵守時(shí)間等。

此外,本系統(tǒng)基于Visual C++開(kāi)發(fā),具有很高的靈活性和擴(kuò)展性,在后續(xù)研發(fā)過(guò)程中將會(huì)添加網(wǎng)絡(luò)通信模塊,患者可以通過(guò)計(jì)算機(jī)網(wǎng)絡(luò)在家中接受言語(yǔ)障礙評(píng)估和康復(fù)訓(xùn)練,這也是目前遠(yuǎn)程教育擴(kuò)展到特殊教育領(lǐng)域的一種新思路,讓“云康復(fù)”有機(jī)會(huì)走進(jìn)家庭教育,大幅降低康復(fù)成本和時(shí)間,使更多的言語(yǔ)障礙患者重獲溝通交流的能力。

温宿县| 周至县| 左云县| 芮城县| 拜城县| 逊克县| 黑河市| 道真| 三江| 萍乡市| 波密县| 安图县| 福安市| 临沭县| 华阴市| 若尔盖县| 巴里| 香河县| 五常市| 宁晋县| 景宁| 尖扎县| 大同县| 石林| 昭苏县| 谢通门县| 西城区| 青海省| 望城县| 房山区| 资溪县| 巴楚县| 衢州市| 千阳县| 苏尼特右旗| 阜平县| 临安市| 绥芬河市| 射阳县| 肇东市| 宿州市|