基于計(jì)算機(jī)智能聾兒語(yǔ)音康復(fù)訓(xùn)練系統(tǒng)的語(yǔ)音識(shí)別研究.pdf

1、當(dāng)今社會(huì)，聾兒的語(yǔ)音康復(fù)訓(xùn)練已經(jīng)逐漸受到社會(huì)的重視。隨著網(wǎng)絡(luò)及多媒體電腦的普及，聾兒康復(fù)系統(tǒng)軟件的需求也將越來(lái)越大，對(duì)其智能化的要求也越來(lái)越高。本課題即是來(lái)源于一套《漢語(yǔ)語(yǔ)音聾兒計(jì)算機(jī)智能語(yǔ)言訓(xùn)練系統(tǒng)》的開發(fā)。而我們所要開發(fā)的聾兒語(yǔ)音康復(fù)訓(xùn)練系統(tǒng)不同于現(xiàn)有的語(yǔ)音識(shí)別的產(chǎn)品，該系統(tǒng)根據(jù)聾兒的發(fā)音缺陷，對(duì)表示發(fā)音聲調(diào)、語(yǔ)意、情感等信息參數(shù)分別處理，有針對(duì)性的對(duì)聾兒進(jìn)行語(yǔ)音訓(xùn)練。并將提取的漢語(yǔ)語(yǔ)音參數(shù)，轉(zhuǎn)化為可視化且簡(jiǎn)單易懂的圖形，再與動(dòng)畫相

2、結(jié)合，經(jīng)視覺(jué)反饋提供給患兒準(zhǔn)確的語(yǔ)音信息，使聾兒對(duì)自己的發(fā)音有個(gè)更清楚地認(rèn)識(shí)，又能通過(guò)發(fā)音提示領(lǐng)悟到這些圖形在自己的口型及發(fā)音上的實(shí)際物理意義，從而達(dá)到更好的訓(xùn)練效果。 根據(jù)聾兒語(yǔ)音訓(xùn)練過(guò)程及其使用環(huán)境的需求，本文首先介紹了語(yǔ)音的預(yù)處理過(guò)程，重點(diǎn)研究了單音節(jié)漢語(yǔ)語(yǔ)音的聲調(diào)識(shí)別和共性識(shí)別方法。從漢語(yǔ)語(yǔ)音的特點(diǎn)出發(fā)，提出了適合于聾兒語(yǔ)言康復(fù)訓(xùn)練的預(yù)處理和識(shí)別方法。 預(yù)處理部分中，主要研究了端點(diǎn)檢測(cè)方法。在很長(zhǎng)一段時(shí)間里，語(yǔ)音

3、端點(diǎn)檢測(cè)算法主要是依據(jù)語(yǔ)音信號(hào)的時(shí)域特性，隨著語(yǔ)音處理技術(shù)的發(fā)展，又出現(xiàn)了很多頻域的端點(diǎn)檢測(cè)方法。這些方法都存在各自的優(yōu)缺點(diǎn)，根據(jù)其使用環(huán)境的不同，應(yīng)該選用不同的端點(diǎn)檢測(cè)方法。聾兒語(yǔ)言康復(fù)訓(xùn)練系統(tǒng)的應(yīng)用環(huán)境為安靜的室內(nèi)，背景噪聲較小。經(jīng)室內(nèi)環(huán)境實(shí)驗(yàn)，利用短時(shí)能量和短時(shí)過(guò)零率的端點(diǎn)檢測(cè)方法即可滿足系統(tǒng)的要求，且這種檢測(cè)方法計(jì)算簡(jiǎn)單，有利于系統(tǒng)的實(shí)時(shí)實(shí)現(xiàn)。根據(jù)語(yǔ)音處理的需要，本文在原有算法的基礎(chǔ)上進(jìn)行改進(jìn)，提取出語(yǔ)音的起始端、濁音段起始端以

4、及語(yǔ)音的結(jié)束端三個(gè)端點(diǎn)，為此后的聲調(diào)識(shí)別和共性識(shí)別作準(zhǔn)備。最后，還簡(jiǎn)要介紹了存在背景噪聲情況下的語(yǔ)音去噪方法，以提高聾兒語(yǔ)言康復(fù)訓(xùn)練系統(tǒng)的適用性。 聲調(diào)識(shí)別是聾兒語(yǔ)言康復(fù)訓(xùn)練系統(tǒng)的一個(gè)重要內(nèi)容。由于說(shuō)話的速度受情緒、形式和環(huán)境的影響，使得即使發(fā)同一個(gè)音，提取的聲調(diào)軌跡也不盡相同，這種聲調(diào)長(zhǎng)度的不確定性以及個(gè)性的差異，使得聲調(diào)識(shí)別變得困難。本文從漢語(yǔ)聲調(diào)的變化規(guī)律出發(fā)，提出了基于一次曲線擬合的漢語(yǔ)單音節(jié)聲調(diào)識(shí)別方法。該方法通過(guò)對(duì)聲

5、調(diào)軌跡進(jìn)行一次曲線擬合，提取了聲調(diào)軌跡方差、擬合直線斜率、擬合優(yōu)度以及擬合后的殘差平方和四個(gè)參數(shù)，通過(guò)對(duì)各個(gè)參數(shù)設(shè)置不同的閾值，來(lái)識(shí)別四聲調(diào)。為了進(jìn)一步提高識(shí)別率，還結(jié)合基于能量的預(yù)分類方法，來(lái)提高了三聲聲調(diào)的識(shí)別率。通過(guò)實(shí)驗(yàn)，這種聲調(diào)識(shí)別方法，在不需要進(jìn)行訓(xùn)練的情況下，最終達(dá)到了97.84％的正確聲調(diào)識(shí)別率。語(yǔ)音的共性識(shí)別關(guān)系到聾兒對(duì)語(yǔ)意信息的理解，也是聾兒語(yǔ)言康復(fù)訓(xùn)練系統(tǒng)不可缺少的一個(gè)重要內(nèi)容。本文從漢語(yǔ)音節(jié)的特點(diǎn)出發(fā)，提出了將音節(jié)