大詞匯量連續(xù)語(yǔ)音識(shí)別系統(tǒng)的統(tǒng)計(jì)語(yǔ)言模型應(yīng)用研究.pdf

1、隨著語(yǔ)音識(shí)別技術(shù)深入廣泛的應(yīng)用，它越來(lái)越將成為模式識(shí)別中的一個(gè)非常重要的研究課題，它的發(fā)展將會(huì)對(duì)未來(lái)的生活、工作帶來(lái)極大的影響，而且該技術(shù)也將會(huì)成為未來(lái)十年的主流技術(shù)。近年來(lái)，由于在語(yǔ)音識(shí)別的研究中大詞匯量、非特定人、連續(xù)語(yǔ)音識(shí)別是最困難、也最具有挑戰(zhàn)性的一個(gè)課題和其廣泛的應(yīng)用前景，所以，它吸引眾多的機(jī)構(gòu)和公司相繼投入研究和開(kāi)發(fā)。雖然基于漢語(yǔ)的大詞匯量連續(xù)語(yǔ)音識(shí)別系統(tǒng)近年來(lái)取得了快速的發(fā)展，但其性能還遠(yuǎn)遠(yuǎn)不能滿足大規(guī)模應(yīng)用的要求，為此對(duì)

2、該技術(shù)進(jìn)一步的研究有著非常重要的意義和價(jià)值。 在大詞匯量連續(xù)語(yǔ)音識(shí)別系統(tǒng)中，語(yǔ)言模型的地位是非常重要。其性能的好壞直接影響到整個(gè)語(yǔ)音識(shí)別系統(tǒng)的使用范圍和識(shí)別效果。因此，構(gòu)建和更新一個(gè)可靠的語(yǔ)言模型對(duì)語(yǔ)音識(shí)別系統(tǒng)是非常關(guān)鍵的。 本文首先詳細(xì)討論了統(tǒng)計(jì)語(yǔ)言模型的工作原理、平滑技術(shù)、評(píng)價(jià)標(biāo)準(zhǔn)等相關(guān)理論。接著，在Linux環(huán)境下搭建HTK建模平臺(tái)，利用Linux下強(qiáng)大的命令工具并通過(guò)編寫B(tài)ash和Perl腳本程序，完成對(duì)訓(xùn)練數(shù)據(jù)

3、的預(yù)處理和分詞，建立了能夠達(dá)到HTK中語(yǔ)言建模工具HLM要求的語(yǔ)料庫(kù)。然后，利用HLM建模工具完成對(duì)訓(xùn)練數(shù)據(jù)的不斷訓(xùn)練，并生成一個(gè)Tri-gram的語(yǔ)言模型，然后對(duì)該語(yǔ)言模型的性能進(jìn)行評(píng)估。由于識(shí)別領(lǐng)域內(nèi)容的不斷更新，導(dǎo)致語(yǔ)音識(shí)別系統(tǒng)中語(yǔ)言模型性能變差，在識(shí)別過(guò)程中出現(xiàn)大量的集外詞。因此，提出了一種利用HTML Parser和PDFBox開(kāi)發(fā)工具包進(jìn)行編程來(lái)提取網(wǎng)頁(yè)內(nèi)容和PDF文檔作為訓(xùn)練數(shù)據(jù)來(lái)源自動(dòng)構(gòu)建更新語(yǔ)言模型的完整的解決方案，采