基于移動(dòng)終端的中國(guó)手語(yǔ)合成系統(tǒng).pdf

1、中國(guó)手語(yǔ)合成系統(tǒng)旨在為聾人教育,聾健間的無(wú)障礙交流創(chuàng)造環(huán)境與基礎(chǔ),它利用人工智能,計(jì)算機(jī)圖形學(xué)等技術(shù),實(shí)現(xiàn)用三維虛擬角色演示用戶(hù)指定的中國(guó)手語(yǔ)。系統(tǒng)的成功研發(fā),為聾人創(chuàng)造無(wú)障礙環(huán)境發(fā)揮起到了重要作用,對(duì)推廣規(guī)范的中國(guó)手語(yǔ)有重大作用,獲得了來(lái)自殘聯(lián)、教育部、聾協(xié)的各界專(zhuān)家的高度評(píng)價(jià)。系統(tǒng)適用于各種服務(wù)行業(yè)和公共場(chǎng)所,可給聾人朋友的學(xué)習(xí)和生活帶來(lái)極大便利,應(yīng)用前景廣闊。
　　在追求人機(jī)和諧的今天,基于三維虛擬人合成技術(shù)的中國(guó)手語(yǔ)合成系

2、統(tǒng)有助于聾人群體使用電視、網(wǎng)絡(luò)、電話(huà)、計(jì)算機(jī)、電影等高科技產(chǎn)品,提高他們的生活質(zhì)量;有助于手語(yǔ)的標(biāo)準(zhǔn)化,擴(kuò)大標(biāo)準(zhǔn)手語(yǔ)的使用范圍,從而擴(kuò)大聾人群體的社會(huì)交流;有助于改善聾人受教育的環(huán)境,通過(guò)合成系統(tǒng)可以向聾啞人提供一種無(wú)障礙的自主學(xué)習(xí)方式,為他們?cè)黾邮芙逃臋C(jī)會(huì),提高他們參與社會(huì)競(jìng)爭(zhēng)的能力。通過(guò)可視化的虛擬人手語(yǔ)動(dòng)作及相關(guān)文字信息的結(jié)合,提高廣大聽(tīng)力語(yǔ)言殘疾人的教育水平和生活質(zhì)量,直接影響2800萬(wàn)聽(tīng)力語(yǔ)言殘疾人平等交流和獲取信息的權(quán)益,

3、也關(guān)系著我國(guó)聾啞人教育質(zhì)量的進(jìn)一步提高。
　　本文的主要研究?jī)?nèi)容如下:
　　虛擬人建模:分析人體模型的幾何表示方法、人體結(jié)構(gòu)及人體上肢運(yùn)動(dòng)特征。針對(duì)兩個(gè)系統(tǒng)的不同特性,選擇了基于VRML97標(biāo)準(zhǔn)中的H-Anim模型模型規(guī)范,建立了基于層次結(jié)構(gòu)的虛擬人模型。
　　手語(yǔ)運(yùn)動(dòng)數(shù)據(jù)采集及靜態(tài)編輯:本文分別采用5DT DataGlove以及EVaRT進(jìn)行運(yùn)動(dòng)數(shù)據(jù)采集,數(shù)據(jù)內(nèi)容主要包含手部和手臂兩部分運(yùn)動(dòng)數(shù)據(jù),并針對(duì)虛擬人使用的數(shù)

4、據(jù)類(lèi)型做相應(yīng)格式的轉(zhuǎn)換。由于運(yùn)動(dòng)設(shè)備采集的數(shù)據(jù)存在數(shù)據(jù)冗余、動(dòng)作偏差等問(wèn)題,需要對(duì)手語(yǔ)詞的各個(gè)關(guān)鍵幀進(jìn)行修正編輯。
　　手語(yǔ)詞優(yōu)化及手語(yǔ)合成:本文提出了手語(yǔ)詞關(guān)鍵幀的優(yōu)化策略,并對(duì)詞庫(kù)中的手語(yǔ)詞做減幀處理。同時(shí)針對(duì)不同自由度的關(guān)節(jié)采用不同的插值算法,在兩個(gè)關(guān)鍵幀間計(jì)算獲取若干等時(shí)間間隔的幀序列,將獲得的幀序列的數(shù)據(jù)賦值給虛擬人進(jìn)行手語(yǔ)運(yùn)動(dòng)合成,還原手語(yǔ)動(dòng)作。
　　分布式結(jié)構(gòu)及中文分詞功能:本文實(shí)現(xiàn)了基于C/S結(jié)構(gòu)的分布式客戶(hù)