增強可懂性的中國手語多模式行為合成研究.pdf

1、手語是聾啞人使用的語言，由手形動作輔之以表情姿勢而構(gòu)成的比較穩(wěn)定的表達系統(tǒng)，是一種靠動作、視覺進行交流的特殊語言。中國有上千萬聾啞人，而手語作為聾啞人的第一自然語言運用非常廣泛，因此，通過計算機手段對中國手語進行動畫合成表達，不但有助于改善和提高聾啞人的生活學習和工作條件，為他們提供更好的服務，同時也可以應用于計算機輔助手語教學、電視節(jié)目雙語播放、虛擬人的研究、醫(yī)療研究、游戲娛樂等諸多方面。另外，手語合成技術(shù)研究涉及到計算機圖形學、虛擬

2、現(xiàn)實、數(shù)學建模、自然語言分析等多個領域，這種跨領域性和學科的交叉性使手語合成技術(shù)研究具有了非常重要的意義。 本論文將結(jié)合目前的國內(nèi)外相關(guān)研究，對中國手語的合成中的虛擬人仿真技術(shù)、表情動畫、肢體語言，以及韻律分析等方面進行深入探索。本文首先介紹了虛擬人建模技術(shù)、定義建立的虛擬人模型、說明了VRML虛擬人建模國際標準，然后重點講述了運動捕獲設備和關(guān)節(jié)動畫技術(shù)的結(jié)合在系統(tǒng)中的應用?？紤]到表情、肢體動作和韻律都對手語交流中的含義傳遞有極

3、大的影響，本文將表情動畫技術(shù)、肢體語言中的頭部運動合成，以及手語韻律建模列為三個關(guān)鍵技術(shù)進行研究，我們稱之為“手語表達中多模式行為合成”。 本文的貢獻在于： 1)闡述了中國手語合成系統(tǒng)的各項虛擬人仿真技術(shù)：虛擬人建模技術(shù)、運動捕獲技術(shù)、動畫驅(qū)動技術(shù)。 2)闡明表情在手語表達中的重要地位，對傳統(tǒng)表情動畫技術(shù)進行了歸納總結(jié)，然后結(jié)合MPEG-4面部動畫標準，提出了中國手語合成系統(tǒng)中表情動畫技術(shù)的研究方法。 3