基于參數控制的語音驅動唇形同步人臉動畫.pdf

1、人臉動畫技術是利用計算機圖形學在建模、渲染和實時動畫等方面的理論與方法，以實現實時的、真實感的人臉動畫仿真，廣泛應用于虛擬現實、影視制作、視頻通信等領域。隨著人臉動畫技術應用的不斷深入，研究和開發(fā)直接基于語音驅動的人臉動畫技術，受到人們越來越多的關注。本文探討和研究了基于語音驅動的人臉唇形同步動畫技術，提出和實現了一種新的基于參數控制的語音驅動唇形同步人臉動畫系統(tǒng)。 本文首先就該領域國內外研究成果進行了深入分析與總結，得出了聲學

2、語音和視覺語音之間的內在聯系、人臉參數模型的構建，以及語音特征參數與人臉參數模型之間的映射關系是語音驅動人臉動畫實現方法研究中首先要解決的3個關鍵問題。通過分析語音的產生過程及其聲學特性，結合漢語語音的特點，確立了以共振峰來體現聲學語音和視覺語音之間的內在聯系，建立了分析提取輸入語音信號與唇部運動相關的特征參數的方法。結合人臉唇部運動機理，構建了肌肉拉伸和下頜轉動的人臉唇形物理參數模型。利用語音識別技術將語音序列識別為音素，建立了基于語

3、義層的音素與視素之間的映射模型。提出和建立了一種控制靈活、可移植性強的唇形參數控制方法，實現了真人語音輸入驅動唇形同步變形運動的人臉動畫。 本文結合OpenGL和VC++6.0建立了語音驅動唇形同步動畫的仿真實驗平臺，實現了語音驅動唇形同步動畫的可視效果仿真。實驗仿真結果表明，本文所建立的基于參數控制的語音驅動人臉唇形同步動畫系統(tǒng)，以真人語音作為人臉動畫驅動源，更具真實感，且有效地實現了語音與唇形的實時同步，大大簡化了動畫制作、