基于MPEG-4標(biāo)準(zhǔn)的三維人臉動(dòng)畫(huà).pdf

1、本文的工作包括三個(gè)方面:基于MPEG-4標(biāo)準(zhǔn)的面部動(dòng)作編碼、中文文本驅(qū)動(dòng)的人臉動(dòng)畫(huà)、連續(xù)漢語(yǔ)語(yǔ)音驅(qū)動(dòng)的人臉動(dòng)畫(huà),他們也一直是計(jì)算機(jī)視覺(jué)和計(jì)算機(jī)圖形學(xué)中一直具有挑戰(zhàn)性的研究課題.本文提出了一種基于MPEG-4的面部動(dòng)作編碼系統(tǒng),該系統(tǒng)從高到低定義了三個(gè)層次:MPA層,FC層和FAP層.以MPEG-4定義的68個(gè)人臉動(dòng)畫(huà)參數(shù)FAP為基礎(chǔ),首先進(jìn)行FAP到FC的轉(zhuǎn)換,根據(jù)MPA與FC的多對(duì)多關(guān)系,獲得MPA集合,建立以MPA矢量表達(dá)的人臉視位

2、.在基于MPA的人臉表情動(dòng)畫(huà)中,采用B樣條插值生成過(guò)渡幀,FACS引擎會(huì)根據(jù)MPA-FC-FAP的映射關(guān)系把MPA所描述的人臉動(dòng)作裝化為MPEG-4規(guī)定的FAP的值,然后再驅(qū)動(dòng)線(xiàn)框架的三維人臉模型產(chǎn)生動(dòng)畫(huà).在面部動(dòng)作編碼系統(tǒng)和靜態(tài)視位庫(kù)的基礎(chǔ)上,提出了一套完整的文本驅(qū)動(dòng)人臉動(dòng)畫(huà)的方法,以中文文本為數(shù)據(jù)源,提取出音素流,從嘴唇靜態(tài)視位庫(kù)中選取由MPA矢量表達(dá)的關(guān)鍵幀,采用基于權(quán)重函數(shù)的協(xié)同發(fā)音模型來(lái)擬合過(guò)渡幀,由FACS引擎來(lái)驅(qū)動(dòng)三維人臉