多視角的唇動(dòng)身份識(shí)別研究.pdf

1、基于多視角的唇動(dòng)的身份識(shí)別技術(shù)，是多視角人臉識(shí)別和正面唇動(dòng)身份識(shí)別的生物特征識(shí)別技術(shù)的延伸和組合。說(shuō)話(huà)時(shí)的唇動(dòng)信息，既體現(xiàn)了說(shuō)話(huà)人嘴唇的固有生理特點(diǎn)，也反映了運(yùn)動(dòng)變化的個(gè)性行為特點(diǎn)，為進(jìn)行身份識(shí)別提供了充分的有用信息。而多視角的唇動(dòng)身份識(shí)別不僅補(bǔ)充了單一視角的缺陷，同時(shí)消除了對(duì)使用者造成的視角的限制。
　　作為研究的基礎(chǔ)，本文首先構(gòu)建了基于多視角的唇動(dòng)識(shí)別語(yǔ)料庫(kù)（HIT-AVDB-II），該語(yǔ)料庫(kù)錄制于不同的光照條件下，涵蓋多種語(yǔ)

2、言、多種背景等。
　　在嘴唇檢測(cè)方面，我們針對(duì)多視角的特點(diǎn)，采用自適應(yīng)的顏色空間轉(zhuǎn)換和水平集方法相結(jié)合的方法，提高了輪廓獲取的準(zhǔn)確度。為了解決視頻分割不同步的問(wèn)題，采用了曲線的面積覆蓋和的方法，進(jìn)行唇動(dòng)曲線同步。
　　在特征提取和模型構(gòu)建上，首先用DCT和SCHMM相結(jié)合的方法。針對(duì)圖像的嘴唇部分進(jìn)行 DCT變換，采用低頻分量構(gòu)建“eigenlip”，然后使用 SCHMM構(gòu)建說(shuō)話(huà)人模型。實(shí)驗(yàn)結(jié)果表明直接使用圖像表觀特征進(jìn)行身