基于DTW及光流法融合的動(dòng)態(tài)手勢(shì)識(shí)別技術(shù)研究.pdf

1、隨著人機(jī)交互技術(shù)（HCI）的普及及興起，動(dòng)態(tài)手勢(shì)識(shí)別技術(shù)越來(lái)越受到研究人員的重視，并逐漸成為人機(jī)交互領(lǐng)域的一項(xiàng)重要技術(shù)。研究動(dòng)態(tài)手勢(shì)識(shí)別技術(shù)，不僅在理論研究中占據(jù)重要地位，而且在實(shí)踐應(yīng)用中也具有極高價(jià)值。
　　動(dòng)態(tài)手勢(shì)識(shí)別技術(shù)主要由圖像預(yù)處理及分割、手形特征提取及學(xué)習(xí)、軌跡特征提取、動(dòng)態(tài)時(shí)間歸整法（DTW，Dynamic Time Warping）訓(xùn)練與識(shí)別四部分組成。在手勢(shì)分割中，基于膚色的分割方法在相對(duì)簡(jiǎn)單的背景下有著很好的分

2、割效果，然而當(dāng)背景變得復(fù)雜時(shí)，特別是圖像背景中存在類膚色區(qū)域時(shí)，該分割方法就會(huì)無(wú)法正確追蹤手部位置，從而導(dǎo)致分割效果不盡人意。因此，本文引入了一種質(zhì)心定位的方法，該方法通過(guò)對(duì)手部質(zhì)心的位置進(jìn)行預(yù)估判斷，從而較好地解決手部區(qū)域在運(yùn)動(dòng)過(guò)程中的有效跟蹤問(wèn)題。在動(dòng)態(tài)手勢(shì)軌跡跟蹤過(guò)程中，由于手勢(shì)背景比較復(fù)雜且手的質(zhì)心受手形影響較大，基于質(zhì)心估計(jì)的軌跡跟蹤方法會(huì)出現(xiàn)不穩(wěn)定現(xiàn)象。針對(duì)此問(wèn)題，本文引入了基于光流法的軌跡跟蹤方法。光流法不需要完全提取手部

3、區(qū)域，且跟蹤信息只取決于相鄰兩幀手勢(shì)圖像的相對(duì)運(yùn)動(dòng)，具有不受復(fù)雜背景影響的優(yōu)點(diǎn)。在動(dòng)態(tài)手勢(shì)識(shí)別過(guò)程中，原有DTW算法雖然訓(xùn)練簡(jiǎn)單，但卻存在計(jì)算量大的缺陷。本文通過(guò)有效地控制兩組時(shí)間序列數(shù)據(jù)匹配范圍及匹配失真度對(duì)該算法進(jìn)行了優(yōu)化。本文主要?jiǎng)?chuàng)新點(diǎn)如下：
　?。?）本文引入了一種基于質(zhì)心定位的手勢(shì)分割方法。在復(fù)雜背景下，現(xiàn)存手勢(shì)分割方法的效果不盡人意，而本文引入的分割方法充分利用了手勢(shì)的運(yùn)動(dòng)特性，該方法先采用膚色分割提取手部及臉部區(qū)域，

4、并基于手部質(zhì)心及其他區(qū)域（臉部）質(zhì)心的運(yùn)動(dòng)特性，將手部分割出來(lái)。這種分割方法簡(jiǎn)單高效，實(shí)驗(yàn)效果更好。
　?。?）本文引入了跟蹤效果更佳的迭代LK（Lucas-Kanade）金字塔光流跟蹤算法。該跟蹤算法通過(guò)手部關(guān)鍵位置的運(yùn)動(dòng)變化來(lái)分析整個(gè)手勢(shì)的運(yùn)動(dòng)軌跡，解決了原有質(zhì)心跟蹤方法所存在的缺陷。在質(zhì)心跟蹤方法中，質(zhì)心位置易受相似膚色目標(biāo)及手形變化的影響，而本文引入的光流法受背景影響較小，并且分析的圖像內(nèi)容也會(huì)減少，從而在不影響實(shí)時(shí)性的情