基于Kinect的手勢(shì)識(shí)別技術(shù)及其在教學(xué)中的應(yīng)用.pdf

1、隨著計(jì)算機(jī)技術(shù)的發(fā)展，人機(jī)交互也經(jīng)過了命令行界面、圖形用戶界面，到自然用戶界面（NUI）的發(fā)展過程。自然用戶界面即用戶以自然的方式與計(jì)算機(jī)進(jìn)行交流如語音、觸控、手勢(shì)等。其中手勢(shì)是一種自然而直觀的人際交流模式.基于視覺的手勢(shì)識(shí)別是實(shí)現(xiàn)新一代人機(jī)交互所不可缺少的一項(xiàng)關(guān)鍵技術(shù)。Kinect作為一個(gè)革命性的產(chǎn)品，正在提供一項(xiàng)全新的人機(jī)交互的方式，使人機(jī)互動(dòng)的理念更加徹底的展現(xiàn)出來。它能夠捕捉、跟蹤以及解密人體的動(dòng)作，手勢(shì)以及聲音，而其在教學(xué)中的

2、應(yīng)用以體感教學(xué)為主。本文通過利用Kinect進(jìn)行靜態(tài)手勢(shì)識(shí)別，和單手、雙手動(dòng)態(tài)手勢(shì)識(shí)別，以提供無接觸式互動(dòng)交互。并在此基礎(chǔ)上結(jié)合其他元素實(shí)現(xiàn)可應(yīng)用于教學(xué)的自然用戶界面。
　　本論文的工作主要有一下幾個(gè)方面。首先有定義一套簡單易用的NUI接口，其目標(biāo)是使其更好的用于體感教學(xué)。其次利用Kinect提供的深度信息提取出手部，并利用邊界追蹤算法進(jìn)行指尖定位，從而實(shí)現(xiàn)靜態(tài)手勢(shì)識(shí)別。利用在語音識(shí)別上廣泛應(yīng)用的隱馬爾可夫模型(HMM)進(jìn)行動(dòng)態(tài)手