基于RGB-Depth攝像機(jī)的手勢(shì)交互技術(shù)研究與實(shí)現(xiàn).pdf

1、手勢(shì)交互是人機(jī)交互中十分重要的研究課題,近年來在虛擬現(xiàn)實(shí)、機(jī)器人控制以及交互式游戲等領(lǐng)域得到了廣泛的關(guān)注與應(yīng)用。作為一種自然友好的交互方式,基于視覺的手勢(shì)交互是手勢(shì)交互的一個(gè)重要分支,也是手勢(shì)交互目前的研究熱點(diǎn)和未來的發(fā)展趨勢(shì)。本文利用RGB-Depth攝像機(jī),對(duì)基于視覺手勢(shì)交互的關(guān)鍵技術(shù)做了一系列研究,主要工作及取得的成果包括以下幾點(diǎn):
　　(1)利用RGB-Depth相機(jī),提出一種基于膚色和深度信息的手勢(shì)檢測(cè)方法。傳統(tǒng)的手勢(shì)檢

2、測(cè)通常使用膚色分割或基于外形的方法,在背景較復(fù)雜時(shí)難以將手部區(qū)域較好地分割出來。針對(duì)此問題,該方法首先對(duì)RGB相機(jī)和Depth相機(jī)進(jìn)行標(biāo)定,并將深度圖投影到RGB坐標(biāo)系下得到投影圖,然后利用投影圖將深度分割方法和一種改進(jìn)的膚色分割方法相結(jié)合進(jìn)行手勢(shì)檢測(cè)。實(shí)驗(yàn)證明了該方法的魯棒性,特別是在手和臉發(fā)生自遮擋或者背景中有其他人干擾而遮擋時(shí),該方法仍然能較好地分割出手勢(shì)圖像。
　　(2)利用RGB-Depth相機(jī),提出一種結(jié)合深度圖的手勢(shì)

3、識(shí)別方法。該方法從分類器融合的角度出發(fā),利用深度圖和AdaBoost算法訓(xùn)練手勢(shì)分類器,然后對(duì)分割出來的手勢(shì)提取Haar-like特征并識(shí)別特定手勢(shì)。實(shí)驗(yàn)結(jié)果表明,這種結(jié)合深度圖的方法速度快,既能較好地滿足系統(tǒng)實(shí)時(shí)性要求,也能一定程度上提高手勢(shì)的識(shí)別率,是一種綜合性能較好的手勢(shì)識(shí)別方法。
　　(3)構(gòu)建了一個(gè)基于RGB-Depth相機(jī)的手勢(shì)交互系統(tǒng),該系統(tǒng)利用RGB-Depth相機(jī)捕獲彩色圖和深度圖,然后利用本文提出的手勢(shì)檢測(cè)和識(shí)