斑紋式數(shù)據(jù)手套系統(tǒng)的建立及其相關(guān)技術(shù)研究.pdf

1、裝配工藝設(shè)計與規(guī)劃是產(chǎn)品開發(fā)中的重要環(huán)節(jié),隨著虛擬現(xiàn)實技術(shù)的進步,虛擬裝配成為支持裝配工藝設(shè)計與規(guī)劃的新途徑。作為虛擬現(xiàn)實系統(tǒng)的人機交互設(shè)備,數(shù)據(jù)手套為獲取用戶手部的運動數(shù)據(jù)提供了最為直接的解決方案。然而,數(shù)據(jù)手套的成本制約著數(shù)據(jù)手套在虛擬裝配系統(tǒng)的中的應(yīng)用和推廣。此外,數(shù)據(jù)手套由于傳感器本身的局限還存在著使用壽命和標(biāo)定困難等方面的問題。
　　針對數(shù)據(jù)手套應(yīng)用中存在的上述問題,本文提出并設(shè)計一種基于機器視覺的、表面具有一定編碼特征

2、的斑紋式數(shù)據(jù)手套,利用的機器視覺設(shè)備代替附著在手套上的傳感器獲取手套表面的斑紋編碼,通過斑紋的幾何特征和位置信息得到手部運動參數(shù)。為了有效處理斑紋式數(shù)據(jù)手套運動中復(fù)雜的幾何變換關(guān)系,引入了共形幾何代數(shù)這一數(shù)學(xué)工具對斑紋式數(shù)據(jù)手套系統(tǒng)進行描述。分析了手部運動的自由度并在共形幾何代數(shù)的框架下對其進行了幾何劃分,形成手指面和手掌面,在此基礎(chǔ)上建立了斑紋式數(shù)據(jù)手套的數(shù)學(xué)模型,用于求解斑紋式數(shù)據(jù)手套的位姿參數(shù)。
　　提出了斑紋式數(shù)據(jù)手套的編

3、碼方法,應(yīng)用顏色和形狀特征生成手指區(qū)域的彩色斑塊,通過顏色空間的轉(zhuǎn)換和圖像矩的計算,以團塊的形式對這些斑塊進行提取;同時根據(jù)條形碼的原理對手部剩余各區(qū)域的進行編碼。在手指編碼的識別過程中通過多方向條碼信息的聯(lián)合提取,實現(xiàn)了指節(jié)的識別。利用對數(shù)極坐標(biāo)系下的模板匹配對手掌二維編碼進行識別定位,為后續(xù)的跟蹤提供初始化條件。
　　實現(xiàn)了斑紋式數(shù)據(jù)手套在雙目視覺系統(tǒng)中的動態(tài)跟蹤。首先采用粒子濾波算法實現(xiàn)對手掌面上彩色斑塊的平面跟蹤,并根據(jù)手

4、部運動的特點建立指節(jié)連續(xù)運動的共形幾何代數(shù)模型,進一步在雙目視覺系統(tǒng)中對斑紋式數(shù)據(jù)手套的進行跟蹤,獲取手部運動的數(shù)據(jù)。在粒子濾波算法中引入共形幾何代數(shù)的方法設(shè)定粒子參數(shù),解決由于手部姿態(tài)變化引起的局部遮擋問題,更為穩(wěn)定地對斑紋式數(shù)據(jù)手套進行運動跟蹤。
　　針對斑紋式數(shù)據(jù)手套系統(tǒng)虛擬操作功能的實現(xiàn),建立了虛擬手模型并提出斑紋式數(shù)據(jù)手套的虛擬操作規(guī)則。在虛擬手的建模過程中應(yīng)用基于共形幾何代數(shù)的方法實現(xiàn)線性頂點混合,改善了頂點混合中產(chǎn)生

5、的失真現(xiàn)象,增強了虛擬手模型關(guān)節(jié)部分的真實感。將斑紋式數(shù)據(jù)手套獲取的數(shù)據(jù)傳遞到虛擬手,驅(qū)動虛擬手運動。通過斑紋式數(shù)據(jù)手套編碼區(qū)域的可見狀態(tài)進行手勢識別,結(jié)合碰撞檢測和操作有效性判斷的結(jié)果實現(xiàn)虛擬操作。
　　最后,通過規(guī)范化的軟件方法對系統(tǒng)的功能模型和結(jié)構(gòu)流程進行了設(shè)計,開發(fā)了斑紋式數(shù)據(jù)手套系統(tǒng)。針對不同的工作階段,分別對手部尺寸測量、手部運動參數(shù)獲取和虛擬操作進行了實驗驗證,并提出靜態(tài)條件下的手部姿態(tài)測量準(zhǔn)確性和動態(tài)條件下手部位置