語(yǔ)音手語(yǔ)合成系統(tǒng)研究與開(kāi)發(fā).pdf

1、聾啞人作為社會(huì)的弱勢(shì)群體，在生活、學(xué)習(xí)、娛樂(lè)方面由于受到溝通語(yǔ)言的限制，可使用的資源非常少。手語(yǔ)作為聾啞人之間溝通、交流的主要語(yǔ)言，需要得到更加規(guī)范化的推廣。隨著社會(huì)信息化的發(fā)展，建立一個(gè)健全人與聾啞人之間的溝通橋梁，變成一個(gè)極為迫切的需求。本文即在這樣的大背景下產(chǎn)生。
　　 本文主要做了以下幾方面的工作:
　　 語(yǔ)音識(shí)別方法的研究，包括對(duì)傳統(tǒng)算法的研究，已有語(yǔ)音識(shí)別引擎SDK的研究，最終選用SDK的方式，實(shí)現(xiàn)系統(tǒng)的語(yǔ)音

2、識(shí)別功能。
　　 中文語(yǔ)義分析的實(shí)現(xiàn)。本文使用中科院的HHMM模型，并對(duì)其詞典存儲(chǔ)方式做了改進(jìn)，實(shí)現(xiàn)了系統(tǒng)的語(yǔ)義分析功能。
　　 虛擬人建模的實(shí)現(xiàn)。本文分析了人體運(yùn)動(dòng)的基本情況，對(duì)關(guān)節(jié)的運(yùn)動(dòng)約束做出了總結(jié)，通過(guò)學(xué)習(xí)不同的虛擬人建模方法，例如H-ANIM標(biāo)準(zhǔn)、建模軟件等等，最終建立了系統(tǒng)所需的虛擬人模型。
　　 虛擬人運(yùn)動(dòng)控制，本文分析了不同的虛擬人運(yùn)動(dòng)控制方法。學(xué)習(xí)并改進(jìn)了基于HAL鏈的實(shí)時(shí)逆向運(yùn)動(dòng)學(xué)求解算法，解

3、決了肘圓問(wèn)題。并對(duì)虛擬人運(yùn)動(dòng)中的手語(yǔ)連音問(wèn)題做了一定處理，使虛擬人的手勢(shì)表達(dá)與實(shí)際更相符合。提出了一套新的虛擬人手部動(dòng)畫(huà)的演繹方式，并根據(jù)關(guān)節(jié)自由度的不同情況使用了不同的插值方法，使用本文提及的方式控制虛擬人，不需要存儲(chǔ)大量虛擬人運(yùn)動(dòng)的片段，更加靈活。
　　 在本文最后，對(duì)基于上述方法的系統(tǒng)做出了實(shí)現(xiàn)，并且從多個(gè)方面對(duì)系統(tǒng)的性能做出了評(píng)估。本系統(tǒng)在實(shí)用性方面來(lái)講，是首個(gè)將中文語(yǔ)音與手語(yǔ)合成相聯(lián)系的系統(tǒng)，將健全人與聾啞人的溝通變?yōu)?/p>