雙模態(tài)語(yǔ)音識(shí)別的視頻特征快速提取方法研究.pdf

1、分類(lèi)號(hào)：!里391UDC：621雙模態(tài)語(yǔ)音識(shí)別的視頻特征快速提取方法研究THERESERCHoFRAPIDFEATUREEXTRACTIoNOFⅥDEOSINTHEBIMODALSPEECHRECOGNlTION學(xué)位授予單位及代碼：拯查堡王太堂(!Q!墨魚(yú)2學(xué)科專(zhuān)業(yè)名稱(chēng)及代碼：槿式退別皇萱篚丕統(tǒng)lQ墨!!Q壘2研究方向：椹述遲別量圖堡處理申請(qǐng)學(xué)位級(jí)別：亟指導(dǎo)教師：王匾苤塾援研究生：王建螢論文起止時(shí)間：2Q!!!!!=2Q12112摘要雙

2、模態(tài)語(yǔ)音識(shí)別技術(shù)已成為國(guó)內(nèi)外研究熱點(diǎn)，通過(guò)將唇動(dòng)信息加入到原有語(yǔ)音識(shí)別系統(tǒng)中，以提高語(yǔ)音識(shí)別率。本文重點(diǎn)研究雙模態(tài)語(yǔ)音識(shí)別技術(shù)中視頻特征的快速提取方法，采用了局部限制模型的方法(CLM)來(lái)實(shí)現(xiàn)。首先建立唇部形狀模型，對(duì)數(shù)據(jù)庫(kù)的唇部進(jìn)行標(biāo)定，然后對(duì)標(biāo)定數(shù)據(jù)進(jìn)行Procrustes分析，并利用主成分分析算法(PCA)對(duì)Procrustes后的數(shù)據(jù)進(jìn)行分析，建立唇部形狀模型。其次，建立了唇部強(qiáng)度模型，在標(biāo)定特征點(diǎn)周?chē)崛D像作為訓(xùn)練數(shù)據(jù)，用線(xiàn)