基于語(yǔ)音信號(hào)可視化的聽(tīng)覺(jué)補(bǔ)償方法研究.pdf

1、語(yǔ)音是人類之間交流信息的主要手段之一，目前，針對(duì)喪失了語(yǔ)言交流能力的聽(tīng)力障礙者，出現(xiàn)了語(yǔ)言康復(fù)訓(xùn)練系統(tǒng)和語(yǔ)言讀寫(xiě)系統(tǒng)兩類輔助設(shè)備。將語(yǔ)音信息以視覺(jué)或觸覺(jué)的方式傳遞給聽(tīng)力障礙者是進(jìn)行聽(tīng)覺(jué)補(bǔ)償?shù)男路椒?，因此論文以語(yǔ)音可視化為背景，進(jìn)行聽(tīng)覺(jué)補(bǔ)償方法的研究。
　　 本文針對(duì)目前聽(tīng)力障礙者的聽(tīng)覺(jué)補(bǔ)償方法，建立了語(yǔ)音信號(hào)圖像顯示的聽(tīng)覺(jué)補(bǔ)償方法。以5個(gè)單元音以及詞匯為實(shí)驗(yàn)對(duì)象，應(yīng)用語(yǔ)音信號(hào)處理的基本理論，對(duì)語(yǔ)音信號(hào)的預(yù)處理、特征提取與識(shí)別算法

2、等環(huán)節(jié)進(jìn)行了計(jì)算驗(yàn)證、性能分析和結(jié)果評(píng)述。應(yīng)用神經(jīng)網(wǎng)絡(luò)理論基礎(chǔ)，構(gòu)建語(yǔ)音識(shí)別神經(jīng)網(wǎng)絡(luò)模型BP(Back-PropagationNetwork)網(wǎng)絡(luò)結(jié)構(gòu)，采用雙門限法端點(diǎn)檢測(cè)后用美爾頻率倒譜系數(shù)MFCC(Mel-frequency cepstral coefficient)提取語(yǔ)音特征參數(shù)，用動(dòng)態(tài)時(shí)間規(guī)整DTW(Dynamic Time Warping)技術(shù)規(guī)整后輸入構(gòu)建好的BP網(wǎng)絡(luò)結(jié)構(gòu)中，進(jìn)行網(wǎng)絡(luò)學(xué)習(xí)，網(wǎng)絡(luò)訓(xùn)練完畢后將測(cè)試樣本輸入已訓(xùn)練