可視英漢計(jì)算機(jī)輔助發(fā)音訓(xùn)練系統(tǒng).pdf

1、本文著眼于語音可視化，目的在于揭示真人的發(fā)音運(yùn)動(dòng)。首先，通過電磁發(fā)音儀（Electro Magnetic Articulography，EMA）AG500，以200幀/秒的采樣率采集了真實(shí)說話人的英語及漢語的發(fā)音動(dòng)作數(shù)據(jù);接著，以采集的發(fā)音動(dòng)作數(shù)據(jù)來驅(qū)動(dòng)和控制了一個(gè)虛擬的3D說話人頭模型，從而逼真地呈現(xiàn)了口腔內(nèi)外發(fā)音器官的發(fā)音運(yùn)動(dòng)。
　　 為了獲得英漢雙語的易混淆發(fā)音文本對(duì)比對(duì)，進(jìn)而直觀比較雙語的發(fā)音運(yùn)動(dòng)。本文基于英語和漢語的標(biāo)

2、準(zhǔn)發(fā)音動(dòng)作數(shù)據(jù)，對(duì)英語和漢語的元音和輔音分別進(jìn)行了交叉語言比較，然而，交叉語言比較的首要任務(wù)就是要消除特定說話人聲道特性及其它個(gè)人生理特性等音素而引起的固有差別，本文采用了基于說話人歸一化的普氏算法來進(jìn)行說話人歸一化處理，接著利用分層聚類分析算法和多維標(biāo)度定位算法對(duì)相似發(fā)音對(duì)進(jìn)行了量化的比較，從而獲得了英漢相似音素發(fā)音的元音對(duì)比最小對(duì)和輔音對(duì)比最小對(duì)，并揭示了這兩種語言的易混淆發(fā)音文本對(duì)在發(fā)音動(dòng)作上的區(qū)別。
　　 本文的發(fā)音文本

3、由普通話語料、英語語料、以及英漢雙語的語料和最小對(duì)組成。為了基于一系列音素的發(fā)音運(yùn)動(dòng)合成任意發(fā)音文本的發(fā)音軌跡，本文提出了一種改進(jìn)的CM協(xié)同發(fā)音模型。實(shí)驗(yàn)表明:由改進(jìn)方法獲得的合成發(fā)音軌跡在幅度和波形上均可以更加逼近真實(shí)的發(fā)音軌跡。本文采用改進(jìn)的CM協(xié)同發(fā)音模型合成了發(fā)音文本的三維發(fā)音動(dòng)作，進(jìn)而以此驅(qū)動(dòng)和控制說話人頭模型，直觀展現(xiàn)了說話人發(fā)音時(shí)唇、舌等發(fā)音器官的發(fā)音動(dòng)作，并手動(dòng)配以標(biāo)準(zhǔn)的音頻發(fā)音，構(gòu)建了一個(gè)可視英漢計(jì)算機(jī)輔助發(fā)音訓(xùn)練系統(tǒng)

4、。
　　 此外，為了評(píng)價(jià)本系統(tǒng)的性能，本文進(jìn)行了人工評(píng)測(cè)。評(píng)價(jià)結(jié)果表明:本系統(tǒng)可以有效地模擬說話人發(fā)音時(shí)口腔內(nèi)外發(fā)音器官的發(fā)音動(dòng)作。另外，分別研究了本系統(tǒng)對(duì)言語障礙兒童和第二語言學(xué)習(xí)者的幫助，結(jié)果表明:本系統(tǒng)可對(duì)言語障礙兒童的發(fā)音訓(xùn)練起到一定的康復(fù)作用，且第二語言學(xué)習(xí)者在本系統(tǒng)的發(fā)音指導(dǎo)下均可提高其發(fā)音訓(xùn)練的效果和效率。最后，本文還設(shè)計(jì)了感知實(shí)驗(yàn)來檢驗(yàn)舌讀在語音感知和識(shí)別中的作用，結(jié)果表明:舌讀信息可提供大于唇讀信息的補(bǔ)充作用，