基于層次短語(yǔ)的漢蒙統(tǒng)計(jì)機(jī)器翻譯后處理研究.pdf

1、在漢蒙統(tǒng)計(jì)機(jī)器翻譯方法中最流行的是基于短語(yǔ)的漢蒙統(tǒng)計(jì)機(jī)器翻譯方法，而該方法有它自己的缺點(diǎn)，即長(zhǎng)距離調(diào)序能力較弱，另外，短語(yǔ)長(zhǎng)度擴(kuò)展到3個(gè)以上時(shí)，出現(xiàn)非常嚴(yán)重的數(shù)據(jù)稀疏問(wèn)題，使得模型性能提高不是很大，為此，D.CHiang（蔣偉）提出基于層次短語(yǔ)的翻譯模型試圖解決這一問(wèn)題?；趯哟味陶Z(yǔ)的統(tǒng)計(jì)機(jī)器翻譯方法屬于形式化句法的翻譯方法，該方法的主要思想是短語(yǔ)本身包含了更小的短語(yǔ)，從而利用層次短語(yǔ)本身的規(guī)則來(lái)解決短語(yǔ)之間的長(zhǎng)距離調(diào)序問(wèn)題。
　

2、　本文采用基于短語(yǔ)的翻譯模型和基于層次短語(yǔ)的翻譯模型分別做了3、4、5和6元語(yǔ)言模型的漢蒙統(tǒng)計(jì)機(jī)器翻譯實(shí)驗(yàn)。分析實(shí)驗(yàn)結(jié)果可以知道基于層次短語(yǔ)方法中4元語(yǔ)法語(yǔ)言模型的譯文質(zhì)量最好，其評(píng)測(cè)結(jié)果的NIST值為:5.9508，BLEU_SBP值為:0.2820，在基于短語(yǔ)方法中也是4元語(yǔ)言模型的譯文質(zhì)量最好，其評(píng)測(cè)結(jié)果的NIST值為5.9054，BLEU-SBP值為0.2689。在這兩種機(jī)器翻譯方法中，基于層次短語(yǔ)方法的評(píng)測(cè)結(jié)果比基于短語(yǔ)方法的

3、評(píng)測(cè)結(jié)果在NIST值上提高了0.0454，在BLEU_SBP值上提高了0.0131。
　　我們對(duì)漢蒙統(tǒng)計(jì)機(jī)器翻譯譯文進(jìn)行研究發(fā)現(xiàn)存在以下幾個(gè)問(wèn)題，并對(duì)其進(jìn)行了相應(yīng)處理。第一，在譯文中存在很多未登錄漢語(yǔ)數(shù)詞。數(shù)詞是一類無(wú)窮詞匯的開放性詞，是無(wú)法用統(tǒng)計(jì)方法將文本中的所有數(shù)詞進(jìn)行翻譯。為此，我們用基于規(guī)則的方法實(shí)現(xiàn)了漢蒙數(shù)詞自動(dòng)翻譯程序，然后用該程序?qū)ψg文進(jìn)行后處理，對(duì)未登錄數(shù)詞進(jìn)行翻譯。在基于層次短語(yǔ)的4-gram語(yǔ)言模型的譯文上進(jìn)行

4、未登錄漢語(yǔ)數(shù)詞后處理后，其評(píng)測(cè)結(jié)果NIST值為:5.9734，BLEU_SBP值為:0.2836。與基準(zhǔn)實(shí)驗(yàn)相比其NIST值提高了0.0226，BLEU_SBP值提高了0.0016。第二，在譯文中存在很多句尾以句中形式出現(xiàn)的蒙古語(yǔ)動(dòng)詞，對(duì)這種情況，我們實(shí)現(xiàn)了蒙古語(yǔ)動(dòng)詞自動(dòng)生成程序，并在蒙古語(yǔ)動(dòng)詞詞干基礎(chǔ)上，生成了包含所有可能詞形的蒙古語(yǔ)動(dòng)詞庫(kù)。接著，利用蒙古語(yǔ)動(dòng)詞庫(kù)，將譯文中句尾以句中形式出現(xiàn)的錯(cuò)誤動(dòng)詞用動(dòng)詞庫(kù)中最可能正確的句尾形式動(dòng)詞