面向客服的自動問答系統(tǒng)關(guān)鍵技術(shù)研究.pdf

1、自動問答系統(tǒng)是自然語言處理領(lǐng)域的一個重要研究方向，旨在讓用戶用自然語言進(jìn)行提問并獲得答案?；诔枂栴}集的問答系統(tǒng)，將用戶的常問問題和與之相應(yīng)的答案組織起來，所給定的答案更加準(zhǔn)確、高效。一直以來，如何獲取高質(zhì)量的海量常問問題集數(shù)據(jù)是該類系統(tǒng)的發(fā)展瓶頸，而目前互聯(lián)網(wǎng)中存在著數(shù)以千計的人工客服，每天產(chǎn)生數(shù)以十萬計的人工客服數(shù)據(jù)，為基于常問問題集的問答系統(tǒng)提供了新的發(fā)展機(jī)遇。
　　本文以某游戲交易平臺的23萬人工問答語料為數(shù)據(jù)基礎(chǔ)，以該

2、平臺在線自動客服系統(tǒng)為應(yīng)用背景，主要做了以下幾方面工作:
　　首先，本文設(shè)計了一套完整的基于常問問題集的問答原型系統(tǒng)。在本文所設(shè)計的系統(tǒng)的框架內(nèi)，綜合運用中文分詞、命名實體識別、中文詞性標(biāo)注、句法分析、關(guān)鍵詞提取、信息檢索、相似度計算法等相關(guān)技術(shù)與算法，為在海量數(shù)據(jù)上實現(xiàn)基于常問問題集的問答系統(tǒng)提供了一套完整的解決方案。
　　然后，本文重點對基于常問問題集問答系統(tǒng)中的核心模塊——問句相似度計算模塊進(jìn)行了詳盡的研究與分析。通過

3、對幾種傳統(tǒng)相似度計算方法的比較，結(jié)合本文的實際應(yīng)用背景，總結(jié)出運用傳統(tǒng)相似度計算方法解決本文所處理問題時的缺陷與不足。在研究與分析的基礎(chǔ)上，本文從權(quán)重調(diào)整、同義詞擴(kuò)展、詞匯對齊、依存句法分析等幾個角度提出了詳細(xì)的改進(jìn)方案，并引入線性模型，使用Pranking算法對本文所研究的多種相似度計算方法進(jìn)行特征融合，進(jìn)一步提升系統(tǒng)性能。
　　最后，本文通過實驗，對前文的理論分析的正確性和本文提出的改進(jìn)算法的有效性進(jìn)行驗證。對于效果較差的相似