基于中文分詞技術(shù)的在線自動答疑系統(tǒng)研究.pdf

1、隨著我國網(wǎng)絡(luò)技術(shù)的發(fā)展,計算機(jī)技術(shù)在各領(lǐng)域也得到了廣泛的應(yīng)用,其中一個重要的應(yīng)用及典型的實例就是我國網(wǎng)絡(luò)教育的普及化。而答疑系統(tǒng)與網(wǎng)絡(luò)教育平臺是緊密聯(lián)系的,它是網(wǎng)絡(luò)教學(xué)中的一個重要支點,答疑系統(tǒng)能幫助學(xué)生克服一系列在實際中遇到的問題,解決學(xué)習(xí)過程中的疑惑,使教學(xué)能夠更加順利的進(jìn)行。它的發(fā)展是伴隨著多種相關(guān)的技術(shù)一起應(yīng)用的,中文分詞方法是現(xiàn)階段中考慮最多的技術(shù)。可以說,如果沒有使用分詞算法,再完美的答疑系統(tǒng)也是不具備智能性的。
　　

2、 本文是建立在中文分詞技術(shù)的基礎(chǔ)上,研究和設(shè)計的一個在線自動答疑系統(tǒng)。首先,我們分析了這個系統(tǒng)的背景和研究現(xiàn)狀;其次,簡要的描述了現(xiàn)有的分詞技術(shù)并確定了將字符串匹配方法作為本文的分詞方法;最后確定將全切分圖算法應(yīng)用到字符串匹配方法中。算法的過程大致是:將待處理字符串按照內(nèi)存中讀取的詞典內(nèi)容逐一掃描得到一個串首詞集合,對該集合中每一元素的剩余子串進(jìn)行遞歸掃描,最后得到一條最優(yōu)路徑的過程。分詞質(zhì)量的好壞直接影響答疑系統(tǒng)的準(zhǔn)確性,分詞詞典的

3、設(shè)計影響分詞的時間,實驗結(jié)果表明,該方法有利于實現(xiàn)對字典一次訪問后的多次利用,能一定程度提高了智能答疑系統(tǒng)的效率。
　　 分析答疑系統(tǒng)自身需要的特點后,研究本系統(tǒng)的程序代碼,將基于全切分圖算法的機(jī)械分詞方法嵌入到Lucene全文檢索系統(tǒng)中。根據(jù)Lucene檢索引擎具有很強的面向?qū)ο蟮奶卣?對其核心部分的抽象類與開放的msnm-lib包中的類進(jìn)行封裝,實現(xiàn)答疑系統(tǒng)的在線自動功能。Lucene系統(tǒng)采用模糊查詢的方法,對分詞后的關(guān)鍵詞