基于概念網(wǎng)絡(luò)的信息檢索研究與開發(fā)實(shí)踐.pdf

1、隨著網(wǎng)絡(luò)信息的擴(kuò)張,如何提高信息檢索系統(tǒng)對(duì)自然語言的處理能力,成為研究熱點(diǎn).傳統(tǒng)的基于關(guān)鍵詞字面匹配的方式無法解決復(fù)雜的語言關(guān)聯(lián)問題,一些新的自然語言表達(dá)模型試圖刻畫語義關(guān)系,利用自然語言處理技術(shù)實(shí)現(xiàn)對(duì)文本信息的理解和檢索.該文在分析已有模型和方法的基礎(chǔ)上,提出了基于概念網(wǎng)絡(luò)的信息檢索思想,旨在采用自然語言處理技術(shù)解決檢索系統(tǒng)文本分析的詞法和語義問題,以語言單位的意義(概念)為核心,構(gòu)建英語概念網(wǎng)絡(luò)的語言知識(shí)表達(dá)方式,用于詞法分析、關(guān)聯(lián)

2、搜索、語義匹配與相似度計(jì)算等方面.論文的主要內(nèi)容分為三部分:1.研究并闡釋了概念網(wǎng)絡(luò)的表達(dá)體系,將概念網(wǎng)絡(luò)用于英語的自然語言知識(shí)的表達(dá).概念(義項(xiàng))成為描述語言關(guān)聯(lián)現(xiàn)象的基本單位,按屬性、關(guān)系和行為三部分深入分析了概念的組成,不同的概念通過關(guān)系和行為(產(chǎn)生式規(guī)則)聯(lián)系起來成為概念網(wǎng)絡(luò);分析了基于概念網(wǎng)絡(luò)進(jìn)行信息檢索的可行性,對(duì)在此基礎(chǔ)上的自然語言處理過程作了策略分析,認(rèn)為需要分階段和層次—詞法、語法、語義和語用;初步構(gòu)建了包含英語概念網(wǎng)

3、絡(luò)在內(nèi)的實(shí)驗(yàn)用知識(shí)庫.2.基于知識(shí)的多語言詞法分析器.該文利用專家系統(tǒng)的技術(shù),將詞法分析的知識(shí)組織成數(shù)據(jù)、知識(shí)庫和控制三部分,建立了一套規(guī)則表示與解釋的機(jī)制;需要時(shí)推理機(jī)從數(shù)據(jù)庫調(diào)用知識(shí),實(shí)現(xiàn)了具體分析規(guī)則的內(nèi)容與程序的分離,使得可以無需修改程序代碼而直接向數(shù)據(jù)庫添加、刪除、更新知識(shí),這給系統(tǒng)更新帶來了方便;對(duì)于多語言詞法分析來講,就可能達(dá)到在同一個(gè)框架內(nèi)使用內(nèi)容不同的詞法分析知識(shí)的目的.這個(gè)框架有望能夠以很小的代價(jià)發(fā)展成德語、法語等同