中英文新聞網(wǎng)頁(yè)關(guān)鍵詞抽取技術(shù)研究.pdf_第1頁(yè)
已閱讀1頁(yè),還剩57頁(yè)未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

1、信息技術(shù)的飛速發(fā)展和互聯(lián)網(wǎng)的普及使得網(wǎng)上信息呈現(xiàn)出幾何級(jí)數(shù)的增長(zhǎng)。檢索和利用網(wǎng)絡(luò)信息變得越來(lái)越困難。如何有效的對(duì)海量信息進(jìn)行組織、壓縮和檢索,提高信息訪問(wèn)的效率成了一個(gè)越來(lái)越重要的課題。作為網(wǎng)絡(luò)信息傳播的重要載體,眾多新聞網(wǎng)頁(yè)沒(méi)有關(guān)鍵詞。對(duì)這些網(wǎng)頁(yè)進(jìn)行關(guān)鍵詞抽取,將提高用戶瀏覽的速度和信息的訪問(wèn)效率。 從這點(diǎn)出發(fā),本文研究了自然語(yǔ)言處理和信息檢索技術(shù)的一個(gè)重要領(lǐng)域-新聞網(wǎng)頁(yè)的關(guān)鍵詞自動(dòng)抽取。在追蹤了國(guó)內(nèi)外研究現(xiàn)狀,分析比較了各類(lèi)

2、關(guān)鍵詞抽取算法的基礎(chǔ)上,提出了一種不依賴語(yǔ)種、不依賴訓(xùn)練語(yǔ)料庫(kù)的單文檔的基于詞匯鏈和詞共現(xiàn)的新聞網(wǎng)頁(yè)關(guān)鍵詞抽取算法KEUD和算法KELCC。大量的隨機(jī)新聞網(wǎng)頁(yè)實(shí)驗(yàn)結(jié)果表明,本文提出的算法是有效的新聞網(wǎng)頁(yè)關(guān)鍵詞抽取算法。 綜上所述,本文的主要工作如下: (1)對(duì)新聞網(wǎng)頁(yè)關(guān)鍵詞抽取展開(kāi)研究,從理論和實(shí)驗(yàn)兩方面證明了基于語(yǔ)義分析的關(guān)鍵詞抽取方法有著良好的應(yīng)用前景。在對(duì)提出的基于詞匯鏈的關(guān)鍵詞抽取算法KEUD實(shí)驗(yàn)驗(yàn)證的基礎(chǔ)上,將

3、詞語(yǔ)相關(guān)性引入詞語(yǔ)語(yǔ)義相似度分析中,提出了基于詞匯鏈與詞共現(xiàn)的新聞網(wǎng)頁(yè)關(guān)鍵詞抽取算法KELCC; (2)在抽取關(guān)鍵詞的過(guò)程中實(shí)現(xiàn)了詞語(yǔ)的歧義消解。在自然語(yǔ)言處理和信息檢索技術(shù)中,語(yǔ)義結(jié)構(gòu)的構(gòu)造依賴于每個(gè)詞語(yǔ)的詞義。利用構(gòu)建的詞匯鏈表示文本語(yǔ)義結(jié)構(gòu)就要求實(shí)現(xiàn)對(duì)多義詞的詞義判別。本文借助知識(shí)庫(kù)和語(yǔ)境上下文提供的有效信息,在構(gòu)建詞匯鏈過(guò)程中將詞語(yǔ)的各個(gè)詞義納入到整個(gè)語(yǔ)境下考查,通過(guò)判斷多義詞的詞義與其周?chē)舷挛沫h(huán)境的關(guān)系來(lái)消除多義詞的

4、歧義; (3)每一種特征選擇方法都要與具體的應(yīng)用相結(jié)合才能最大限度發(fā)揮其性能。通過(guò)對(duì)比實(shí)驗(yàn),本文從文章、詞匯鏈和知識(shí)庫(kù)中提出了大量有效特征,借助選取的特征從候選詞集中選擇出最終抽取的關(guān)鍵詞; (4)引入詞語(yǔ)的相關(guān)性以解決未包含詞語(yǔ)的抽取問(wèn)題。提出的KEUD算法由于需要判斷詞語(yǔ)間的語(yǔ)義相似度,而語(yǔ)義相似度的計(jì)算需要知識(shí)庫(kù)的支持。因此不能很好的處理未包含詞的抽取問(wèn)題。為了解決該問(wèn)題,本文在該算法的基礎(chǔ)上加入了詞共現(xiàn)模型,提出

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫(kù)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

評(píng)論

0/150

提交評(píng)論