基于意見(jiàn)挖掘技術(shù)的網(wǎng)購(gòu)評(píng)論傾向性分析的研究與應(yīng)用.pdf_第1頁(yè)
已閱讀1頁(yè),還剩62頁(yè)未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

1、互聯(lián)網(wǎng)的高速發(fā)展使得網(wǎng)上購(gòu)物越來(lái)越盛行,這極大改變了人們的購(gòu)物方式。而人們對(duì)商品及購(gòu)物過(guò)程的感受,也從口口相傳發(fā)展為以網(wǎng)購(gòu)評(píng)論的方式來(lái)傳播。網(wǎng)購(gòu)評(píng)論,不論對(duì)于普通購(gòu)買者還是產(chǎn)品生產(chǎn)者都極為重要。本文力求通過(guò)從網(wǎng)購(gòu)評(píng)論中分析、提取人們對(duì)商品的情感傾向,進(jìn)而幫助消費(fèi)者選擇適合的商品,也幫助生產(chǎn)者有針對(duì)性地提高產(chǎn)品質(zhì)量。
   基于意見(jiàn)挖掘的文本傾向性分析一般是將文檔或句子看作詞、短語(yǔ)或模式的集合,通過(guò)識(shí)別關(guān)鍵詞、短語(yǔ)或模式,并計(jì)算其

2、傾向性值,再將結(jié)果累加得到待分析文檔或句子的傾向性值。文本傾向性分析一般通過(guò)數(shù)據(jù)采集、文本預(yù)處理、傾向性識(shí)別與判斷以及結(jié)果展示等四個(gè)步驟實(shí)現(xiàn)。
   本文深入地研究了現(xiàn)有的文本傾向性分析方法,從京東商城上抓取網(wǎng)購(gòu)評(píng)論數(shù)據(jù),通過(guò)對(duì)數(shù)據(jù)的分析和統(tǒng)計(jì),總結(jié)了網(wǎng)購(gòu)評(píng)論數(shù)據(jù)的特點(diǎn),進(jìn)而提出基于詞性模式的抽取和合并算法(POSEM算法),應(yīng)用該算法抽取出訓(xùn)練數(shù)據(jù)集中的有效詞性模式,再根據(jù)詞性模式的特點(diǎn),設(shè)計(jì)了模式匹配規(guī)則,最后,運(yùn)用這些規(guī)則

3、,從測(cè)試集中抽取出中心詞和評(píng)價(jià)詞,并實(shí)現(xiàn)了評(píng)論語(yǔ)句的傾向性判別。實(shí)驗(yàn)結(jié)果表明,本文提出的方法取得了較高的精確率和召回率。
   本文的主要工作如下:
   (1)本文結(jié)合現(xiàn)有的文本傾向性分析理論,對(duì)獲得的網(wǎng)購(gòu)評(píng)論數(shù)據(jù)進(jìn)行了深入地分析和統(tǒng)計(jì),總結(jié)了網(wǎng)購(gòu)評(píng)論數(shù)據(jù)與傾向性分析相關(guān)的特點(diǎn):評(píng)論句子中,形容詞對(duì)傾向性判別的貢獻(xiàn)最大,其在主觀句中的數(shù)量與總數(shù)的比例最大,達(dá)到86.87%;名詞、副詞的貢獻(xiàn)次之,比例分別達(dá)到71.64%

4、和70.79%;其他詞性,如動(dòng)詞、介詞,對(duì)傾向性的分析也有重要的作用。
   (2)基于對(duì)網(wǎng)購(gòu)評(píng)論數(shù)據(jù)的分析,本文設(shè)計(jì)并實(shí)現(xiàn)了基于詞性模式的抽取與合并算法(POSEM算法)。該算法使用“POS\T\O”表示詞性模式信息,并對(duì)詞性模式的長(zhǎng)度、在數(shù)據(jù)集在出現(xiàn)的頻率和出現(xiàn)在主觀句中的概率,分別設(shè)計(jì)了長(zhǎng)度閾值、頻度閾值和上下限概率閾值。其中,滿足下限概率閾值的模式用于否定評(píng)論句子的傾向性。抽取算法從預(yù)處理后的訓(xùn)練文本數(shù)據(jù)中,抽取出滿足全

5、部閾值的詞性模式。對(duì)于僅符合長(zhǎng)度閾值和上下限概率閾值的模式,在保留模式中的中心詞和評(píng)價(jià)詞信息的前提下,合并算法嘗試將其進(jìn)行合并,以獲得能夠滿足全部閾值要求的模糊模式。這樣的設(shè)計(jì)可以在一定程度上提高傾向性分析的召回率。
   (3)基于對(duì)POSEM算法抽取到的詞性模式的分析,本文設(shè)計(jì)了模式匹配規(guī)則,并從測(cè)試文本數(shù)據(jù)中識(shí)別出中心詞、評(píng)價(jià)詞,再利用以高精確率抽取得到的中心詞和評(píng)價(jià)詞來(lái)處理剩余的未處理文本,最后根據(jù)總結(jié)出的傾向性判別規(guī)則

6、得到評(píng)論句子的傾向性。通過(guò)對(duì)實(shí)驗(yàn)結(jié)果的分析,本文提出的方法具有較高的精確率和召回率。
   (4)本文設(shè)計(jì)實(shí)現(xiàn)了一個(gè)通用的文本傾向性分析框架。該框架可以靈活地替換組件,以滿足不同的實(shí)驗(yàn)需要。在預(yù)處理模塊,系統(tǒng)為詞性定義了統(tǒng)一的格式,當(dāng)替換不同的分詞工具時(shí),只需要將其自定義的詞性格式簡(jiǎn)單地轉(zhuǎn)換為系統(tǒng)的格式即可。在文本分析模塊,系統(tǒng)可以方便地替換訓(xùn)練、測(cè)試及應(yīng)用組件?;谏鲜龅目蚣?整合開(kāi)源工具,本文設(shè)計(jì)實(shí)現(xiàn)了一個(gè)文本分析的原型實(shí)驗(yàn)

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫(kù)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論