互聯(lián)網(wǎng)輿情指數(shù)挖掘方法研究.pdf

1、互聯(lián)網(wǎng)是人們獲取信息和傳遞信息的主要載體，海量的各種類型的數(shù)據(jù)在網(wǎng)絡(luò)上形成一個(gè)極其豐富的信息源。隨著互聯(lián)網(wǎng)的迅速發(fā)展，互聯(lián)網(wǎng)輿情的研究面臨著新的問(wèn)題和挑戰(zhàn)?；ヂ?lián)網(wǎng)輿情體現(xiàn)了大多數(shù)網(wǎng)民對(duì)網(wǎng)絡(luò)突發(fā)事件集中和真實(shí)的反映。因此利用互聯(lián)網(wǎng)自身的信息觸角，發(fā)現(xiàn)處于“未然態(tài)”的各種危機(jī)因素，建立起完善的網(wǎng)絡(luò)輿情檢測(cè)系統(tǒng)勢(shì)在必行。
　　網(wǎng)絡(luò)輿情檢測(cè)通常分為網(wǎng)絡(luò)異常檢測(cè)和常規(guī)趨勢(shì)檢測(cè)兩方面。針對(duì)網(wǎng)絡(luò)異常檢測(cè)，本文采用數(shù)據(jù)流高頻項(xiàng)檢測(cè)技術(shù)，提出了全新

2、的小波集摘要數(shù)據(jù)結(jié)構(gòu)和改進(jìn)的突變檢測(cè)算法，并在此基礎(chǔ)上進(jìn)行了必要的關(guān)聯(lián)分析；針對(duì)常規(guī)趨勢(shì)檢測(cè)，本文參考了相關(guān)領(lǐng)域現(xiàn)有的指數(shù)體系，提出了層級(jí)互聯(lián)網(wǎng)輿情指數(shù)這一全新的概念。
　　考慮到對(duì)中文單詞進(jìn)行聚類的復(fù)雜性，本文首先對(duì)所采集的關(guān)鍵詞語(yǔ)料集進(jìn)行了必要的分詞，在此基礎(chǔ)上，采用人工分類、類內(nèi)高頻詞匯統(tǒng)計(jì)與聚類相結(jié)合的方法，從中統(tǒng)計(jì)出高頻詞匯，定義為輿情關(guān)鍵詞。
　　在此基礎(chǔ)上，針對(duì)所選的輿情關(guān)鍵詞進(jìn)行頻度曲線繪制，針對(duì)關(guān)鍵詞頻度曲

3、線進(jìn)行必要的突變分析和關(guān)聯(lián)分析。針對(duì)關(guān)鍵詞頻度曲線的突變性突發(fā)，采用小波變換與滑動(dòng)窗口技術(shù)相結(jié)合的方法，擴(kuò)大了可分析數(shù)據(jù)的范圍。在對(duì)傳統(tǒng)的突發(fā)檢測(cè)(Burst Detection)算法進(jìn)行改進(jìn)的基礎(chǔ)之上，提出了改進(jìn)的突變性突發(fā)檢測(cè)算法，并對(duì)算法進(jìn)行了必要的性能評(píng)價(jià)。同時(shí)，對(duì)所選擇的輿情關(guān)鍵詞做進(jìn)一步的關(guān)聯(lián)分析，為輿情指數(shù)體系的建立提供必要的支持。
　　最后，參考現(xiàn)有的指數(shù)體系，通過(guò)與現(xiàn)有的社會(huì)穩(wěn)定指數(shù)進(jìn)行比較，給出層級(jí)互聯(lián)網(wǎng)輿情指