基于垂直搜索引擎的輿情預(yù)警分析平臺.pdf

1、隨著網(wǎng)絡(luò)信息化以及手機移動端的飛速發(fā)展，互聯(lián)網(wǎng)已逐漸代替?zhèn)鹘y(tǒng)媒體成為人們獲取信息和共享信息的主要方式，以網(wǎng)絡(luò)新聞為代表的網(wǎng)絡(luò)輿情成為社會輿情的重要的組成部分?；ヂ?lián)網(wǎng)的開放性、匿名性使得人們能夠自由的發(fā)表言論，但其中一些片面的觀點、不負(fù)責(zé)任的言論也會通過互聯(lián)網(wǎng)快速傳播，很容易引發(fā)輿情事件造成不良影響。目前，很多中小型的企業(yè)公司和地方政府單位的輿情監(jiān)控工作還處在起步階段，主要依靠人工進行輿情監(jiān)控。因此迫切需求一種可靠高效的網(wǎng)絡(luò)輿情監(jiān)控工具，

2、輔助完成輿情監(jiān)控工作。目前存在的一些輿情監(jiān)控系統(tǒng)，但對中小型企業(yè)公司來說，存在成本過高、適用性差等問題。
　　針對以上情況，本文將使用爬蟲技術(shù)和搜索引擎構(gòu)建一個適用于多數(shù)中小型企業(yè)公司、地方政府需要的的輿情預(yù)警分析平臺。本文對輿情預(yù)警分析平臺進行了詳細的需求分析，對其中的關(guān)鍵問題提供了解決辦法，并給出了具體的設(shè)計方案和實現(xiàn)過程。本文首先針對不同輿情信息來源網(wǎng)站的不同結(jié)構(gòu)設(shè)計不同的抓取策略，設(shè)計通用的網(wǎng)絡(luò)爬蟲完成數(shù)據(jù)采集網(wǎng)絡(luò)輿情信息

3、。在研究了當(dāng)前主要的幾種中文分詞算法的基礎(chǔ)上結(jié)合實際測試選用合適的分詞算法，并為輿情信息在搜索引擎中的存儲設(shè)計了合理的映射結(jié)構(gòu)，將輿情信息或檢索內(nèi)容進行分詞后，使用全文檢索引擎完成輿情信息索引和搜索;最后通過運用行業(yè)領(lǐng)域的概念，設(shè)計了一種垂直搜索方法，并完成網(wǎng)絡(luò)輿情管理系統(tǒng)的開發(fā)，實現(xiàn)了通用輿情監(jiān)控功能和專題監(jiān)控功能，適用于多數(shù)中小企業(yè)、政府單位對輿情監(jiān)控的需求。本平臺的爬蟲任務(wù)和輿情預(yù)警規(guī)則、專題監(jiān)控規(guī)則使用網(wǎng)絡(luò)輿情管理系統(tǒng)進行統(tǒng)一管