基于Hadoop的農(nóng)業(yè)網(wǎng)絡輿情監(jiān)測系統(tǒng)研究與實現(xiàn)——以農(nóng)產(chǎn)品安全為例.pdf

1、伴隨互聯(lián)網(wǎng)技術的發(fā)展，國內(nèi)網(wǎng)民數(shù)量激增，互聯(lián)網(wǎng)已經(jīng)成為最大的新興媒體及輿論陣地?；ヂ?lián)網(wǎng)技術的發(fā)展給民眾帶來各種言論自由，涉農(nóng)輿情已經(jīng)深入日常生活和政府公共管理領域，社會影響日益增加。農(nóng)業(yè)關乎民生，網(wǎng)絡傳遞民意。正確引導涉農(nóng)輿論導向，防止負面輿論擴散，迫切要求提高農(nóng)業(yè)網(wǎng)絡輿情監(jiān)測能力。本文旨在開發(fā)一種多功能、全面、有效、快速的涉農(nóng)網(wǎng)絡輿情監(jiān)測服務平臺，追蹤熱點話題，監(jiān)測敏感信息，及時防范負面情緒，正確引導涉農(nóng)網(wǎng)絡輿情，為政府相關部門和各行

2、各業(yè)提供全面有效的互聯(lián)網(wǎng)輿情數(shù)據(jù)服務的綜合性平臺。
　　本文首先闡述了網(wǎng)絡輿情監(jiān)測的相關背景和研究現(xiàn)狀，分析輿情監(jiān)測系統(tǒng)的關鍵技術和需求，并對輿情監(jiān)測系統(tǒng)進行總體設計和詳細設計，對系統(tǒng)按功能模塊劃分并實現(xiàn)。然后，在分析現(xiàn)有網(wǎng)絡輿情監(jiān)測系統(tǒng)和互聯(lián)網(wǎng)新技術基礎上，集成搜索引擎Nutch和搜索應用服務器Solr從互聯(lián)網(wǎng)采集農(nóng)產(chǎn)品安全相關信息作為數(shù)據(jù)源，提出熱點話題發(fā)現(xiàn)算法、話題追蹤和涉農(nóng)網(wǎng)絡輿情預警工作流程；改進農(nóng)業(yè)相關的熱點話題發(fā)現(xiàn)算

3、法，提高了話題發(fā)現(xiàn)的準確率和效率?；谠骗h(huán)境將系統(tǒng)部署在Hadoop分布式平臺下，利用Hadoop分布式海量數(shù)據(jù)處理性能，解決涉農(nóng)網(wǎng)絡輿情監(jiān)測系統(tǒng)的存儲空間低擴展性和計算效率等問題，為政府和企業(yè)等領域工作者和決策者提供理論支撐和決策依據(jù)。
　　最后，詳細介紹了系統(tǒng)模塊：信息采集模塊、輿情處理模塊、輿情分析模塊和輿情管理模塊。重點闡述了輿情分析模塊的功能和具體實現(xiàn)過程。經(jīng)測試和實際應用表明該系統(tǒng)能夠實時采集和更新農(nóng)產(chǎn)品安全相關信息，