基于網(wǎng)絡(luò)爬蟲技術(shù)的網(wǎng)絡(luò)新聞分析

1、畢業(yè)設(shè)計（論文）任務(wù)書第1頁畢業(yè)設(shè)計（論文）題目：基于網(wǎng)絡(luò)爬蟲技術(shù)的網(wǎng)絡(luò)新聞分析畢業(yè)設(shè)計（論文）要求及原始數(shù)據(jù)（資料）：1綜述國內(nèi)外網(wǎng)絡(luò)爬蟲技術(shù)研究現(xiàn)狀；2深入了解網(wǎng)絡(luò)爬蟲與文字分析的相關(guān)技術(shù)；3熟練掌握網(wǎng)絡(luò)爬蟲爬取策略以及分析策略；4設(shè)計并實現(xiàn)針對網(wǎng)絡(luò)新聞的爬蟲程序；5深入分析與整合爬取到的網(wǎng)絡(luò)新聞數(shù)據(jù)；6訓(xùn)練檢索文獻資料和利用文獻資料的能力；7訓(xùn)練撰寫技術(shù)文檔與學(xué)位論文的能力。第2頁主要參考文獻（資料）：[1]于娟劉強.主題網(wǎng)絡(luò)爬蟲

2、研究綜述[J].計算機工程與科學(xué)201537(02):231237.[2]張紅云.基于頁面分析的主題網(wǎng)絡(luò)爬蟲的研究[D].武漢理工大學(xué)2010.[3]張瑩.面向動態(tài)頁面的網(wǎng)絡(luò)爬蟲系統(tǒng)的設(shè)計與實現(xiàn)[D].南開大學(xué)2012.[4]張曉雷.面向Web挖掘的主題網(wǎng)絡(luò)爬蟲的研究與實現(xiàn)[D].西安電子科技大學(xué)2012.[5]奉國和鄭偉.國內(nèi)中文自動分詞技術(shù)研究綜述[J].圖書情報工作201155(2):4145.[6]許智宏張月梅王一.一種改進的中

3、文分詞在主題搜索中的應(yīng)用[J].鄭州大學(xué)學(xué)報2014(5):4448.[7]歐振猛余順爭.中文分詞算法在搜索引擎應(yīng)用中的研究[J].計算機工程與應(yīng)用200036(08):8082.[8]Batsakis.SPetrakisEGMMiliosE.Improvingtheperfmanceoffocusedwebcrawlers[J].Data&knowledgeengineering200968(10):10011013.[9]Pant.

4、GMenczerF.MySpiders:EvolveYourOwnIntelligentWebCrawlers[J].Autonomousagentsmultiagentsystems20025(2):221229.[10]AhmadiAbkenariFAliS.AClickstreambasedFocusedTrendParallelWebCrawler[J].InternationalJournalofComputerApplica