垂直搜索引擎的設計開發(fā).pdf

1、隨著計算機技術和互聯(lián)網技術的快速發(fā)展，網絡上的信息量也急劇增加。面對如此巨大的信息，搜索引擎的出現(xiàn)在一定程度上給人們帶來了方便。通過搜索引擎，人們可以快速地訪問一些自己不知道的網頁，從中獲取到很多有用的信息。然而，很多搜索引擎在搜索信息時往往會產生一些問題，如搜索到的頁面過多、網頁重復、網頁數(shù)據更新慢、符合搜索要求的網頁比較少等。而垂直搜索技術的產生很好的解決了這些問題，它為人們提供的不再是成千上萬的相關網頁信息，而是范圍很小，且極具針

2、對性的具體信息。
　　 本論文以手機資源為背景，通過運用擴展Heritrix和Lucene，初步構建出了一個檢索結果比較精準的垂直搜索引擎。本文主要的研究工作分有以下四個部分：(1)通過定制和擴展Heritrix這個由Java開發(fā)的、開源的Web網絡爬蟲來從互聯(lián)網上爬取相關的信息資源；(2)利用HtmlParser工具對爬取的信息進行分析和抽??；(3)深入研究Lucene以及及其相關的技術，將Lucene成功地運用到了系統(tǒng)當中，