基于Java技術的智能化搜索引擎的研究與設計.pdf

1、隨著Internet的快速發(fā)展,網絡信息量迅速增加,人們越來越需要通過搜索引擎來獲取有用信息。通用搜索引擎的由于范圍太廣,造成搜索結果的覆蓋率、準確度太低,搜索的效率也就隨之降低,這對于用戶的體驗是不友好的,在這種情況下對于特定領域內的智能化搜索引擎的需求就越來越明顯。本文通過研究搜索引擎的技術和框架設計方案、對比其與特定領域主題搜索引擎的區(qū)別特點,開發(fā)設計了一套具有在特定領域內進行爬取、索引和檢索功能的搜索引擎。
　　 首先本

2、文通過分析國內外搜索引擎的歷史發(fā)展、分類特點,垂直搜索引擎的特點和發(fā)展,研究搜索引擎開發(fā)的技術要點,并重點介紹了Lucene開發(fā)工具包的技術和應用特點。
　　 隨后通過對搜索引擎的框架和技術分析,設計了整個系統(tǒng)的流程圖和設計方案,并分析各模塊的功能特點。
　　 接下來又對搜索引擎中的一個重要模塊--主題網絡爬蟲模塊進行分析,并在設計爬行策略時對傳統(tǒng)的Fish-search算法做了改進,提出了將待爬行鏈表進行一分為二的策略