版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
1、隨著社會的高速發(fā)展,人們生活水平的不斷提高。筆記本電腦正逐步走進(jìn)千家萬戶的家中,成為人們工作、生活、娛樂不可或缺的重要組成部分。然而,在人們購買筆記本電腦之前,往往只能通過店面營銷人員的介紹、講解,才對筆記本有一個大致的了解。而且大多數(shù)人記不住筆記本的各項參數(shù);除此以外,通過搜索引擎查詢某個品牌,得到的反饋信息,與自己的期望相差甚遠(yuǎn)。所以,人們十分迫切需要一個能夠提供筆記本電腦各項性能參數(shù)的平臺。
本文通過學(xué)習(xí)開源蜘蛛程序
2、Heritrix和開源全文檢索框架Lucene,依靠MyEclipse開發(fā)工具,為人們搭建了這個平臺。Heritrix以其強(qiáng)大的抓取數(shù)據(jù)能力,正逐漸成為專業(yè)爬蟲軟件的首選,但由于Heritrix配置復(fù)雜,所以本文詳細(xì)講述了如何實現(xiàn)抓取網(wǎng)頁數(shù)據(jù),如何擴(kuò)展Heritrix的各項功能組件,以實現(xiàn)對特定網(wǎng)站數(shù)據(jù)的抓取;為提高Heritrix的工作效率,本文還對Heritrix原有功能組件作了擴(kuò)展,使其以多線程方式抓取網(wǎng)頁數(shù)據(jù),極大地提高了下載的
3、效率。此外,本文通過對Lucene的研究,實現(xiàn)了品牌檢索的功能,不僅如此,本文還考慮了Lucene基礎(chǔ)排序算法在本系統(tǒng)中應(yīng)用的不足,對其改進(jìn),改進(jìn)算法時,借鑒了PageRank算法的思想,認(rèn)真考慮了網(wǎng)頁間的鏈接關(guān)系應(yīng)該對網(wǎng)頁間排序有很大的影響,并綜合考慮了網(wǎng)頁內(nèi)容和網(wǎng)頁間鏈接關(guān)系對結(jié)果頁面排序的影響。最后,給出了改進(jìn)后的排序公式并設(shè)置了合適的權(quán)重因子,實現(xiàn)了綜合排序的功能,從而使改進(jìn)后的排序更加客觀、更加真實。
文章最后利
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 基于Lucene和Heritrix構(gòu)建搜索引擎的研究和示例實現(xiàn).pdf
- 畢業(yè)設(shè)計論文--基于lucene與heritrix的搜索引擎構(gòu)建
- 基于Lucene垂直搜索引擎的研究與實現(xiàn).pdf
- 基于lucene的商品垂直搜索引擎研究與實現(xiàn)
- 基于Lucene和Heritrix的小型主題搜索引擎的研究及實現(xiàn).pdf
- 基于Lucene的商品垂直搜索引擎研究與實現(xiàn).pdf
- 基于Lucene的職位垂直搜索引擎的研究與實現(xiàn).pdf
- 基于SSH和Lucene垂直搜索引擎研究.pdf
- 基于Lucene的垂直搜索引擎的設(shè)計與實現(xiàn).pdf
- 基于Lucene技術(shù)的垂直搜索引擎的研究與實現(xiàn).pdf
- 基于Lucene的AEP垂直搜索引擎的研究與實現(xiàn).pdf
- 基于LUCENE的搜索引擎研究與實現(xiàn).pdf
- 基于Lucene的垂直搜索引擎的研究與應(yīng)用.pdf
- 基于Lucene的音樂資訊垂直搜索引擎的設(shè)計和實現(xiàn).pdf
- 基于Lucene的搜索引擎的研究與實現(xiàn).pdf
- 基于Lucene的網(wǎng)絡(luò)文學(xué)垂直搜索引擎的研究與實現(xiàn).pdf
- 基于Lucene-Heep Client的垂直搜索引擎研究與實現(xiàn).pdf
- 基于lucene的web搜索引擎實現(xiàn)
- 基于LUCENE的主題搜索引擎研究與實現(xiàn).pdf
- 基于lucene的搜索引擎.pdf
評論
0/150
提交評論