索引資源調(diào)度及更新系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、O2O作為當(dāng)前互聯(lián)網(wǎng)的熱點(diǎn)方向之一，發(fā)展迅猛，無(wú)數(shù)線(xiàn)下商家通過(guò)O2O平臺(tái)為廣大用戶(hù)提供服務(wù)，隨著商家的增多，用戶(hù)不能再通過(guò)查找獲取心怡的商家，而搜索引擎則為用戶(hù)提供了便捷查找商家的服務(wù)。這種在O2O場(chǎng)景下應(yīng)用的搜索引擎，具有自己獨(dú)立的特征，雖不及全文搜索引擎的信息全面，但需要確保每一條結(jié)果的信息的完整性，如何確保搜索結(jié)果的準(zhǔn)確性也成為了嚴(yán)峻的課題。
　　本文將介紹一種O2O場(chǎng)景下垂直搜索引擎的索引更新及調(diào)度系統(tǒng)，該系統(tǒng)不僅可以確保

2、跨機(jī)房多機(jī)器間索引的一致性，同時(shí)在時(shí)效性方面，也可以確保在分鐘級(jí)別內(nèi)完成萬(wàn)兆數(shù)據(jù)量的拉取工作;此外，該系統(tǒng)可以自動(dòng)化地完成服務(wù)上下線(xiàn)，索引自動(dòng)拉取，服務(wù)監(jiān)控及治理等工作。索引更新當(dāng)中采用混合更新機(jī)制完成檢索服務(wù)索引更新的工作，索引資源調(diào)度解決了索引文件調(diào)度，為集群中的所有機(jī)器提供流量轉(zhuǎn)移服務(wù)，保證整個(gè)服務(wù)的穩(wěn)定性。該系統(tǒng)保證了線(xiàn)上服務(wù)的穩(wěn)定運(yùn)行，確保為用戶(hù)提供一個(gè)可靠的檢索服務(wù)。本系統(tǒng)采用Python+Lua語(yǔ)言完成開(kāi)發(fā)，其中Lua腳本

3、語(yǔ)言為基礎(chǔ)檢索服務(wù)提供支持，因?yàn)長(zhǎng)ua可以無(wú)縫嵌入C++中，本系統(tǒng)將功能需求進(jìn)行分層抽象，同時(shí)將個(gè)業(yè)務(wù)進(jìn)行模塊抽象，保證系統(tǒng)良好的可擴(kuò)展性和性能的穩(wěn)定性。本系統(tǒng)除了可以保證索引重建的完整性，同時(shí)在時(shí)效性方面，系統(tǒng)可以保證在較短時(shí)間內(nèi)完成索引的拉取和推送。
　　該系統(tǒng)有效地保證了垂直搜索引擎中資源的合理分配，索引更新的時(shí)效性及一致性，并結(jié)合O2O的應(yīng)用場(chǎng)景做適應(yīng)性開(kāi)發(fā)，如今已應(yīng)用到實(shí)際生產(chǎn)環(huán)境，并對(duì)整體檢索服務(wù)帶來(lái)了積極的影響，在未