分布式存儲中的資源索引技術(shù)研究.pdf

1、互聯(lián)網(wǎng)的快速發(fā)展導(dǎo)致數(shù)據(jù)量的不斷膨脹，單一節(jié)點的存儲容量難以滿足海量數(shù)據(jù)存儲的要求，用戶對容量巨大、安全、高效、可靠的分布式存儲系統(tǒng)的需求也越來越大。傳統(tǒng)的分布式存儲系統(tǒng)通常部署在穩(wěn)定可靠的節(jié)點上，難以有效利用P2P網(wǎng)絡(luò)中大量的存儲空間和計算資源。如何利用這些空閑的存儲和計算資源以構(gòu)建大容量、高可用的存儲服務(wù)平臺是當(dāng)前分布式存儲領(lǐng)域的研究熱點。
　　本文分析了P2P網(wǎng)絡(luò)的特點以及當(dāng)前分布式存儲系統(tǒng)在資源檢索方面的特點，提出并實現(xiàn)了

2、一個基于信譽的倒排索引框架ROIN;根據(jù)DHT結(jié)構(gòu)的特點，設(shè)計了一個基于分組和信譽的負(fù)載均衡分布式存儲與資源索引框架LBGR。
　　ROIN框架通過雙層DHT網(wǎng)絡(luò)進(jìn)行資源檢索，實現(xiàn)了關(guān)鍵字模糊搜索，克服了傳統(tǒng)DHT結(jié)構(gòu)的不足;針對P2P網(wǎng)絡(luò)中節(jié)點動態(tài)性強的特點，建立了節(jié)點信譽模型并計算節(jié)點的信譽值，在此基礎(chǔ)上選取高信譽值的節(jié)點作為索引節(jié)點，從而避免了將索引信息存儲在不可靠節(jié)點上，提高了系統(tǒng)的可靠性。通過搜索覆蓋率、搜索延遲、索引節(jié)

3、點負(fù)載和網(wǎng)絡(luò)擾動等方面的實驗，以及一系列與GlusterFS、Pastry、PCIR的對比實驗，證明了ROIN能夠在P2P網(wǎng)絡(luò)上建立一個健壯、有效的資源索引框架。
　　由于ROIN是分布式的資源索引框架，同樣存在數(shù)據(jù)一致性等普遍存在于分布式資源索引系統(tǒng)中的問題，本文提出了一種新型的資源索引框架LBGR。LBGR采用了分組和信譽相結(jié)合的資源管理策略，實現(xiàn)了基于DHT結(jié)構(gòu)的資源索引技術(shù)。通過信譽系統(tǒng)的評估，LBGR框架選擇高信譽值的節(jié)