并行文件系統(tǒng)副本一致性研究.pdf

1、信息技術(shù)的不斷發(fā)展帶來對信息存儲高容量,高性能的要求,云存儲應(yīng)運而生。在云存儲服務(wù)過程中,對于性能和可靠性的要求尤為看重。云存儲通常以分布式文件系統(tǒng)體現(xiàn),這就需要提高分布式文件系統(tǒng)的性能和可靠性。如同像 RAID技術(shù)引入分布式文件系統(tǒng)中,副本技術(shù)的引入可以很好地提高系統(tǒng)的性能和可靠性。副本技術(shù)在帶來高性能和高可靠性的同時,也帶來了副本一致性的問題。如何建立恰當?shù)母北竟芾頇C制,減少副本一致性維護所帶來的性能的損耗,已成為分布式文件系統(tǒng)的一

2、個研究熱點。
　　在Google提出的GFS,Amazon使用的Dynamo等中針對副本一致性問題都提出了一些解決方案,但它們都只關(guān)注問題的某一方面。在副本一致性技術(shù)維護過程中,課題根據(jù)分布式文件系統(tǒng)中副本和負載平衡的發(fā)展需求,充分利用負載信息以及存儲節(jié)點中文件訪問的熱度信息,提出了基于熱度和數(shù)據(jù)大小的副本一致性維護算法。算法定期從存儲端獲取熱度隊列,與更新隊列進行比較,若兩者無交集,則可以放緩更新,反之,則選取熱度大且更新數(shù)據(jù)量

3、小的文件先更新,熱度小且更新數(shù)據(jù)量大的后更新。通常在一致性維護過程中,會加重元數(shù)據(jù)服務(wù)器處理的負載。當更新負載影響到正常的元數(shù)據(jù)處理功能的時候,將更新維護切換到客戶端來完成,可以減小元數(shù)據(jù)端的負載。
　　實驗表明,基于熱度和數(shù)據(jù)大小的一致性維護策略和動態(tài)一致性切換維護策略,在保證數(shù)據(jù)可靠性的同時,實現(xiàn)了副本一致性的有效維護,大大降低了系統(tǒng)一致性維護的開銷。在更新請求占所有訪問請求的20％及以上以及副本數(shù)量較多的情況下,系統(tǒng)在響應(yīng)時