針對虛擬機備份的分布式重復數(shù)據(jù)刪除系統(tǒng)的設計與實現(xiàn).pdf

1、典型云計算服務需要支持數(shù)十萬用戶通過虛擬化共享硬件平臺，然而這些虛擬機運行環(huán)境和鏡像之間具有高度的相似性，許多用戶使用版本相同的虛擬機。大量重復數(shù)據(jù)的多次傳輸和存儲將會消耗大量硬件資源，極大地增加了云平臺成本?；谠骗h(huán)境下虛擬機鏡像備份的場景，針對海量數(shù)據(jù)重復數(shù)據(jù)刪除過程中存在的性能和擴展性較差的問題，研究云環(huán)境下高性能重復數(shù)據(jù)刪除技術(shù)具有重要意義。
　　針對上述問題，首先設計了一種高性能的分布式重復數(shù)據(jù)刪除系統(tǒng)，該系統(tǒng)由命名節(jié)點

2、服務器維護全局地址映射表等全局數(shù)據(jù)結(jié)構(gòu)，并進行元數(shù)據(jù)管理和負載均衡調(diào)度，多臺數(shù)據(jù)節(jié)點采用一致性哈希的方案存放指紋和數(shù)據(jù)，支持多臺客戶端并發(fā)備份和恢復操作，協(xié)同完成重復數(shù)據(jù)刪除功能的同時，保證系統(tǒng)的讀寫性能和擴展性。其次，設計了一種部署在客戶端的指紋過濾器，能夠以較小的內(nèi)存開銷，快速檢測相鄰的多個備份版本之間的大部分冗余數(shù)據(jù)，從而減少了元數(shù)據(jù)和數(shù)據(jù)塊的傳輸，節(jié)省了網(wǎng)絡帶寬，提高了備份效率。最后，系統(tǒng)采用將指紋和相應數(shù)據(jù)塊散列存放到多個數(shù)據(jù)