針對虛擬機備份的分布式重復(fù)數(shù)據(jù)刪除系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、典型云計算服務(wù)需要支持數(shù)十萬用戶通過虛擬化共享硬件平臺，然而這些虛擬機運行環(huán)境和鏡像之間具有高度的相似性，許多用戶使用版本相同的虛擬機。大量重復(fù)數(shù)據(jù)的多次傳輸和存儲將會消耗大量硬件資源，極大地增加了云平臺成本。基于云環(huán)境下虛擬機鏡像備份的場景，針對海量數(shù)據(jù)重復(fù)數(shù)據(jù)刪除過程中存在的性能和擴展性較差的問題，研究云環(huán)境下高性能重復(fù)數(shù)據(jù)刪除技術(shù)具有重要意義。
　　針對上述問題，首先設(shè)計了一種高性能的分布式重復(fù)數(shù)據(jù)刪除系統(tǒng)，該系統(tǒng)由命名節(jié)點

2、服務(wù)器維護全局地址映射表等全局數(shù)據(jù)結(jié)構(gòu)，并進行元數(shù)據(jù)管理和負載均衡調(diào)度，多臺數(shù)據(jù)節(jié)點采用一致性哈希的方案存放指紋和數(shù)據(jù)，支持多臺客戶端并發(fā)備份和恢復(fù)操作，協(xié)同完成重復(fù)數(shù)據(jù)刪除功能的同時，保證系統(tǒng)的讀寫性能和擴展性。其次，設(shè)計了一種部署在客戶端的指紋過濾器，能夠以較小的內(nèi)存開銷，快速檢測相鄰的多個備份版本之間的大部分冗余數(shù)據(jù)，從而減少了元數(shù)據(jù)和數(shù)據(jù)塊的傳輸，節(jié)省了網(wǎng)絡(luò)帶寬，提高了備份效率。最后，系統(tǒng)采用將指紋和相應(yīng)數(shù)據(jù)塊散列存放到多個數(shù)據(jù)