虛擬磁帶庫中重復(fù)數(shù)據(jù)刪除技術(shù)的研究與設(shè)計.pdf

1、隨著全球信息化的推進，我們的社會正在步入一個信息化的社會，政府機構(gòu)以及各行各業(yè)都對信息資源、信息技術(shù)以及信息產(chǎn)業(yè)的依賴程度越來越大，對存儲空間的需求也在飛速地增長。在進行數(shù)據(jù)備份時，會備份大量相同的數(shù)據(jù)和文件，而這些相同的數(shù)據(jù)和文件占據(jù)了大量昂貴的磁盤空間。VTL（Virtual Tape Library虛擬磁帶庫）以其備份性能高、故障率低、可靠性高等優(yōu)勢被廣泛用于政府機構(gòu)以及各行各業(yè)的數(shù)據(jù)存儲中。因此，研究可以刪除VTL中重復(fù)數(shù)據(jù)的技

2、術(shù)是勢在必行的。
　　 本文首先對虛擬磁帶庫和重復(fù)刪除技術(shù)在國內(nèi)外的現(xiàn)狀進行了分析，找出了現(xiàn)有重復(fù)數(shù)據(jù)刪除技術(shù)中存在的問題和不足，從而確立了本文的研究出發(fā)點。研究了重復(fù)數(shù)據(jù)刪除的基本原理，然后通過以下幾個過程:文件數(shù)據(jù)檢測分塊、塊哈希值計算、塊哈希值查找以及哈希值保存，實現(xiàn)了一個基于塊級的重復(fù)數(shù)據(jù)刪除系統(tǒng)。為了彌補重復(fù)數(shù)據(jù)刪除中MD5哈希算法的“哈希沖突”問題，使用了拉鏈法對哈希算法進行了優(yōu)化，增強了數(shù)據(jù)的安全性;為了提高系統(tǒng)檢