光盤庫備份系統(tǒng)中重復(fù)數(shù)據(jù)刪除技術(shù)的研究與實(shí)現(xiàn).pdf

1、隨著信息技術(shù)的快速發(fā)展,電子數(shù)據(jù)對企業(yè)的生存和發(fā)展越來越重要,電子數(shù)據(jù)的丟失,會(huì)給企業(yè)帶來重大損失,甚至造成致命的打擊。數(shù)據(jù)備份是預(yù)防電子數(shù)據(jù)丟失的最有效方法。與硬盤相比,光盤價(jià)格低廉,保存簡單,存儲(chǔ)壽命長的特性正好滿足備份的需求。研究將光盤庫應(yīng)用于大量數(shù)據(jù)備份將成為一項(xiàng)很有意義的課題。在備份系統(tǒng)中,由于備份操作的重復(fù)性,存在大量的重復(fù)數(shù)據(jù),因此,有必要設(shè)計(jì)并實(shí)現(xiàn)應(yīng)用于光盤庫備份系統(tǒng)的重復(fù)數(shù)據(jù)刪除子系統(tǒng)。
　　在保證光盤文件獨(dú)立性

2、的前提下,提出了一種多級(jí)重復(fù)數(shù)據(jù)刪除模型,先在源端,以用戶備份歷史為數(shù)據(jù)集,進(jìn)行文件級(jí)重復(fù)數(shù)據(jù)刪除;再在目標(biāo)端以全局備份文件作為數(shù)據(jù)集,去除已經(jīng)存在的文件;最后,以光盤庫磁盤緩沖中的文件作為數(shù)據(jù)集,進(jìn)行塊級(jí)重復(fù)數(shù)據(jù)刪除,去除重復(fù)塊。在文件級(jí)去重階段,利用文件局部性建立的內(nèi)存緩存可以有效提高緩存命中率,使用向量算法可以快速判定一定不在指紋庫中的數(shù)據(jù)指紋;在塊級(jí)去重階段,利用文件相似性建立了兩級(jí)索引,保證一個(gè)文件的所有數(shù)據(jù)塊判定最多只需要訪