面向文件類型的網(wǎng)內(nèi)冗余數(shù)據(jù)刪除方法研究.pdf

1、隨著互聯(lián)網(wǎng)技術(shù)的發(fā)展，基于文件分享和共享的互聯(lián)網(wǎng)應(yīng)用越來越普及。用戶上傳的海量數(shù)據(jù)中，存在著大量的重復(fù)和相似文件。這些重復(fù)和相似文件直接上傳會造成網(wǎng)絡(luò)帶寬的浪費和響應(yīng)時間的高延遲等問題。因此，分享應(yīng)用服務(wù)的關(guān)鍵在于有效、快速的在上傳數(shù)據(jù)中選取不重復(fù)的文件上傳。提出一種面向文件類型的網(wǎng)內(nèi)冗余數(shù)據(jù)刪除方法，充分利用數(shù)據(jù)產(chǎn)生的時間局部性和空間局部性來快速檢測冗余數(shù)據(jù)。
　　面向文件類型的網(wǎng)內(nèi)冗余數(shù)據(jù)刪除方法的基本思想是：采用軟件定義網(wǎng)絡(luò)

2、 SDN（software-defined network），在網(wǎng)絡(luò)中間設(shè)備上實現(xiàn)區(qū)分文件類型的冗余數(shù)據(jù)刪除功能。本方法采用SDN新型網(wǎng)絡(luò)架構(gòu)取代傳統(tǒng)固定的網(wǎng)絡(luò)架構(gòu)，保證系統(tǒng)具有較高的移植性、靈活性和擴展性。在第一跳網(wǎng)絡(luò)設(shè)備中實現(xiàn)冗余數(shù)據(jù)刪除操作，充分挖掘傳輸數(shù)據(jù)的時間局部性和空間局部性。通過用戶端對傳輸文件的預(yù)處理為網(wǎng)內(nèi)重刪做準備；通過擴展 OpenFlow交換機的匹配規(guī)則及流程并且在交換機上開辟緩存空間、添加冗余數(shù)據(jù)檢測和刪除模塊來