備份系統(tǒng)中流式處理的行為分析及其插件化實(shí)現(xiàn).pdf

1、隨著用戶對(duì)數(shù)據(jù)安全和數(shù)據(jù)有效利用的要求不斷提高，備份系統(tǒng)對(duì)數(shù)據(jù)的處理已經(jīng)不再是簡(jiǎn)單的數(shù)據(jù)拷貝，而是存在大量種類(lèi)繁多、功能各異的數(shù)據(jù)處理。目前現(xiàn)有的備份系統(tǒng)雖然功能強(qiáng)大，但是系統(tǒng)結(jié)構(gòu)復(fù)雜、數(shù)據(jù)處理功能基本都是固化于系統(tǒng)中。系統(tǒng)缺乏具有通用性的備份模型和架構(gòu)，導(dǎo)致軟件設(shè)計(jì)復(fù)雜，復(fù)用率低。關(guān)于數(shù)據(jù)處理功能，目前絕大多數(shù)備份系統(tǒng)存在如下幾個(gè)缺陷：修改現(xiàn)有的數(shù)據(jù)處理和添加新的數(shù)據(jù)處理都是很復(fù)雜的；不支持第三方擴(kuò)展研發(fā)；無(wú)法支持細(xì)粒度的數(shù)據(jù)處理。

2、 在備份領(lǐng)域中，待處理的數(shù)據(jù)和數(shù)據(jù)處理過(guò)程是有如下特性的：待處理的數(shù)據(jù)是海量的、呈樹(shù)狀嵌套結(jié)構(gòu)；數(shù)據(jù)處理的方式必須是流式的，低內(nèi)存消耗的，數(shù)據(jù)處理的過(guò)程是多種多樣的。各種處理過(guò)程可以劃歸為一個(gè)統(tǒng)一的處理操作。同時(shí)，各數(shù)據(jù)處理過(guò)程之間的業(yè)務(wù)處理功能相對(duì)比較獨(dú)立，可以以松耦合的方式實(shí)現(xiàn)。因此，本文考慮將插件的思想應(yīng)用于備份系統(tǒng)中，即將每一個(gè)數(shù)據(jù)處理看作一個(gè)遵循相同接口的插件，實(shí)現(xiàn)對(duì)備份系統(tǒng)中的各數(shù)據(jù)處理過(guò)程提供諸如動(dòng)態(tài)插拔、動(dòng)態(tài)配置等

3、管理功能。 本文從流式數(shù)據(jù)處理系統(tǒng)研發(fā)中的具體問(wèn)題出發(fā)，首先以半形式化的方法分析和歸納了備份系統(tǒng)中數(shù)據(jù)的結(jié)構(gòu)、數(shù)據(jù)處理的行為，得到了一個(gè)流式處理模型；然后由該模型映射得到一個(gè)軟件部件，即一種可復(fù)用的流式插件結(jié)構(gòu)，每個(gè)數(shù)據(jù)處理操作是一個(gè)插件。接著使用純C++語(yǔ)言實(shí)現(xiàn)了該插件系統(tǒng)。同時(shí)我們重點(diǎn)討論了系統(tǒng)實(shí)現(xiàn)過(guò)程中的幾個(gè)關(guān)鍵問(wèn)題。最后，對(duì)比了當(dāng)前系統(tǒng)與現(xiàn)有備份系統(tǒng)在框架和性能上的優(yōu)劣，并總結(jié)了當(dāng)前系統(tǒng)的不足。當(dāng)前流式模型和插件系統(tǒng)結(jié)構(gòu)