分布式文件存儲平臺文件備份與恢復系統(tǒng)設計與實現(xiàn).pdf

1、隨著互聯(lián)網(wǎng)絡飛速發(fā)展，數(shù)據(jù)量呈現(xiàn)海量增長，單機存儲無法滿足需求，分布式存儲應運而生并且取得了較大的發(fā)展。系統(tǒng)中的數(shù)據(jù)由于自然災害、異常故障等原因會遭到破壞，因而需要對數(shù)據(jù)進行備份加以保護，當數(shù)據(jù)遭到破壞時能夠從備份數(shù)據(jù)中迅速恢復。 論文結(jié)合課題組研制的分布式存儲平臺-錢塘分布式文件服務平臺，研究基于該平臺的海量數(shù)據(jù)文件的備份與恢復問題，包括備份的高效性、一致性、可靠性和快速恢復等問題。 在高效性方面，論文結(jié)合分布式文件存

2、儲平臺中文件有冗余的特點，建立了多源下載備份模型，可以根據(jù)文件大小、負載平衡等因素從多個存儲節(jié)點下載文件進行備份。在一致性方面，論文采用了快照技術，可以瞬間得到系統(tǒng)的快照進行在線備份，并且可以進行增量備份和差量備份。在可靠性方面，論文通過記錄備份和恢復的斷點位置，實現(xiàn)了斷點備份恢復，保證在突發(fā)故障的情況下備份恢復的連續(xù)性。 在系統(tǒng)恢復方面，為了提高恢復效率采用了多線程恢復機制，該機制根據(jù)系統(tǒng)負載平衡，同時選擇多個節(jié)點并發(fā)恢復文件