分布式文件存儲平臺文件備份與恢復(fù)系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著互聯(lián)網(wǎng)絡(luò)飛速發(fā)展，數(shù)據(jù)量呈現(xiàn)海量增長，單機(jī)存儲無法滿足需求，分布式存儲應(yīng)運(yùn)而生并且取得了較大的發(fā)展。系統(tǒng)中的數(shù)據(jù)由于自然災(zāi)害、異常故障等原因會遭到破壞，因而需要對數(shù)據(jù)進(jìn)行備份加以保護(hù)，當(dāng)數(shù)據(jù)遭到破壞時能夠從備份數(shù)據(jù)中迅速恢復(fù)。 論文結(jié)合課題組研制的分布式存儲平臺-錢塘分布式文件服務(wù)平臺，研究基于該平臺的海量數(shù)據(jù)文件的備份與恢復(fù)問題，包括備份的高效性、一致性、可靠性和快速恢復(fù)等問題。 在高效性方面，論文結(jié)合分布式文件存

2、儲平臺中文件有冗余的特點(diǎn)，建立了多源下載備份模型，可以根據(jù)文件大小、負(fù)載平衡等因素從多個存儲節(jié)點(diǎn)下載文件進(jìn)行備份。在一致性方面，論文采用了快照技術(shù)，可以瞬間得到系統(tǒng)的快照進(jìn)行在線備份，并且可以進(jìn)行增量備份和差量備份。在可靠性方面，論文通過記錄備份和恢復(fù)的斷點(diǎn)位置，實(shí)現(xiàn)了斷點(diǎn)備份恢復(fù)，保證在突發(fā)故障的情況下備份恢復(fù)的連續(xù)性。 在系統(tǒng)恢復(fù)方面，為了提高恢復(fù)效率采用了多線程恢復(fù)機(jī)制，該機(jī)制根據(jù)系統(tǒng)負(fù)載平衡，同時選擇多個節(jié)點(diǎn)并發(fā)恢復(fù)文件