基于RDP編碼的分布式存儲系統(tǒng)磁盤故障修復.pdf

1、建立維護可靠的、可擴展、低成本、高性能的分布式存儲系統(tǒng)是云計算、大數(shù)據(jù)以及互聯(lián)網(wǎng)公司應用后臺基礎的主要目標。分布式存儲系統(tǒng)擁有著傳統(tǒng)集中式存儲所無法比擬的優(yōu)勢，然而，由于分布式存儲系統(tǒng)組件的不可靠，運行過程中存在著種種異常情況，在各種異常中磁盤故障發(fā)生的概率最高，因此如何高效、透明地恢復磁盤故障，重構磁盤數(shù)據(jù)，是分布式存儲系統(tǒng)所面臨的重大問題。
　　在容多錯的分布式存儲系統(tǒng)中存在著頻繁的單節(jié)點故障，使得單節(jié)點故障數(shù)據(jù)修復問題成為研

2、究的熱點?；诩m刪碼的分布式存儲系統(tǒng)數(shù)據(jù)修復在現(xiàn)階段主要考慮的重要因素之一是從存活磁盤讀取的數(shù)據(jù)量最優(yōu)，因此本文的研究重點為以下兩方面:
　　一、研究分布式存儲系統(tǒng)中單節(jié)點故障時的磁盤數(shù)據(jù)修復問題。通過針對分布式存儲系統(tǒng)中存儲介質(zhì)的實際讀取特性，設計了一種新型的基于磁盤連續(xù)讀的故障修復方案。本文提出的基于連續(xù)讀的修復方案在保持單磁盤故障修復過程數(shù)據(jù)量讀取量最小的前提下，最大程度維持磁盤訪問的連續(xù)性，減少磁盤的跳躍性讀取，加快單磁盤

3、故障的修復效率。本文針對RDP編碼提出了相應的基于磁盤連續(xù)讀的單節(jié)點故障修復方案，理論和實驗均表明，該修復方案可以顯著提高單節(jié)點故障修復的速率，減少修復時間。
　　二、設計開發(fā)支持糾刪碼容錯存儲技術的分布式存儲研究平臺DSRP，該平臺不僅可以類似普通文件系統(tǒng)對文件和目錄的進行存取、創(chuàng)建、刪除等操作，還能支持各種糾刪碼編解碼容錯機制、系統(tǒng)擴容以及系統(tǒng)重復數(shù)據(jù)刪除等功能。該系統(tǒng)還可以為糾刪碼故障修復算法、重復數(shù)據(jù)刪除技術以及系統(tǒng)磁盤擴