異構存儲系統(tǒng)中節(jié)點失效的并行化修復研究.pdf

1、隨著大數據時代的到來，爆炸式增長的海量數據迫切需要有效的存儲和管理。大規(guī)模分布式存儲技術的飛躍式發(fā)展勢不可擋。人們對存儲系統(tǒng)的要求也更為廣泛，譬如存儲容量、I/O性能、數據安全、系統(tǒng)可擴展性、系統(tǒng)可靠性等問題。在數據即是一切的年代，數據的錯誤與丟失對于用戶來說是極為致命的。鑒于故障發(fā)生的普遍性，目前分布式存儲系統(tǒng)主要采用存儲冗余數據的策略保證數據的可靠性。在系統(tǒng)發(fā)生故障時，能夠快速有效的修復出錯誤數據，對維持系統(tǒng)的可靠性來說是至關重要的

2、。
　　以下是本文的主要工作。
　　1.分布式存儲研究平臺的設計與實現。分布式存儲研究平臺是一個為了深入研發(fā)分布式存儲技術的實驗平臺。首先，它是一個分布式存儲系統(tǒng)，支持多種編碼方式，提供最基本的文件操作功能;其次，為了維持系統(tǒng)可靠性，它包含數據修復接口，提供多種磁盤修復功能;再者，它能夠進行重復數據刪除，保證磁盤有效的空間利用率;最后，它提供磁盤擴容接口，保證系統(tǒng)的可擴展性。本文主要介紹分布式存儲研究平臺的基本概況，闡述其設

3、計原理與基本功能以及實現方法，為分布式存儲系統(tǒng)的研究提供了一個簡單實用實驗環(huán)境。
　　2.基于RAID6碼存儲系統(tǒng)的并行化異構修復問題的研究。結合分布式存儲系統(tǒng)的異構性和并行性，設計一種三階段的流水線式并行化修復策略，并提出一種最小修復時間的并行化異構修復算法，通過數字模擬實驗以及實際分布式存儲系統(tǒng)的實驗測試證明算法的可行性與有效性。本文詳細地介紹了并行化異構修復算法，包括研究背景，模型的建立與推導過程，具體實現過程，性能分析，以