基于RS糾刪碼的數(shù)據(jù)冗余策略.pdf

1、由于遠程教育、教育資源共享是面向數(shù)據(jù)網絡體系結構的，人們對教育資源的可靠性、訪問效率提出了很高的要求。教育資源的特點是對于較新的資源數(shù)據(jù)，往往訪問量較大，而對于歷史資源數(shù)據(jù)，訪問量很小，數(shù)據(jù)可靠性要求不高，二者的數(shù)據(jù)可用性要求差異較大。
　　本文詳細分析研究糾刪碼技術的編解碼原理、分類及在數(shù)據(jù)冗余方面的應用，并分析分布式文件系統(tǒng)（HDFS）的相關理論知識以及數(shù)據(jù)冗余策略的功能與分類。根據(jù)教育資源管理的特點，不同時期的教育資源訪問量

2、差異較大，繼而二者的數(shù)據(jù)可用性要求較大，而傳統(tǒng)系統(tǒng)中數(shù)據(jù)冗余策略采用默認的3副本冗余策略，存在存儲開銷過高，節(jié)點負載不均衡的問題，為了解決以上問題，提出基于RS糾刪碼的動態(tài)副本放置策略。首先，針對教育資源數(shù)據(jù)的特點，將默認的3副本冗余策略調整為根據(jù)訪問量計算熱度，參照熱度級別，實時調整文件副本數(shù)量。解決了高訪問量所帶來的節(jié)點負載不均衡和存儲空間浪費的問題。改進文件熱度計算公式，將影響到文件熱度的文件歷史訪問量引入公式計算中，使得熱度閥值

3、的計算更符合教育資源的特點。其次，為了解決熱度較低的文件占用較多存儲空間的問題，引入RS糾刪碼，利用RS糾刪碼對熱度低的文件進行編碼存儲，使得編碼后的文件具有較高的可用性，同時降低了存儲空間的消耗。最后，針對資源抖動和復制滯后帶來頻繁無效操作的問題，提出基于灰色預測系統(tǒng)預測模型的副本冗余策略。利用灰色系統(tǒng)的預測性，由歷史訪問量數(shù)據(jù)通過預測模型建模得到預測訪問量數(shù)據(jù)，進而計算得到文件響應熱度，實現(xiàn)副本數(shù)量調整的提前性。
　　針對教育