云存儲(chǔ)環(huán)境下數(shù)據(jù)可靠性的研究.pdf

1、分類號(hào)TP3115密級(jí)公開重慶郵電大學(xué)碩士學(xué)位論文論文題目云存儲(chǔ)環(huán)境下數(shù)據(jù)可靠性的研究英文題目ResearchofDataReliabilityinCloudStorageEnvironment碩士研究生李志強(qiáng)學(xué)科專業(yè)計(jì)算機(jī)應(yīng)用技術(shù)論文提交日期2Q12璽壘目論文答辯日期2Q量2生5目26目論文評(píng)閱人答辯委員會(huì)主席田逢春教授重慶大學(xué)2012年6月重慶郵電大學(xué)碩士論文摘要摘要云存儲(chǔ)作為從云計(jì)算領(lǐng)域延伸和發(fā)展出來的技術(shù)，為企業(yè)和用戶提供了極大

2、的存儲(chǔ)空間和按需定制的計(jì)算資源。通過將數(shù)據(jù)遷移到云存儲(chǔ)服務(wù)器上，用戶沒必要考慮底層硬件管理的復(fù)雜性，與此同時(shí)，用戶數(shù)據(jù)的安全性成為服務(wù)質(zhì)量的重要方面。高可靠性的數(shù)據(jù)冗余策略能夠更好地滿足用戶的需求，提高系統(tǒng)的訪問效率。由于云存儲(chǔ)數(shù)據(jù)節(jié)點(diǎn)的分散性及網(wǎng)絡(luò)的不穩(wěn)定性，GFS和開源HDFS的數(shù)據(jù)冗余策略都將文件分割為64MB數(shù)據(jù)塊進(jìn)行備份存儲(chǔ)，該策略不能使文件存儲(chǔ)成功的概率達(dá)到最優(yōu)。完整副本冗余策略是將分割后的數(shù)據(jù)對(duì)象創(chuàng)建多個(gè)相同的副本，然而，

3、副本數(shù)量的增加會(huì)給系統(tǒng)帶來帶寬、性能和存儲(chǔ)空間等方面的開銷，并且該策略不能解決系統(tǒng)中多節(jié)點(diǎn)同時(shí)失效的問題，近期亞馬遜存儲(chǔ)服務(wù)的崩潰就是一個(gè)典型的案例。因此有必要設(shè)計(jì)新的數(shù)據(jù)分割及冗余策略來提高云存儲(chǔ)環(huán)境下的數(shù)據(jù)可靠性。要提高系統(tǒng)的資源利用率，增強(qiáng)系統(tǒng)抗節(jié)點(diǎn)失效的能力，關(guān)鍵需要解決數(shù)據(jù)塊冗余策略問題。針對(duì)云存儲(chǔ)環(huán)境下數(shù)據(jù)節(jié)點(diǎn)的失效問題，通過建立云存儲(chǔ)文件分割的最優(yōu)化模型，使文件存儲(chǔ)成功的概率達(dá)到最優(yōu)。該模型對(duì)不同大小的文件設(shè)置不同的分塊數(shù)

4、，并給出了文件最優(yōu)分塊數(shù)Ⅳ脅，的計(jì)算方法。將糾刪碼冗余技術(shù)應(yīng)用于該模型提高數(shù)據(jù)節(jié)點(diǎn)的容錯(cuò)能力；為避免單服務(wù)器節(jié)點(diǎn)失效給系統(tǒng)帶來影響，提出了基于分散式服務(wù)器的RS碼算法；選擇合適的服務(wù)器對(duì)數(shù)據(jù)塊完成編碼和解碼，提高了系統(tǒng)的吞吐量，并設(shè)計(jì)提出了基于糾刪碼的云存儲(chǔ)數(shù)據(jù)可靠性系統(tǒng)架構(gòu)。在P2P網(wǎng)絡(luò)仿真工具Peersiml05上對(duì)提出的模型和數(shù)據(jù)冗余策略進(jìn)行了仿真。分別從冗余度對(duì)系統(tǒng)可靠性的影響、相同冗余度下文件分塊數(shù)量對(duì)系統(tǒng)可靠性的影響以及存儲(chǔ)