云計算環(huán)境中分布式文件系統(tǒng)的負(fù)載均衡問題研究.pdf

1、云計算代表著未來計算機與通信技術(shù)的發(fā)展方向，而以分布式文件系統(tǒng)為代表的云存儲是云計算中的重要組成部分，其中負(fù)載均衡技術(shù)是云存儲的核心技術(shù)之一。近年來，Hadoop分布式文件系統(tǒng)(HDFS)以其高可用性和高可擴展性等特點得到了業(yè)界極大的關(guān)注，是商用化集群系統(tǒng)的研究熱點。所以對HDFS集群的實際應(yīng)用研究具有非常重要的意義。
　　HDFS以其自身的顯著優(yōu)勢成為了目前極具應(yīng)用前景的分布式文件系統(tǒng)應(yīng)用架構(gòu)，但是因為HDFS使用單一評價指標(biāo)與

2、單一閾值的負(fù)載均衡策略，在大型網(wǎng)站的實際應(yīng)用中，如果面對突發(fā)性與隨機性均很高的大密度、高強度的并發(fā)訪問時則不能應(yīng)對，會出現(xiàn)服務(wù)器系統(tǒng)癱瘓的狀況。所以，研究解決如何為HDFS設(shè)計適應(yīng)此特定應(yīng)用場景的負(fù)載均衡策略。
　　論文在分析了HDFS相關(guān)核心代碼的基礎(chǔ)上，提出了改進算法，采用了基于負(fù)載遷移的閾值策略。論文首先根據(jù)應(yīng)用場景說明了選用的多評價指標(biāo)以及給出了評價指標(biāo)的計算方法。其次，分析了評價函數(shù)的常用形式，并依據(jù)特定的應(yīng)用，說明了選

3、用加權(quán)和形式的評價函數(shù)的有效性。再次，引入多屬性決策理論的相關(guān)方法，結(jié)合負(fù)載評價函數(shù)權(quán)向量的計算，最終確定了評價函數(shù)。最后，針對HDFS單一閾值策略的顯著缺陷，提出了雙閾值策略，并定義了服務(wù)器負(fù)載遷移方案，從而完成了整個改進算法的設(shè)計。
　　論文通過編程，在HDFS中具體實現(xiàn)了所提出的改進算法，并設(shè)計了算法性能測試實驗，驗證了改進算法的有效性。
　　分析結(jié)果表明，改進的負(fù)載均衡算法有助于HDFS在高強度突發(fā)和隨機負(fù)載的情況下