基于云存儲的分布式文件系統(tǒng)研究與優(yōu)化.pdf

1、隨著互聯(lián)網(wǎng)的飛速發(fā)展，全球數(shù)據(jù)量每年以指數(shù)增長，使得云計算成為了當(dāng)前研究與應(yīng)用的熱點。云存儲作為云計算的底層服務(wù)，是一種架構(gòu)復(fù)雜的分布式文件系統(tǒng)。因為它具有結(jié)構(gòu)靈活、響應(yīng)效率高、管理方便等優(yōu)點，因而成為世界各國解決數(shù)據(jù)爆炸性增長方案的首選。Hadoop分布式文件系統(tǒng)（HDFS）作為當(dāng)今最流行的基于云存儲的分布式文件系統(tǒng)具有開源、廉價、高容錯以及高可擴(kuò)展性的特點，在云存儲領(lǐng)域占居了者舉足輕重的地位。然而，HDFS因其結(jié)構(gòu)和性能上的局限性，

2、也存單點失效、并發(fā)用戶的高延時訪問、負(fù)載均衡不足等的問題。
　　本文在系統(tǒng)、全面的學(xué)習(xí)和總結(jié)分布式存儲系統(tǒng)發(fā)展現(xiàn)狀和特點的基礎(chǔ)上，重點分析了幾種常用的分布式存儲系統(tǒng)架構(gòu)的優(yōu)缺點，同時設(shè)計了一個部分對等式的多 Namenode系統(tǒng)架構(gòu)。該架構(gòu)通過增加元數(shù)據(jù)服務(wù)器層中部分對等的多個Namenode，改變了以HDFS為代表的集中式存儲系統(tǒng)對主節(jié)點的單點依賴，降低了并發(fā)用戶的等待時延和元數(shù)據(jù)服務(wù)器的平均內(nèi)存占用率。同時，本文還深入研究了常