BlueOcean海量存儲系統(tǒng)高并發(fā)客戶端的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著信息量的飛速增長,如何高效地存儲和處理海量數(shù)據(jù)成為了當(dāng)今計(jì)算機(jī)科學(xué)面臨的挑戰(zhàn)。傳統(tǒng)的文件系統(tǒng)在存儲容量和性能的提升上已遇到瓶頸,分布式海量存儲系統(tǒng)是未來存儲發(fā)展的必然趨勢,在此類系統(tǒng)中,良好的客戶端設(shè)計(jì)對于存儲系統(tǒng)的總體性能有著重要影響。
　　BlueOcean是基于對象存儲技術(shù)實(shí)現(xiàn)的大規(guī)模分布式存儲系統(tǒng),具有性能高,容量大,可靠性強(qiáng),管理簡易等特性。該系統(tǒng)由單一元數(shù)據(jù)服務(wù)器和大量數(shù)據(jù)存儲服務(wù)器構(gòu)成,并通過客戶端軟件對應(yīng)用軟件

2、提供POSIX訪問接口,支持現(xiàn)有的絕大部分應(yīng)用軟件在其上透明運(yùn)行。
　　本文對海量存儲系統(tǒng)的關(guān)鍵技術(shù)與實(shí)現(xiàn)方案進(jìn)行了深入的研究,并在此基礎(chǔ)上針對 BlueOcean存儲系統(tǒng)設(shè)計(jì)并實(shí)現(xiàn)了高并發(fā)的客戶端FuseAgent。本文的主要工作如下:
　　(1)闡述了存儲系統(tǒng)的架構(gòu)演進(jìn),通過對典型海量存儲系統(tǒng)的研究,分析了此類架構(gòu)的關(guān)鍵技術(shù)。
　　(2)分析了目前客戶端實(shí)現(xiàn)方案的缺陷,采用事件驅(qū)動模型設(shè)計(jì)了一個通用的高并發(fā)客戶端。

3、
　　(3)詳細(xì)描述了高并發(fā)客戶端中功能模塊的具體實(shí)現(xiàn)。
　　(4)針對高并發(fā)客戶端的實(shí)現(xiàn)特性,從FUSE框架優(yōu)化、數(shù)據(jù)零拷貝、寫并行化三個方面對其寫操作進(jìn)行優(yōu)化。
　　(5)對BlueOcean的高并發(fā)客戶端進(jìn)行性能測試。
　　測試表明,對該客戶端寫性能的優(yōu)化效果明顯;并且隨著并發(fā)訪問文件數(shù)的增多,系統(tǒng)總體的數(shù)據(jù)讀寫性能,元數(shù)據(jù)操作性能以及事務(wù)操作性能均有很顯著的提升。本論文的研究成果對于其它的海量存儲系統(tǒng)高并