優(yōu)化性能的分布式存儲子系統的設計與實現.pdf

1、現今,人們趕上了互聯網的大潮,進入了互聯網爆炸的時代。數據以超乎過去幾十甚至幾百倍的速度在不斷增長,這導致了人們處理的信息量較之過去呈現指數級上升。當面臨問題時,已經不再是幾臺個人計算機能夠搞定的范疇。互聯網將全世界人類的大腦集中在一起的同時,也拋出了一個難題:如何處理海量爆炸式增長的數據。為了解決這一難題,人們提出了云的概念,由此衍生出了分布式理論的雛形。
　　另外,各大公司的不同應用對云端數據存儲的要求越來越高,尤其是針對不同

2、場景提出了不同的要求,都使得傳統的分布式框架在處理問題的時候有氣無力。為了豐富用戶不斷增加的需求的變化以及為了提高更好的用戶體驗,現有的分布式文件系統做了其相應的改變。實驗室也本著科研的目的,借鑒國內外經典的分布式系統框架,設計了我們自己的分布式文件系統C_STORE。本文首先介紹了國內外集中主流的分布式文件系統,并對它們進行了研究,繼而給出本系統數據管理模塊的設計方案,之后提出性能瓶頸,并進行了改進。
　　C_STORE采用了負

3、載均衡和恢復策略,具有良好的可擴展性和可靠性。它將數據與元數據分離管理,這使客戶端對服務器的訪問高效化,同時也使資源的管理方便化,既充分利用了資源,又減輕了服務端的壓力。在客戶端方面,我們分別實現了基于不同平臺的客戶端軟件,如UNIX、ANDROID以及WIN平臺下都有其可用的客戶端。同時實現了用戶認證模塊,方便了用戶登錄以及用戶存儲配額的分配,保證了用戶賬戶的安全。
　　數據存儲模塊主要為用戶提供良好的數據存儲功能,為了保證用戶