網(wǎng)絡文件的分布式存儲設計與實現(xiàn).pdf

1、隨著信息網(wǎng)絡和互聯(lián)網(wǎng)技術的快速發(fā)展，人們的生活越來越智能化，每天撲面而來的都是大量的互聯(lián)網(wǎng)信息，個人數(shù)據(jù)正爆炸式地增長，因此對個人數(shù)據(jù)存儲提出了要求，而傳統(tǒng)存儲技術存在的開放性不足、建設成本高、擴展性差等問題已難以滿足存儲需求，所以云計算的興起為云存儲的發(fā)展帶來了契機，即可將數(shù)據(jù)移到云端存儲，智能終端無需大量存儲空間，用戶可隨時隨地通過互聯(lián)網(wǎng)登錄個人云存儲空間存取個人數(shù)據(jù)資源，可以說云存儲的發(fā)展正顛覆著現(xiàn)有的網(wǎng)絡存儲架構。
　　本

2、文正是針對多媒體瘦客戶端用戶的數(shù)據(jù)存儲需求這一場景，提出了網(wǎng)絡文件的分布式存儲方案，設計實現(xiàn)了基于MooseFS的分布式網(wǎng)絡文件存儲系統(tǒng)，并構建了基于動態(tài)副本機制和節(jié)點容量感知機制的網(wǎng)絡文件分布式存儲模型，為終端用戶提供安全透明的分布式文件存儲。
　　首先，根據(jù)云端存儲的需求，設計了B/S架構的網(wǎng)絡磁盤應用，為每個用戶在云端開辟一份私人存儲空間，用戶可以進行文件的上傳、下載等管理操作，由此將用戶的存儲空間移到云端，并為用戶提供了訪

3、問云端空間的Web可視化入口。
　　其次，為滿足用戶數(shù)據(jù)的存儲需求，以及提高存儲可靠性，設法將網(wǎng)絡磁盤文件的存儲分布式化。方案一是利用開源的分布式文件系統(tǒng)，本論文采用的是MooseFS，即通過構建MooseFS分布式集群，并將網(wǎng)絡磁盤存儲空間掛載到該系統(tǒng)中，以實現(xiàn)文件的透明化分布式存儲;方案二是設計并構建專門針對網(wǎng)絡磁盤小文件分布式存儲的模型，利用JNotify進行目錄實時監(jiān)控，并設計動態(tài)副本機制，利用聚類算法，將文件副本數(shù)與用戶

4、使用頻率設置為正相關，以平衡存儲可靠性和資源利用率;設計節(jié)點容量感知機制，利用改進的一致性哈希算法將節(jié)點資源可用率與實際負載率設置為正相關，以提高節(jié)點存儲空間利用率。同時，為了實現(xiàn)模型數(shù)據(jù)監(jiān)控可視化，利用MVC模型設計了簡易后臺管理界面，以實現(xiàn)對用戶登錄次數(shù)、副本數(shù)、集群存儲容量等的實時查看，方便對模型的管理。
　　本論文針對多媒體瘦客戶端等設備存儲空間有限與用戶數(shù)據(jù)存儲需求之間的矛盾，通過設計網(wǎng)絡磁盤，并將其與分布式文件系統(tǒng)結合