并行文件系統(tǒng)數(shù)據(jù)遷移研究與實現(xiàn).pdf

1、隨著信息技術(shù)的發(fā)展和廣泛應(yīng)用,人們對計算機系統(tǒng)數(shù)據(jù)存儲能力的要求也越來越高。存儲系統(tǒng)面臨的問題主要包括:數(shù)據(jù)存儲的地域空間范圍更加寬廣;數(shù)據(jù)量成指數(shù)級增長;數(shù)據(jù)傳輸速度不能滿足應(yīng)用需求。分布式存儲系統(tǒng)通過大量節(jié)點連接起來協(xié)作,突破了單機 CPU、內(nèi)存、I/O資源的瓶頸,能夠提供更高的存儲性能。在分布式文件系統(tǒng)中,當負載不均衡時,系統(tǒng)的服務(wù)能力會降低。平衡系統(tǒng)的負載對保證系統(tǒng)性能長期穩(wěn)定具有重要意義。數(shù)據(jù)遷移是平衡系統(tǒng)負載的一種最有效的基

2、本方法。
　　并行文件系統(tǒng) pNFS(Parallel Network File System)是 NFS的并行擴展版本,具有良好的并行性,可擴展性。但是其數(shù)據(jù)服務(wù)缺乏負載均衡能力,制約了系統(tǒng)的性能。以并行文件系統(tǒng) pNFS為基礎(chǔ),深入研究了并行文件系統(tǒng)中數(shù)據(jù)訪問造成的負載均衡問題,著重研究了如何通過數(shù)據(jù)遷移來平衡系統(tǒng)的負載。提出了一種自適應(yīng)負載的數(shù)據(jù)遷移方式 ALDM(Adaptive load data migration)來

3、平衡系統(tǒng)中數(shù)據(jù)服務(wù)器的負載。首先將數(shù)據(jù)服務(wù)器上的不同類型資源負載進行分類評價,包括網(wǎng)絡(luò) I/O負載、磁盤 I/O負載、磁盤容量負載,然后根據(jù)系統(tǒng)中不同類型負載的具體情況,動態(tài)的選擇數(shù)據(jù)遷移的源數(shù)據(jù)服務(wù)器、目的數(shù)據(jù)服務(wù)器和遷移的數(shù)據(jù)文件,通過有針對性的數(shù)據(jù)遷移,能及時平衡系統(tǒng)的負載,提高系統(tǒng)的性能。
　　實驗測試表明,ALDM數(shù)據(jù)遷移技術(shù)在遷移時對系統(tǒng)性能影響較小,遷移完成后,系統(tǒng)性能有10％左右的提升,并且該方法在不同負載的系統(tǒng)中