并行文件系統(tǒng)數(shù)據(jù)遷移研究與實(shí)現(xiàn).pdf

1、隨著信息技術(shù)的發(fā)展和廣泛應(yīng)用,人們對(duì)計(jì)算機(jī)系統(tǒng)數(shù)據(jù)存儲(chǔ)能力的要求也越來(lái)越高。存儲(chǔ)系統(tǒng)面臨的問(wèn)題主要包括:數(shù)據(jù)存儲(chǔ)的地域空間范圍更加寬廣;數(shù)據(jù)量成指數(shù)級(jí)增長(zhǎng);數(shù)據(jù)傳輸速度不能滿(mǎn)足應(yīng)用需求。分布式存儲(chǔ)系統(tǒng)通過(guò)大量節(jié)點(diǎn)連接起來(lái)協(xié)作,突破了單機(jī) CPU、內(nèi)存、I/O資源的瓶頸,能夠提供更高的存儲(chǔ)性能。在分布式文件系統(tǒng)中,當(dāng)負(fù)載不均衡時(shí),系統(tǒng)的服務(wù)能力會(huì)降低。平衡系統(tǒng)的負(fù)載對(duì)保證系統(tǒng)性能長(zhǎng)期穩(wěn)定具有重要意義。數(shù)據(jù)遷移是平衡系統(tǒng)負(fù)載的一種最有效的基

2、本方法。
　　并行文件系統(tǒng) pNFS(Parallel Network File System)是 NFS的并行擴(kuò)展版本,具有良好的并行性,可擴(kuò)展性。但是其數(shù)據(jù)服務(wù)缺乏負(fù)載均衡能力,制約了系統(tǒng)的性能。以并行文件系統(tǒng) pNFS為基礎(chǔ),深入研究了并行文件系統(tǒng)中數(shù)據(jù)訪問(wèn)造成的負(fù)載均衡問(wèn)題,著重研究了如何通過(guò)數(shù)據(jù)遷移來(lái)平衡系統(tǒng)的負(fù)載。提出了一種自適應(yīng)負(fù)載的數(shù)據(jù)遷移方式 ALDM(Adaptive load data migration)來(lái)

3、平衡系統(tǒng)中數(shù)據(jù)服務(wù)器的負(fù)載。首先將數(shù)據(jù)服務(wù)器上的不同類(lèi)型資源負(fù)載進(jìn)行分類(lèi)評(píng)價(jià),包括網(wǎng)絡(luò) I/O負(fù)載、磁盤(pán) I/O負(fù)載、磁盤(pán)容量負(fù)載,然后根據(jù)系統(tǒng)中不同類(lèi)型負(fù)載的具體情況,動(dòng)態(tài)的選擇數(shù)據(jù)遷移的源數(shù)據(jù)服務(wù)器、目的數(shù)據(jù)服務(wù)器和遷移的數(shù)據(jù)文件,通過(guò)有針對(duì)性的數(shù)據(jù)遷移,能及時(shí)平衡系統(tǒng)的負(fù)載,提高系統(tǒng)的性能。
　　實(shí)驗(yàn)測(cè)試表明,ALDM數(shù)據(jù)遷移技術(shù)在遷移時(shí)對(duì)系統(tǒng)性能影響較小,遷移完成后,系統(tǒng)性能有10％左右的提升,并且該方法在不同負(fù)載的系統(tǒng)中