分布式文件系統(tǒng)中元數(shù)據(jù)管理策略的研究.pdf

1、本文對分布式文件系統(tǒng)中元數(shù)據(jù)管理策略進行了研究。近些年來，隨著各個行業(yè)數(shù)據(jù)規(guī)模的迅速增長，有越來越多的文件和數(shù)據(jù)需要保存，使得分布式文件系統(tǒng)的性能面臨著巨大挑戰(zhàn)。元數(shù)據(jù)管理系統(tǒng)作為分布式文件系統(tǒng)最重要的組成部分，對整個系統(tǒng)的性能具有重要的影響。但是現(xiàn)有的元數(shù)據(jù)管理系統(tǒng)受限于傳統(tǒng)的元數(shù)據(jù)分割技術(shù)，并不能有效解決目前的問題。基于此，一種基于標簽的元數(shù)據(jù)管理策略被提出，其中標簽是目錄的分割單位。在新策略中，標簽是元數(shù)據(jù)的分割粒度。元數(shù)據(jù)分割粒

2、度在很多方面對元數(shù)據(jù)的處理都起著非常重要的影響，例如并發(fā)控制、緩存的使用、負載均衡和系統(tǒng)的可擴展性。經(jīng)過對傳統(tǒng)分割技術(shù)的分析，標簽被認為是比較合適的分割粒度。此外，規(guī)模龐大的目錄重新通過可擴展哈希來組織。在基于標簽的元數(shù)據(jù)管理策略中，每個目錄都被劃分成多個標簽，并且這些標簽被隨機分布在元數(shù)據(jù)服務(wù)器機群中；同時，每個標簽也被劃分成多個塊，而這些塊才是真正負責(zé)維護文件元數(shù)據(jù)的單元?；跇撕灥脑獢?shù)據(jù)管理策略也把索引服務(wù)器與元數(shù)據(jù)服務(wù)器分離開來

3、。由于目錄屬性元數(shù)據(jù)在所有類型的元數(shù)據(jù)中訪問頻率最為頻繁，因此用索引服務(wù)器單獨管理目錄屬性元數(shù)據(jù)能有效降低元數(shù)據(jù)服務(wù)器的工作負載。動態(tài)負載均衡在新策略中是通過對熱點元數(shù)據(jù)的拷貝遷移來實現(xiàn)的。當(dāng)一臺元數(shù)據(jù)服務(wù)器中的某些元數(shù)據(jù)在一段時間內(nèi)成為熱點時，這些元數(shù)據(jù)就會被復(fù)制一份并遷移到其他負載較輕的元數(shù)據(jù)服務(wù)器上，這樣對熱點元數(shù)據(jù)的訪問請求就會分布到多臺服務(wù)器上；同時，系統(tǒng)的可擴展性是通過一致性哈希來保證的。無論在元數(shù)據(jù)服務(wù)器機群中添加或移除一