分布式文件系統(tǒng)中元數(shù)據(jù)管理策略

1、分布式文件系統(tǒng)中元數(shù)據(jù)管理策略分布式文件系統(tǒng)中元數(shù)據(jù)管理策略鄭小燕摘要分布式文件系統(tǒng)在海量數(shù)據(jù)存儲領(lǐng)域已經(jīng)有了廣泛的應(yīng)用，目前大多分布式系統(tǒng)使用的是文件數(shù)據(jù)及元數(shù)據(jù)解耦架構(gòu)。其中元數(shù)據(jù)管理對于文件系統(tǒng)的性能有著直接的影響。本文對此主要探究分布式文件系統(tǒng)中元數(shù)據(jù)的管理策略，基于幾種經(jīng)典的管理策略，分析其優(yōu)勢和不足，并在此基礎(chǔ)上提出了一種基于標簽的管理策略?！娟P(guān)鍵詞】分布式文件系統(tǒng)元數(shù)據(jù)管理策略在經(jīng)濟發(fā)展的今天，各個行業(yè)的數(shù)據(jù)規(guī)模也越來越大

2、，各行各業(yè)也有更多的重要文件以及重要數(shù)據(jù)要保存。這對于分布式文件系統(tǒng)來說，是一個大的挑戰(zhàn)。元數(shù)據(jù)管理作為系統(tǒng)中最為重要的一個部分，對于系統(tǒng)的整個性能的影響也是極大的。目前來講，現(xiàn)有的元數(shù)據(jù)管理是受傳統(tǒng)元數(shù)據(jù)分割技術(shù)限制的，還無法有效解決當(dāng)前的問題。基于標簽的元數(shù)據(jù)管理策略正是才這樣的情況下提出，這種新的策略中，簽是元數(shù)據(jù)的分割粒度，這種分割粒度對于元數(shù)據(jù)的處理有很大的影響，比如負載均衡、并發(fā)控制及系統(tǒng)可擴展性等等。正是因為這種基于標簽的

3、元數(shù)據(jù)管理策略有一定的優(yōu)勢和有效性，因此值得在分布式文件系統(tǒng)中推廣應(yīng)用。1分布式文件系統(tǒng)分布式文件系統(tǒng)是指文件系統(tǒng)管理的物理存儲資源不一定直接連接在本地節(jié)點上，而是通過計算機網(wǎng)絡(luò)與節(jié)點相連。判斷此系統(tǒng)問需要遍歷目錄的層次，因此，所花費的代價更高；不能增加服務(wù)器進行擴展。靜態(tài)哈希策略：這種策略有兩種元數(shù)據(jù)，一個是目錄元數(shù)據(jù)，一個是文件元數(shù)據(jù)。靜態(tài)哈希策略主要是通過計算機中的文件名稱、路徑等標志中的hash值把元數(shù)據(jù)分布到不同MDS中去。這

4、種策略的優(yōu)勢有：工作負載均衡；速度快；并發(fā)度高；網(wǎng)絡(luò)負載花費低。不足：因為權(quán)限的認證要遍歷目錄層次，因此，花費的代價較高；遷移代價太大，不易擴展；不易維護元數(shù)據(jù)的一致性?；谀夸浡窂降脑獢?shù)據(jù)管理策略：除以上兩種經(jīng)典的策略外，還有其他的策略這里就不一一介紹。在這些策略基礎(chǔ)上進行改善且加入了新的技術(shù)的策略這里介紹下這種基于目錄路徑的管理策略。這種管理策略中的目錄路徑的屬性同目錄對象是相分離的。因而，能避免因修改目錄屬性時對目錄中的子目錄或者

5、文件產(chǎn)生的影響，另外，在系統(tǒng)中設(shè)立了單路的目錄路徑索引服務(wù)器?？梢愿鶕?jù)用戶的請求文件路徑來找對應(yīng)的父目錄屬性，最終根據(jù)父目錄定位目標MDS。這種管理策略有靜態(tài)哈希策略的優(yōu)勢，但也難以擺脫部分不足，存在一定的局限性。基于標簽的新的管理策略：這種策略是基于經(jīng)典以及一些改善策略基礎(chǔ)上提出的策略。不同元數(shù)據(jù)分割粒度對于系統(tǒng)的性能的影響是不同的。比如，緩存利用率、并發(fā)度以及可擴展性等等。從以上幾種經(jīng)典管理策略以及經(jīng)過改善的管理策略分析來看，將目錄