基于CastorFS和Xrootd的用戶空間文件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、在歐洲核物理研究委員會(huì)（CERN），科學(xué)家們用大型強(qiáng)子對(duì)撞（LHC）實(shí)驗(yàn)使用海量存儲(chǔ)系統(tǒng)來(lái)對(duì)數(shù)以千T字節(jié)的實(shí)驗(yàn)數(shù)據(jù)進(jìn)行存儲(chǔ)和管理。這個(gè)系統(tǒng)就是CASTOR（CERN高級(jí)存儲(chǔ)管理系統(tǒng)）。它為進(jìn)行科學(xué)實(shí)驗(yàn)提供了強(qiáng)大和便捷的數(shù)據(jù)支撐。然而，用戶在使用這個(gè)數(shù)據(jù)管理系統(tǒng)的時(shí)候只能用其提供的具體命令行去訪問(wèn)和操作其中的數(shù)據(jù)。這樣一個(gè)基于FUSE（用戶空間文件系統(tǒng)）和兩個(gè)CASTOR輸入輸出庫(kù)（NS庫(kù)和Rfio庫(kù)）的文件系統(tǒng)CastorFS被開(kāi)發(fā)出用

2、于進(jìn)一步簡(jiǎn)化CASTOR系統(tǒng)的使用。盡管此文件系統(tǒng)已經(jīng)成功被部署在LHCb的節(jié)點(diǎn)上，然后它有很大的缺陷極大地限制了其應(yīng)用范圍。當(dāng)用戶想要獲取某個(gè)存儲(chǔ)大量數(shù)據(jù)的文件夾時(shí)，它使用的兩個(gè)庫(kù)極大地增加了CASTOR服務(wù)器端的負(fù)載，而且它們也不提供任何數(shù)據(jù)保護(hù)的機(jī)制。除此而外，緩慢的數(shù)據(jù)傳輸速度也極大地限制了文件系統(tǒng)的應(yīng)用。這樣，我們需要開(kāi)發(fā)一個(gè)緩存來(lái)有效地對(duì)短時(shí)期要用的大量數(shù)據(jù)進(jìn)行存儲(chǔ)并使用新的數(shù)據(jù)傳輸協(xié)議Xrootd來(lái)重新構(gòu)建CastorFS