基于CastorFS和Xrootd的用戶空間文件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、在歐洲核物理研究委員會(huì)（CERN），科學(xué)家們用大型強(qiáng)子對(duì)撞（LHC）實(shí)驗(yàn)使用海量存儲(chǔ)系統(tǒng)來對(duì)數(shù)以千T字節(jié)的實(shí)驗(yàn)數(shù)據(jù)進(jìn)行存儲(chǔ)和管理。這個(gè)系統(tǒng)就是CASTOR（CERN高級(jí)存儲(chǔ)管理系統(tǒng)）。它為進(jìn)行科學(xué)實(shí)驗(yàn)提供了強(qiáng)大和便捷的數(shù)據(jù)支撐。然而，用戶在使用這個(gè)數(shù)據(jù)管理系統(tǒng)的時(shí)候只能用其提供的具體命令行去訪問和操作其中的數(shù)據(jù)。這樣一個(gè)基于FUSE（用戶空間文件系統(tǒng)）和兩個(gè)CASTOR輸入輸出庫（NS庫和Rfio庫）的文件系統(tǒng)CastorFS被開發(fā)出用

2、于進(jìn)一步簡化CASTOR系統(tǒng)的使用。盡管此文件系統(tǒng)已經(jīng)成功被部署在LHCb的節(jié)點(diǎn)上，然后它有很大的缺陷極大地限制了其應(yīng)用范圍。當(dāng)用戶想要獲取某個(gè)存儲(chǔ)大量數(shù)據(jù)的文件夾時(shí)，它使用的兩個(gè)庫極大地增加了CASTOR服務(wù)器端的負(fù)載，而且它們也不提供任何數(shù)據(jù)保護(hù)的機(jī)制。除此而外，緩慢的數(shù)據(jù)傳輸速度也極大地限制了文件系統(tǒng)的應(yīng)用。這樣，我們需要開發(fā)一個(gè)緩存來有效地對(duì)短時(shí)期要用的大量數(shù)據(jù)進(jìn)行存儲(chǔ)并使用新的數(shù)據(jù)傳輸協(xié)議Xrootd來重新構(gòu)建CastorFS