開(kāi)源網(wǎng)絡(luò)文件系統(tǒng)在HPC集群環(huán)境中的性能分析.pdf

1、隨著高性能計(jì)算集群技術(shù)的發(fā)展成熟,人們對(duì)集群系統(tǒng)整體性能的要求也越來(lái)越高。而存儲(chǔ)系統(tǒng)性能成為提升集群系統(tǒng)性能的關(guān)鍵問(wèn)題之一。而NFS作為-種成熟的、性價(jià)比較高的網(wǎng)絡(luò)文件系統(tǒng)解決方案,被廣泛地應(yīng)用于高性能計(jì)算集群系統(tǒng)中。 本文在調(diào)研與分析資料的基礎(chǔ)上,分析了Linux內(nèi)核中NFS的軟件架構(gòu)與實(shí)現(xiàn)方式,介紹了開(kāi)源文件系統(tǒng)Ext2、Ext3、Reiserfs、JFS的存儲(chǔ)結(jié)構(gòu)與特點(diǎn),以及集群文件系統(tǒng)PVFS、Lustre、GPFS的架

2、構(gòu)與實(shí)現(xiàn)方式。然后根據(jù)NFS的軟件架構(gòu)與實(shí)現(xiàn)方式,分析高性能計(jì)算集群環(huán)境中影響NFS性能的幾個(gè)因素。 在調(diào)研了現(xiàn)有的文件系統(tǒng)性能測(cè)試工具的基礎(chǔ)上,根據(jù)高性能計(jì)算集群文件系統(tǒng)性能測(cè)試與分析的需要,在“南開(kāi)之星”高性能計(jì)算集群環(huán)境中,設(shè)計(jì)開(kāi)發(fā)了高性能計(jì)算集群MPI環(huán)境中的文件系統(tǒng)性能測(cè)試工具M(jìn)IOPfm。 接下來(lái),使用MIOPfm等測(cè)試工具,在“南開(kāi)之星”高性能計(jì)算集群中,對(duì)NFS性能進(jìn)行了一定配置條件下的性能測(cè)試,并對(duì)測(cè)試