超算系統(tǒng)的異構(gòu)網(wǎng)絡(luò)互連方法研究與實現(xiàn).pdf

1、自提出以來，Infiniband技術(shù)在高性能計算和存儲領(lǐng)域得到了廣泛的發(fā)展和應(yīng)用，并迅速成為了超級計算機系統(tǒng)互連技術(shù)的主流。然而，云計算技術(shù)的飛速發(fā)展和多核處理器的廣泛應(yīng)用，對超級計算機系統(tǒng)的發(fā)展帶來了巨大沖擊。因此為進(jìn)一步拓展超級計算機系統(tǒng)的應(yīng)用范圍，充分利用超級計算機系統(tǒng)的強大能力，對云計算的支持便成為了超級計算機系統(tǒng)發(fā)展的必然趨勢。云計算平臺通常依托以太網(wǎng)向眾多互聯(lián)網(wǎng)用戶提供云計算服務(wù)，因此實現(xiàn)Infiniband網(wǎng)絡(luò)和以太網(wǎng)的互

2、連互通是實現(xiàn)超級計算機系統(tǒng)支持云計算必須解決的關(guān)鍵問題。另外，多核處理器已成為構(gòu)建超級計算機系統(tǒng)的主流處理器，因此提供一個良好的報文并行處理模型，是充分發(fā)揮多核處理器的性能優(yōu)勢，實現(xiàn)Infiniband網(wǎng)絡(luò)和以太網(wǎng)高速互連互通的重要保證。
　　Infiniband網(wǎng)絡(luò)和以太網(wǎng)屬于異構(gòu)網(wǎng)絡(luò)，在協(xié)議數(shù)據(jù)報文格式、通信地址類型、傳輸機制、報文處理方式等多方面具有較大差異，同時多核處理器的廣泛應(yīng)用，對其互連互通的實現(xiàn)也帶來了新的挑戰(zhàn)。針對

3、上述問題和挑戰(zhàn)，通過對已有互連解決方案進(jìn)行研究，本文提出了一種基于通用多核處理器的可擴(kuò)展異構(gòu)網(wǎng)絡(luò)互連模型SHIL，并對SHIL模型的關(guān)鍵技術(shù)進(jìn)行研究。本文的主要工作和創(chuàng)新點包括：
　?。?）在研究現(xiàn)有異構(gòu)網(wǎng)絡(luò)互連解決方案的基礎(chǔ)上，提出了可擴(kuò)展異構(gòu)網(wǎng)絡(luò)互連模型SHIL。該模型充分利用通用多核處理器的并發(fā)處理能力，由多協(xié)議網(wǎng)關(guān)采用并行處理技術(shù)完成異構(gòu)網(wǎng)絡(luò)之間的協(xié)議轉(zhuǎn)換和報文轉(zhuǎn)發(fā)任務(wù)，以較低的成本實現(xiàn)異構(gòu)網(wǎng)絡(luò)間的高速互連互通。同時，模塊

4、化動態(tài)加載方式，使得該模型具有良好的可擴(kuò)展性和靈活性，可以很容易的實現(xiàn)與新的異構(gòu)網(wǎng)絡(luò)之間的互連互通。
　?。?）以以太網(wǎng)和Infiniband網(wǎng)絡(luò)的互連為基礎(chǔ)，對報文封裝技術(shù)、仿真網(wǎng)絡(luò)管理控制、通信地址映射轉(zhuǎn)換技術(shù)、并行處理技術(shù)等SHIL模型的關(guān)鍵技術(shù)進(jìn)行研究。提出了仿真網(wǎng)絡(luò)控制協(xié)議、兩級地址管理機制和基于通用多核處理器的并行收發(fā)機制，優(yōu)化了異構(gòu)網(wǎng)絡(luò)間的通信性能，提高了異構(gòu)網(wǎng)絡(luò)的協(xié)議轉(zhuǎn)換處理效率。
　?。?）設(shè)計并實現(xiàn)了 E

5、IG網(wǎng)關(guān)原型系統(tǒng)，并基于 EIG網(wǎng)關(guān)原型系統(tǒng)搭建了Infiniband網(wǎng)絡(luò)和以太網(wǎng)互連的測試環(huán)境，對以太網(wǎng)和 Infiniband網(wǎng)絡(luò)之間的通信帶寬和文件傳輸性能進(jìn)行了測試。實驗測試結(jié)果表明基于 EIG網(wǎng)關(guān)原型系統(tǒng)實現(xiàn)的Infiniband網(wǎng)絡(luò)和以太網(wǎng)互連網(wǎng)絡(luò)具有較高的通信帶寬和較好的文件傳輸性能。
　　綜上所述，本文針對超級計算機系統(tǒng)中異構(gòu)網(wǎng)絡(luò)互連互通的并行處理問題，提出的可擴(kuò)展異構(gòu)網(wǎng)絡(luò)互連模型——SHIL模型，基于報文封裝的透