網(wǎng)絡(luò)數(shù)據(jù)流高速采集系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著人類(lèi)進(jìn)入信息時(shí)代，網(wǎng)絡(luò)和人們的關(guān)系越來(lái)越密切，它在帶來(lái)很多方便的同時(shí)，也帶來(lái)了很多新的問(wèn)題。其中互聯(lián)網(wǎng)的安全性引起了各個(gè)國(guó)家、公司的高度重視。被動(dòng)數(shù)據(jù)捕捉技術(shù)在網(wǎng)絡(luò)安全領(lǐng)域有著極其豐富的應(yīng)用，如IDS、防火墻等，tcpdump，ethereal，snort等軟件都采用此項(xiàng)技術(shù)。隨著諸多應(yīng)用層服務(wù)的不斷投入應(yīng)用，使得網(wǎng)絡(luò)的承載能力大為緊張。由于CPU性能、操作系統(tǒng)的處理機(jī)制等原因，傳統(tǒng)的捕包方式已經(jīng)不能適應(yīng)千兆網(wǎng)絡(luò)的要求。 高

2、性能數(shù)據(jù)采集平臺(tái)是定位于Intcrnet主干網(wǎng)絡(luò)的數(shù)據(jù)采集和數(shù)據(jù)分析設(shè)備，支持千兆級(jí)及以上的網(wǎng)絡(luò)數(shù)據(jù)采集和數(shù)據(jù)分析。它采集網(wǎng)絡(luò)上傳輸?shù)乃袛?shù)據(jù)報(bào)文；數(shù)據(jù)分析功能支持從鏈路層，IP層，傳輸層，直到應(yīng)用層的數(shù)據(jù)分析。該平臺(tái)提供方便的二次開(kāi)發(fā)接口，在此平臺(tái)上可以方便的開(kāi)發(fā)基于內(nèi)容的網(wǎng)絡(luò)安全設(shè)備，如IPS系統(tǒng)、DDOS防御系統(tǒng)、垃圾郵件過(guò)濾系統(tǒng)等。 本文研究和實(shí)現(xiàn)了高性能的網(wǎng)絡(luò)數(shù)據(jù)采集平臺(tái)中的底層數(shù)據(jù)包捕獲子系統(tǒng)。它結(jié)合“零拷貝”技術(shù)，

3、實(shí)現(xiàn)了對(duì)底層數(shù)據(jù)包高效，安全的捕獲。它主要由下面幾個(gè)技術(shù)部分組成： (1)內(nèi)存映射技術(shù)。本系統(tǒng)采用內(nèi)存映射技術(shù)，使用戶(hù)空間和內(nèi)核空間共享一片內(nèi)存區(qū)域。這片內(nèi)存區(qū)域?qū)⒂糜诖娣艛?shù)據(jù)包和必要的內(nèi)存管理數(shù)據(jù)結(jié)構(gòu)，通過(guò)對(duì)這塊共享內(nèi)存的使用和管理，為數(shù)據(jù)包在內(nèi)核空間和用戶(hù)空間之間的高速傳遞提供支持。 (2)“零拷貝”技術(shù)。系統(tǒng)將改變網(wǎng)絡(luò)中數(shù)據(jù)包提交流程，使數(shù)據(jù)包在由網(wǎng)卡到上層應(yīng)用程序的傳送過(guò)程中繞過(guò)內(nèi)核協(xié)議棧，避免了由內(nèi)核空間到用戶(hù)