基于Hadoop的分布式入侵檢測(cè)系統(tǒng)原型設(shè)計(jì)與實(shí)現(xiàn).pdf

1、入侵檢測(cè)技術(shù)作為網(wǎng)絡(luò)安全領(lǐng)域中的一項(xiàng)安全機(jī)制，對(duì)網(wǎng)絡(luò)和系統(tǒng)進(jìn)行實(shí)時(shí)的動(dòng)態(tài)監(jiān)控以達(dá)到對(duì)入侵行為的防御和抵制，為網(wǎng)絡(luò)安全提供有效的安全保護(hù)。伴隨著網(wǎng)絡(luò)規(guī)模和流量爆炸性的增長(zhǎng)，傳統(tǒng)的入侵檢測(cè)系統(tǒng)難以完成對(duì)海量數(shù)據(jù)的實(shí)時(shí)處理，存在丟包率高、檢測(cè)率低、誤報(bào)率高等缺點(diǎn)。分布式入侵檢測(cè)系統(tǒng)采用分布式結(jié)構(gòu)實(shí)現(xiàn)數(shù)據(jù)采集和并行處理，有效提高了其檢測(cè)率。然而，隨著網(wǎng)絡(luò)攻擊方式的多樣化和復(fù)雜化，現(xiàn)有的分布式入侵檢測(cè)系統(tǒng)逐漸地暴露出分析處理能力低、系統(tǒng)的互操作性

2、和可擴(kuò)展性差等問題。
　　本文對(duì)分布式入侵檢測(cè)技術(shù)進(jìn)行了研究，分析了現(xiàn)有分布式入侵檢測(cè)系統(tǒng)優(yōu)勢(shì)和存在問題，深入研究了分布式平臺(tái)Hadoop的相關(guān)技術(shù)。為有效解決分布式入侵檢測(cè)系統(tǒng)面臨的現(xiàn)有問題，本文利用Hadoop強(qiáng)大的分布式計(jì)算和處理能力，設(shè)計(jì)和實(shí)現(xiàn)了一個(gè)基于Hadoop的分布式入侵檢測(cè)系統(tǒng)原型。該系統(tǒng)原型主要功能包括傳感器、數(shù)據(jù)分析、報(bào)警響應(yīng)、系統(tǒng)狀態(tài)監(jiān)控、數(shù)據(jù)查詢、系統(tǒng)管理六個(gè)功能模塊。在系統(tǒng)實(shí)施中，首先分別完成傳感器和Ha

3、doop集群的部署和配置。在數(shù)據(jù)采集部分，基于WinPcap實(shí)現(xiàn)采集、解析網(wǎng)絡(luò)數(shù)據(jù)包；在數(shù)據(jù)分析部分，結(jié)合Hadoop的MapReduce框架實(shí)現(xiàn)分布式入侵檢測(cè)系統(tǒng)中相關(guān)任務(wù)調(diào)度工作以及對(duì)采集的網(wǎng)絡(luò)數(shù)據(jù)進(jìn)行并行分析檢測(cè)；在報(bào)警響應(yīng)部分，將分析檢測(cè)出來的入侵攻擊行為存儲(chǔ)在構(gòu)建于HDFS之上的HBase數(shù)據(jù)庫(kù)中并進(jìn)行報(bào)警響應(yīng)。此外，本系統(tǒng)通過Ganglia軟件和調(diào)用Hadoop內(nèi)部API實(shí)現(xiàn)系統(tǒng)狀態(tài)監(jiān)控。
　　本文利用Hadoop強(qiáng)大