基于Hadoop的分布式入侵檢測系統(tǒng)原型設(shè)計與實現(xiàn).pdf

1、入侵檢測技術(shù)作為網(wǎng)絡(luò)安全領(lǐng)域中的一項安全機(jī)制，對網(wǎng)絡(luò)和系統(tǒng)進(jìn)行實時的動態(tài)監(jiān)控以達(dá)到對入侵行為的防御和抵制，為網(wǎng)絡(luò)安全提供有效的安全保護(hù)。伴隨著網(wǎng)絡(luò)規(guī)模和流量爆炸性的增長，傳統(tǒng)的入侵檢測系統(tǒng)難以完成對海量數(shù)據(jù)的實時處理，存在丟包率高、檢測率低、誤報率高等缺點。分布式入侵檢測系統(tǒng)采用分布式結(jié)構(gòu)實現(xiàn)數(shù)據(jù)采集和并行處理，有效提高了其檢測率。然而，隨著網(wǎng)絡(luò)攻擊方式的多樣化和復(fù)雜化，現(xiàn)有的分布式入侵檢測系統(tǒng)逐漸地暴露出分析處理能力低、系統(tǒng)的互操作性

2、和可擴(kuò)展性差等問題。
　　本文對分布式入侵檢測技術(shù)進(jìn)行了研究，分析了現(xiàn)有分布式入侵檢測系統(tǒng)優(yōu)勢和存在問題，深入研究了分布式平臺Hadoop的相關(guān)技術(shù)。為有效解決分布式入侵檢測系統(tǒng)面臨的現(xiàn)有問題，本文利用Hadoop強(qiáng)大的分布式計算和處理能力，設(shè)計和實現(xiàn)了一個基于Hadoop的分布式入侵檢測系統(tǒng)原型。該系統(tǒng)原型主要功能包括傳感器、數(shù)據(jù)分析、報警響應(yīng)、系統(tǒng)狀態(tài)監(jiān)控、數(shù)據(jù)查詢、系統(tǒng)管理六個功能模塊。在系統(tǒng)實施中，首先分別完成傳感器和Ha

3、doop集群的部署和配置。在數(shù)據(jù)采集部分，基于WinPcap實現(xiàn)采集、解析網(wǎng)絡(luò)數(shù)據(jù)包；在數(shù)據(jù)分析部分，結(jié)合Hadoop的MapReduce框架實現(xiàn)分布式入侵檢測系統(tǒng)中相關(guān)任務(wù)調(diào)度工作以及對采集的網(wǎng)絡(luò)數(shù)據(jù)進(jìn)行并行分析檢測；在報警響應(yīng)部分，將分析檢測出來的入侵攻擊行為存儲在構(gòu)建于HDFS之上的HBase數(shù)據(jù)庫中并進(jìn)行報警響應(yīng)。此外，本系統(tǒng)通過Ganglia軟件和調(diào)用Hadoop內(nèi)部API實現(xiàn)系統(tǒng)狀態(tài)監(jiān)控。
　　本文利用Hadoop強(qiáng)大