基于Hadoop的分布式入侵檢測系統(tǒng)原型設計與實現(xiàn).pdf

1、入侵檢測技術作為網(wǎng)絡安全領域中的一項安全機制，對網(wǎng)絡和系統(tǒng)進行實時的動態(tài)監(jiān)控以達到對入侵行為的防御和抵制，為網(wǎng)絡安全提供有效的安全保護。伴隨著網(wǎng)絡規(guī)模和流量爆炸性的增長，傳統(tǒng)的入侵檢測系統(tǒng)難以完成對海量數(shù)據(jù)的實時處理，存在丟包率高、檢測率低、誤報率高等缺點。分布式入侵檢測系統(tǒng)采用分布式結構實現(xiàn)數(shù)據(jù)采集和并行處理，有效提高了其檢測率。然而，隨著網(wǎng)絡攻擊方式的多樣化和復雜化，現(xiàn)有的分布式入侵檢測系統(tǒng)逐漸地暴露出分析處理能力低、系統(tǒng)的互操作性

2、和可擴展性差等問題。
　　本文對分布式入侵檢測技術進行了研究，分析了現(xiàn)有分布式入侵檢測系統(tǒng)優(yōu)勢和存在問題，深入研究了分布式平臺Hadoop的相關技術。為有效解決分布式入侵檢測系統(tǒng)面臨的現(xiàn)有問題，本文利用Hadoop強大的分布式計算和處理能力，設計和實現(xiàn)了一個基于Hadoop的分布式入侵檢測系統(tǒng)原型。該系統(tǒng)原型主要功能包括傳感器、數(shù)據(jù)分析、報警響應、系統(tǒng)狀態(tài)監(jiān)控、數(shù)據(jù)查詢、系統(tǒng)管理六個功能模塊。在系統(tǒng)實施中，首先分別完成傳感器和Ha

3、doop集群的部署和配置。在數(shù)據(jù)采集部分，基于WinPcap實現(xiàn)采集、解析網(wǎng)絡數(shù)據(jù)包；在數(shù)據(jù)分析部分，結合Hadoop的MapReduce框架實現(xiàn)分布式入侵檢測系統(tǒng)中相關任務調度工作以及對采集的網(wǎng)絡數(shù)據(jù)進行并行分析檢測；在報警響應部分，將分析檢測出來的入侵攻擊行為存儲在構建于HDFS之上的HBase數(shù)據(jù)庫中并進行報警響應。此外，本系統(tǒng)通過Ganglia軟件和調用Hadoop內(nèi)部API實現(xiàn)系統(tǒng)狀態(tài)監(jiān)控。
　　本文利用Hadoop強大