基于Spark Streaming的自適應(yīng)實(shí)時(shí)DDoS檢測與防御技術(shù).pdf

1、分布式拒絕服務(wù)（DDoS，Distributed Denial of Service）攻擊是當(dāng)前互聯(lián)網(wǎng)存在的重要安全威脅。隨著 Internet規(guī)模的不斷擴(kuò)大和網(wǎng)絡(luò)帶寬的不斷提升，網(wǎng)絡(luò)DDoS攻擊的流量也隨之增大。巨大的網(wǎng)絡(luò)流量給網(wǎng)絡(luò)安全檢測設(shè)備和技術(shù)帶來了前所未有的壓力，而傳統(tǒng)的單一服務(wù)器已經(jīng)不能滿足實(shí)時(shí)大數(shù)據(jù)的吞吐能力要求，近年來，學(xué)術(shù)界和工業(yè)界對大數(shù)據(jù)處理技術(shù)和平臺的研究十分火熱，大數(shù)據(jù)處理平臺Spark的誕生為大流量的DDoS攻

2、擊的快速實(shí)時(shí)檢測和防御帶來了可能，借助計(jì)算機(jī)集群資源利用Spark大數(shù)據(jù)處理平臺和技術(shù)手段，能有效解決計(jì)算能力上的瓶頸問題。
　　在深入分析各類 DDoS檢測和防御方法的基礎(chǔ)上，本文提出了一種基于源簇特征統(tǒng)計(jì)的自適應(yīng)實(shí)時(shí) DDoS攻擊檢測方法，并設(shè)計(jì)了基于分組過濾的 DDoS攻擊防御策略。通過對滑動窗口內(nèi)源簇進(jìn)行分組，并將各分組內(nèi)源簇比例的最大偏差與閥值進(jìn)行比較，檢測出 DDoS攻擊流量。當(dāng)檢測出網(wǎng)絡(luò)流量中存在 DDoS攻擊流量時(shí)

3、，將根據(jù)分組過濾策略對DDoS攻擊流量進(jìn)行過濾。
　　基于Spark Strea ming大數(shù)據(jù)流處理框架，本文設(shè)計(jì)了一個(gè)基于大數(shù)據(jù)流處理的自適應(yīng)實(shí)時(shí) DDoS攻擊檢測和防御架構(gòu)，將提出的基于源簇特征統(tǒng)計(jì)的自適應(yīng)實(shí)時(shí) DDoS檢測方法和基于分組過濾的 DDoS攻擊防御策略，在大數(shù)據(jù)處理平臺上進(jìn)行了實(shí)現(xiàn)?？蚣苡蒏afka消息中間件模塊、基于Spark Streaming的檢測模塊和基于Spark Strea ming的防御模塊三部分