基于集群架構(gòu)的移動終端網(wǎng)絡(luò)流量采集與服務(wù)平臺研發(fā).pdf

1、隨著移動終端的廣泛使用，尤其是智能手機(jī)的迅速普及，移動智能終端給現(xiàn)代社會巨大的變革。然而隨著移動應(yīng)用的普及和用戶數(shù)量爆發(fā)式增長，移動智能終端的安全也面臨著巨大挑戰(zhàn)。在移動終端惡意軟件檢測領(lǐng)域，近年來學(xué)術(shù)界和產(chǎn)業(yè)界關(guān)注的除了靜態(tài)特征碼和動態(tài)行為分析方法之外，基于網(wǎng)絡(luò)流量特征的檢測方法日益被業(yè)界關(guān)注和研究。但這種檢測技術(shù)由于用到機(jī)器學(xué)習(xí)技術(shù)甚至是深度學(xué)習(xí)技術(shù)，因此獲取海量的、有標(biāo)記的網(wǎng)絡(luò)流量數(shù)據(jù)成為了研究的首要任務(wù)。
　　針對以上問題

2、，為達(dá)到快速收集指定應(yīng)用程序網(wǎng)絡(luò)流量數(shù)據(jù)的目的。本文設(shè)計并實現(xiàn)了基于集群架構(gòu)的移動終端網(wǎng)絡(luò)流量采集與服務(wù)平臺。該平臺分為三部分，第一部分是存儲服務(wù)器，用于存儲應(yīng)用程序文件和網(wǎng)絡(luò)流量文件;第二部分是控制及服務(wù)系統(tǒng)，用于整個平臺的控制;第三部分是采集集群，由采集流量計算機(jī)（采集機(jī)）組成，用于采集移動終端網(wǎng)絡(luò)流量。每一臺采集計算機(jī)中部署多線程網(wǎng)絡(luò)流量采集程序，采集計算機(jī)中開啟多個線程，每一個線程通過程序?qū)崿F(xiàn)全自動的應(yīng)用程序網(wǎng)絡(luò)流量收集任務(wù)。并

3、且針對收集的網(wǎng)絡(luò)流量文件，本平臺可以對其進(jìn)行進(jìn)一步的處理，例如提取網(wǎng)絡(luò)流量中的DNS數(shù)據(jù)包、TCP流，提取目的地址為惡意地址的TCP流，網(wǎng)絡(luò)流量可視化等。應(yīng)用技術(shù)方面，平臺使用Python語言搭建了基于集群架構(gòu)的Android系統(tǒng)網(wǎng)絡(luò)流量采集系統(tǒng)，并且編寫了專門的Android應(yīng)用程序界面遍歷腳本和采用PHP語言編寫的WEB端的管理系統(tǒng)。前者使得自動化采集到的網(wǎng)絡(luò)流量更加接近真實環(huán)境下產(chǎn)生的網(wǎng)絡(luò)流量，后者則方便研究人員操作該平臺。