基于集群架構(gòu)的移動(dòng)終端網(wǎng)絡(luò)流量采集與服務(wù)平臺(tái)研發(fā).pdf

1、隨著移動(dòng)終端的廣泛使用，尤其是智能手機(jī)的迅速普及，移動(dòng)智能終端給現(xiàn)代社會(huì)巨大的變革。然而隨著移動(dòng)應(yīng)用的普及和用戶數(shù)量爆發(fā)式增長(zhǎng)，移動(dòng)智能終端的安全也面臨著巨大挑戰(zhàn)。在移動(dòng)終端惡意軟件檢測(cè)領(lǐng)域，近年來(lái)學(xué)術(shù)界和產(chǎn)業(yè)界關(guān)注的除了靜態(tài)特征碼和動(dòng)態(tài)行為分析方法之外，基于網(wǎng)絡(luò)流量特征的檢測(cè)方法日益被業(yè)界關(guān)注和研究。但這種檢測(cè)技術(shù)由于用到機(jī)器學(xué)習(xí)技術(shù)甚至是深度學(xué)習(xí)技術(shù)，因此獲取海量的、有標(biāo)記的網(wǎng)絡(luò)流量數(shù)據(jù)成為了研究的首要任務(wù)。
　　針對(duì)以上問(wèn)題

2、，為達(dá)到快速收集指定應(yīng)用程序網(wǎng)絡(luò)流量數(shù)據(jù)的目的。本文設(shè)計(jì)并實(shí)現(xiàn)了基于集群架構(gòu)的移動(dòng)終端網(wǎng)絡(luò)流量采集與服務(wù)平臺(tái)。該平臺(tái)分為三部分，第一部分是存儲(chǔ)服務(wù)器，用于存儲(chǔ)應(yīng)用程序文件和網(wǎng)絡(luò)流量文件;第二部分是控制及服務(wù)系統(tǒng)，用于整個(gè)平臺(tái)的控制;第三部分是采集集群，由采集流量計(jì)算機(jī)（采集機(jī)）組成，用于采集移動(dòng)終端網(wǎng)絡(luò)流量。每一臺(tái)采集計(jì)算機(jī)中部署多線程網(wǎng)絡(luò)流量采集程序，采集計(jì)算機(jī)中開(kāi)啟多個(gè)線程，每一個(gè)線程通過(guò)程序?qū)崿F(xiàn)全自動(dòng)的應(yīng)用程序網(wǎng)絡(luò)流量收集任務(wù)。并

3、且針對(duì)收集的網(wǎng)絡(luò)流量文件，本平臺(tái)可以對(duì)其進(jìn)行進(jìn)一步的處理，例如提取網(wǎng)絡(luò)流量中的DNS數(shù)據(jù)包、TCP流，提取目的地址為惡意地址的TCP流，網(wǎng)絡(luò)流量可視化等。應(yīng)用技術(shù)方面，平臺(tái)使用Python語(yǔ)言搭建了基于集群架構(gòu)的Android系統(tǒng)網(wǎng)絡(luò)流量采集系統(tǒng)，并且編寫(xiě)了專門的Android應(yīng)用程序界面遍歷腳本和采用PHP語(yǔ)言編寫(xiě)的WEB端的管理系統(tǒng)。前者使得自動(dòng)化采集到的網(wǎng)絡(luò)流量更加接近真實(shí)環(huán)境下產(chǎn)生的網(wǎng)絡(luò)流量，后者則方便研究人員操作該平臺(tái)。