基于校園DNS日志數(shù)據(jù)的可視化分析研究與實現(xiàn).pdf

1、隨著網(wǎng)絡(luò)的不斷發(fā)展和應用的普及，人們對網(wǎng)絡(luò)的依賴越來越多，網(wǎng)上聊天、休閑娛樂、電子購物等隨處可見。在網(wǎng)絡(luò)應用的進行中，其中產(chǎn)生了大量的數(shù)據(jù)。而流量日志數(shù)據(jù)就是其中的一類，它實時記錄用戶在網(wǎng)絡(luò)中的行為蹤跡，數(shù)據(jù)規(guī)模比較大。這些數(shù)據(jù)中蘊含著業(yè)務需求與異常行為等比較豐富的信息，而這些信息在數(shù)據(jù)中是難以直接發(fā)現(xiàn)的。為了便于數(shù)據(jù)閱讀者獲取其中蘊含的信息，需要使用一些方法將這些隱藏的信息發(fā)掘出來，可視化就是一種很好的手段。
　　 針對大規(guī)模

2、網(wǎng)絡(luò)流數(shù)據(jù)中用戶與資源的業(yè)務需求和異常行為的發(fā)現(xiàn)等問題，本文設(shè)計了大規(guī)模流數(shù)據(jù)可視化分析的架構(gòu)模型。首先，從網(wǎng)絡(luò)中采集數(shù)據(jù)，然后對采集到的數(shù)據(jù)進行清洗，提取數(shù)據(jù)中的屬性特征，最后將屬性特征按照不同的關(guān)系類別使用不同的可視化展現(xiàn)形式表示出來并進行分析。在研究過程中，主要解決了以下幾個問題:(1)對大規(guī)模流數(shù)據(jù)的索引進行優(yōu)化，選擇高效的方法以實現(xiàn)實時處理;(2)根據(jù)數(shù)據(jù)中屬性特征之間的關(guān)系提取出不同的屬性特征;(3)對不同的業(yè)務需求選擇合適