海量qos文件處理與數(shù)據(jù)分析——IPTV QOS質(zhì)量分析系統(tǒng).pdf

1、指導(dǎo)小組成員名單馮瑞副教授郭躍飛副教授摘要上海電信IPTv的用戶量從2008年剛推出時(shí)的5萬，經(jīng)過這幾年的發(fā)展已經(jīng)成長為注冊(cè)用戶160萬，活躍用戶近百萬的這樣一個(gè)龐大數(shù)字，每天電信運(yùn)維部門收到的故障申告數(shù)以千計(jì)，運(yùn)營維護(hù)壓力很大。如果要達(dá)到理想的監(jiān)控效果，就要求我們實(shí)時(shí)地接受海量用戶上報(bào)的質(zhì)量數(shù)據(jù)(后文稱之為QOS數(shù)據(jù))，并對(duì)其進(jìn)行即時(shí)的分析響應(yīng)。目前的網(wǎng)管系統(tǒng)無法做到這一點(diǎn)。同時(shí)三網(wǎng)融合形勢(shì)下，可供發(fā)展的藍(lán)海出現(xiàn)，但是苦于“數(shù)據(jù)海量，

2、信息缺乏”，對(duì)于收到的數(shù)據(jù)無法進(jìn)行有效的分析，很多有意義的數(shù)據(jù)束之高閣，如果我們能夠?qū)@海量的QOS數(shù)據(jù)進(jìn)行有效的分析，將給未來的運(yùn)營維護(hù)工作帶來很大的便利。因此，研發(fā)一套能夠在短時(shí)間內(nèi)處理海量QOS上報(bào)數(shù)據(jù)并及時(shí)做出用戶指標(biāo)判斷以及具備一定的數(shù)據(jù)多維分析功能的統(tǒng)一平臺(tái)就具有了一定的實(shí)際應(yīng)用價(jià)值和理論意義。本文研發(fā)了一套名為IPTv(10S質(zhì)量分析系統(tǒng)的統(tǒng)一數(shù)據(jù)處理和分析系統(tǒng)。它接收全上海電信IPTv機(jī)頂盒上報(bào)的海量QOS用戶數(shù)據(jù)，能夠

3、在30秒內(nèi)完成50萬個(gè)QOS文件的處理和入庫工作，在完成處理入庫之后，它利用事先創(chuàng)建好的用戶指標(biāo)模型對(duì)上報(bào)上來的數(shù)據(jù)進(jìn)行判障，得出用戶各QOS指標(biāo)正常與否的結(jié)果。最后在得到了海量分析完畢的用戶指標(biāo)數(shù)據(jù)之后，本系統(tǒng)能夠?qū)@些數(shù)據(jù)進(jìn)行多個(gè)維度屬性上的分析和一定程度的數(shù)據(jù)深入分析。本文分析研究了IPTv(10S系統(tǒng)的三個(gè)關(guān)鍵部分的設(shè)計(jì)：海量數(shù)據(jù)的處理和入庫，用戶指標(biāo)模型的創(chuàng)建，數(shù)據(jù)的多維分析和深入分析。本文最后還展望了本系統(tǒng)的未來發(fā)展方向：更