海量qos文件處理與數據分析——IPTV QOS質量分析系統.pdf

1、指導小組成員名單馮瑞副教授郭躍飛副教授摘要上海電信IPTv的用戶量從2008年剛推出時的5萬，經過這幾年的發(fā)展已經成長為注冊用戶160萬，活躍用戶近百萬的這樣一個龐大數字，每天電信運維部門收到的故障申告數以千計，運營維護壓力很大。如果要達到理想的監(jiān)控效果，就要求我們實時地接受海量用戶上報的質量數據(后文稱之為QOS數據)，并對其進行即時的分析響應。目前的網管系統無法做到這一點。同時三網融合形勢下，可供發(fā)展的藍海出現，但是苦于“數據海量，

2、信息缺乏”，對于收到的數據無法進行有效的分析，很多有意義的數據束之高閣，如果我們能夠對這海量的QOS數據進行有效的分析，將給未來的運營維護工作帶來很大的便利。因此，研發(fā)一套能夠在短時間內處理海量QOS上報數據并及時做出用戶指標判斷以及具備一定的數據多維分析功能的統一平臺就具有了一定的實際應用價值和理論意義。本文研發(fā)了一套名為IPTv(10S質量分析系統的統一數據處理和分析系統。它接收全上海電信IPTv機頂盒上報的海量QOS用戶數據，能夠

3、在30秒內完成50萬個QOS文件的處理和入庫工作，在完成處理入庫之后，它利用事先創(chuàng)建好的用戶指標模型對上報上來的數據進行判障，得出用戶各QOS指標正常與否的結果。最后在得到了海量分析完畢的用戶指標數據之后，本系統能夠對這些數據進行多個維度屬性上的分析和一定程度的數據深入分析。本文分析研究了IPTv(10S系統的三個關鍵部分的設計：海量數據的處理和入庫，用戶指標模型的創(chuàng)建，數據的多維分析和深入分析。本文最后還展望了本系統的未來發(fā)展方向：更