大數(shù)據(jù)環(huán)境下面向電信行業(yè)數(shù)據(jù)管理平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、互聯(lián)網(wǎng)的發(fā)展給傳統(tǒng)企業(yè)的發(fā)展帶來了沖擊，不僅包括傳統(tǒng)實(shí)體店線下銷售的模式被電商沖擊，還包括虛擬運(yùn)營(yíng)商對(duì)傳統(tǒng)運(yùn)營(yíng)商的沖擊，傳統(tǒng)電信運(yùn)營(yíng)商需要順應(yīng)時(shí)代趨勢(shì)做出相應(yīng)轉(zhuǎn)型。電信運(yùn)營(yíng)商必須面對(duì)如何處理海量數(shù)據(jù)的問題，以及如何提高運(yùn)營(yíng)效率來滿足用戶日益?zhèn)€性化的需求。本文嘗試設(shè)計(jì)了一套面向電信行業(yè)的數(shù)據(jù)管理平臺(tái)來簡(jiǎn)化對(duì)海量碎片化的數(shù)據(jù)處理工作，幫助運(yùn)營(yíng)人員制定精準(zhǔn)營(yíng)銷方案來提高運(yùn)營(yíng)效率。
　　在熟悉了數(shù)據(jù)挖掘相關(guān)理論知識(shí)及技術(shù)、分析了電信行業(yè)業(yè)

2、務(wù)發(fā)展方向及數(shù)據(jù)特點(diǎn)、掌握了Web應(yīng)用平臺(tái)開發(fā)及數(shù)據(jù)存儲(chǔ)等相關(guān)技術(shù)的基礎(chǔ)上，本文做了以下工作：
　　第一、利用Node.js開發(fā)技術(shù)，設(shè)計(jì)并實(shí)現(xiàn)了一套Web應(yīng)用數(shù)據(jù)管理平臺(tái)來展現(xiàn)對(duì)電信數(shù)據(jù)進(jìn)行有效挖掘的直觀結(jié)果，并嘗試通過友好的交互體驗(yàn)來降低進(jìn)行電信數(shù)據(jù)挖掘相關(guān)工作的技術(shù)門檻。
　　第二、根據(jù)對(duì)電信運(yùn)營(yíng)商的用戶數(shù)據(jù)、產(chǎn)品數(shù)據(jù)及歷史營(yíng)銷數(shù)據(jù)的類型及特點(diǎn)的了解，制定了一套適用于電信運(yùn)營(yíng)商的數(shù)據(jù)流量業(yè)務(wù)的數(shù)據(jù)分析方案，并且構(gòu)建了基

3、于數(shù)據(jù)流量產(chǎn)品的用戶細(xì)分模型。
　　第三、針對(duì)數(shù)據(jù)存儲(chǔ)，構(gòu)建了Hadoop分布式存儲(chǔ)系統(tǒng)的集群環(huán)境，利用分布式文件系統(tǒng)HDFS完成數(shù)據(jù)存儲(chǔ)，通過分布式數(shù)據(jù)倉庫Hive實(shí)現(xiàn)使用HQL進(jìn)行查詢分析。
　　第四、針對(duì)數(shù)據(jù)的分析處理，利用R語言服務(wù)器程序Rserve操作Hive表中數(shù)據(jù)執(zhí)行相關(guān)分析挖掘算法，并將結(jié)果通過RIO庫傳遞到Web前端。
　　利用支持實(shí)時(shí)雙向連接的Web應(yīng)用技術(shù)Node.js來建站，將Rserve做海量