海量無線電監(jiān)測數(shù)據(jù)的分布式存儲及檢索技術(shù)研究.pdf

1、隨著物聯(lián)網(wǎng)、4G網(wǎng)絡、移動互聯(lián)等技術(shù)的廣泛使用，無線電通訊得到大量應用。然而由于偽基站、黑廣播、衛(wèi)星電視干擾器等設備的大量出現(xiàn)，導致了無線電波的秩序受到了嚴重的擾亂破壞。為了保障無線電波秩序，需要及時對無線電信號進行監(jiān)測，監(jiān)察并嚴懲擾亂秩序的無線電設備和相關(guān)使用人員。無線電資源的管理工作涉及到國家安全和隱私保護等方面，隨著社會信息化的不斷推進，無線電頻譜資源的管理與利用越來越重要。
　　無線電監(jiān)測網(wǎng)已經(jīng)形成了國家、省、地市監(jiān)測中心

2、，具備聯(lián)網(wǎng)監(jiān)測能力。同時，無線電監(jiān)測已經(jīng)形成了海量的監(jiān)測數(shù)據(jù)，然而由于無線電臺站自身的分散性以及監(jiān)測軟件的網(wǎng)絡聯(lián)動能力和智能化程度都不高，采集到的數(shù)據(jù)都以原始數(shù)據(jù)的形式存儲在本地數(shù)據(jù)庫中，并沒有有效的進行分析、整理。另外，面對海量的監(jiān)測數(shù)據(jù)，SQL查詢效率是不能夠忍受的，這就導致了無線電監(jiān)測數(shù)據(jù)的孤立化存儲，利用率極低，無法迅速的把有效信息提供給無線電監(jiān)管部門。
　　針對上述現(xiàn)狀，本文設計了一種針對分布、海量的無線電監(jiān)測數(shù)據(jù)的處理

3、、存儲及檢索模型，實現(xiàn)了對無線電監(jiān)測數(shù)據(jù)的分布式存儲以及高效檢索。本文的主要工作有：
　?。?）設計了一種無線電監(jiān)測數(shù)據(jù)的預處理方法。針對無線電監(jiān)測設備監(jiān)測到的不同類型的無線電數(shù)據(jù)，首先按照時間維度對監(jiān)測數(shù)據(jù)進行劃分；然后采用K-Means算法對時間維度上的監(jiān)測數(shù)據(jù)進行聚類分析；最后計算數(shù)據(jù)與類中心點的距離值，移除噪聲點。
　　（2）設計一種以特征參數(shù)方式存儲和檢索的方案。本文基于無線電信號的一些統(tǒng)計特征與信號的業(yè)務類型之間

4、的聯(lián)系，在時間維度上，提取出監(jiān)測數(shù)據(jù)的33個特征參數(shù)，作為該段時間內(nèi)所有監(jiān)測數(shù)據(jù)的表示。
　?。?）設計并驗證了一種針對海量無線電監(jiān)測數(shù)據(jù)的分布式存儲及檢索原型系統(tǒng)。包括設計了UIP統(tǒng)一接口平臺、存儲層、檢索層以及時間同步服務等，并放棄無線電監(jiān)管行業(yè)現(xiàn)在普遍采用的SQL數(shù)據(jù)庫，采用NoSQL數(shù)據(jù)庫HBase實現(xiàn)對監(jiān)測數(shù)據(jù)的分布存儲和檢索。
　　本文整體上完成了對無線電監(jiān)測數(shù)據(jù)的分布式處理、存儲及檢索，實現(xiàn)了對無線電監(jiān)測數(shù)據(jù)的