海量無(wú)線電監(jiān)測(cè)數(shù)據(jù)的分布式存儲(chǔ)及檢索技術(shù)研究.pdf

1、隨著物聯(lián)網(wǎng)、4G網(wǎng)絡(luò)、移動(dòng)互聯(lián)等技術(shù)的廣泛使用，無(wú)線電通訊得到大量應(yīng)用。然而由于偽基站、黑廣播、衛(wèi)星電視干擾器等設(shè)備的大量出現(xiàn)，導(dǎo)致了無(wú)線電波的秩序受到了嚴(yán)重的擾亂破壞。為了保障無(wú)線電波秩序，需要及時(shí)對(duì)無(wú)線電信號(hào)進(jìn)行監(jiān)測(cè)，監(jiān)察并嚴(yán)懲擾亂秩序的無(wú)線電設(shè)備和相關(guān)使用人員。無(wú)線電資源的管理工作涉及到國(guó)家安全和隱私保護(hù)等方面，隨著社會(huì)信息化的不斷推進(jìn)，無(wú)線電頻譜資源的管理與利用越來(lái)越重要。
　　無(wú)線電監(jiān)測(cè)網(wǎng)已經(jīng)形成了國(guó)家、省、地市監(jiān)測(cè)中心

2、，具備聯(lián)網(wǎng)監(jiān)測(cè)能力。同時(shí)，無(wú)線電監(jiān)測(cè)已經(jīng)形成了海量的監(jiān)測(cè)數(shù)據(jù)，然而由于無(wú)線電臺(tái)站自身的分散性以及監(jiān)測(cè)軟件的網(wǎng)絡(luò)聯(lián)動(dòng)能力和智能化程度都不高，采集到的數(shù)據(jù)都以原始數(shù)據(jù)的形式存儲(chǔ)在本地?cái)?shù)據(jù)庫(kù)中，并沒(méi)有有效的進(jìn)行分析、整理。另外，面對(duì)海量的監(jiān)測(cè)數(shù)據(jù)，SQL查詢效率是不能夠忍受的，這就導(dǎo)致了無(wú)線電監(jiān)測(cè)數(shù)據(jù)的孤立化存儲(chǔ)，利用率極低，無(wú)法迅速的把有效信息提供給無(wú)線電監(jiān)管部門。
　　針對(duì)上述現(xiàn)狀，本文設(shè)計(jì)了一種針對(duì)分布、海量的無(wú)線電監(jiān)測(cè)數(shù)據(jù)的處理

3、、存儲(chǔ)及檢索模型，實(shí)現(xiàn)了對(duì)無(wú)線電監(jiān)測(cè)數(shù)據(jù)的分布式存儲(chǔ)以及高效檢索。本文的主要工作有：
　?。?）設(shè)計(jì)了一種無(wú)線電監(jiān)測(cè)數(shù)據(jù)的預(yù)處理方法。針對(duì)無(wú)線電監(jiān)測(cè)設(shè)備監(jiān)測(cè)到的不同類型的無(wú)線電數(shù)據(jù)，首先按照時(shí)間維度對(duì)監(jiān)測(cè)數(shù)據(jù)進(jìn)行劃分；然后采用K-Means算法對(duì)時(shí)間維度上的監(jiān)測(cè)數(shù)據(jù)進(jìn)行聚類分析；最后計(jì)算數(shù)據(jù)與類中心點(diǎn)的距離值，移除噪聲點(diǎn)。
　?。?）設(shè)計(jì)一種以特征參數(shù)方式存儲(chǔ)和檢索的方案。本文基于無(wú)線電信號(hào)的一些統(tǒng)計(jì)特征與信號(hào)的業(yè)務(wù)類型之間

4、的聯(lián)系，在時(shí)間維度上，提取出監(jiān)測(cè)數(shù)據(jù)的33個(gè)特征參數(shù)，作為該段時(shí)間內(nèi)所有監(jiān)測(cè)數(shù)據(jù)的表示。
　　（3）設(shè)計(jì)并驗(yàn)證了一種針對(duì)海量無(wú)線電監(jiān)測(cè)數(shù)據(jù)的分布式存儲(chǔ)及檢索原型系統(tǒng)。包括設(shè)計(jì)了UIP統(tǒng)一接口平臺(tái)、存儲(chǔ)層、檢索層以及時(shí)間同步服務(wù)等，并放棄無(wú)線電監(jiān)管行業(yè)現(xiàn)在普遍采用的SQL數(shù)據(jù)庫(kù)，采用NoSQL數(shù)據(jù)庫(kù)HBase實(shí)現(xiàn)對(duì)監(jiān)測(cè)數(shù)據(jù)的分布存儲(chǔ)和檢索。
　　本文整體上完成了對(duì)無(wú)線電監(jiān)測(cè)數(shù)據(jù)的分布式處理、存儲(chǔ)及檢索，實(shí)現(xiàn)了對(duì)無(wú)線電監(jiān)測(cè)數(shù)據(jù)的