基于音視頻融合的人員入侵實時檢測.pdf

1、近年來,公共安全越來越受到大家的關(guān)注和重視。隨著社會的快速發(fā)展,傳統(tǒng)的人工監(jiān)控系統(tǒng)已經(jīng)越來越難以適應(yīng)當(dāng)今社會的要求,智能監(jiān)控系統(tǒng)將成為下一代監(jiān)控系統(tǒng)的主流。由于監(jiān)控場景錯綜復(fù)雜,單純依靠視頻圖像等單一信息進(jìn)行智能監(jiān)控,有可能出現(xiàn)信息盲區(qū),導(dǎo)致自動偵測的高漏警和高虛警。隨著物聯(lián)網(wǎng)的發(fā)展和信息融合技術(shù)的成熟,多傳感器聯(lián)合監(jiān)控成為研究的熱點。多傳感器信息融合能夠克服單一傳感器的片面性和局限性,通過多傳感器間的信息補充和冗余驗證,提高系統(tǒng)的報警

2、準(zhǔn)確率和增強系統(tǒng)的魯棒性。
　　本文利用貝葉斯網(wǎng)絡(luò)模型,對音視頻信息進(jìn)行融合決策,應(yīng)用于人員入侵事件檢測。并將該方法應(yīng)用于無人值守的變電站監(jiān)控,設(shè)計和實現(xiàn)了一套多信息融合監(jiān)控系統(tǒng)。
　　論文的主要研究工作如下:
　　首先,針對方向梯度直方圖的人員檢測方法存在的耗時過長、無法應(yīng)用于實時視頻處理的問題,通過對前景物體的檢測區(qū)域提取,將方向梯度直方圖的提取計算限制于前景區(qū)域內(nèi),大大縮小了搜索范圍,使基于方向梯度直方圖的人員檢

3、測方法得以滿足監(jiān)控系統(tǒng)的實時性要求。
　　其次,考慮了音頻與視頻同步的實時性問題以及腳步聲特性,借鑒說話人識別的方法,對其進(jìn)行改進(jìn),將Mel頻域復(fù)倒譜系數(shù)作為特征,用高斯混合模型分類器進(jìn)行分類,用于腳步聲的檢測。
　　再次,針對在遮擋情況下,方向梯度直方圖的人員檢測方法的檢測精度嚴(yán)重下降問題,利用貝葉斯網(wǎng)絡(luò)對音視頻信息進(jìn)行決策級融合,通過建立一個多層貝葉斯網(wǎng)絡(luò)模型用于音視頻融合決策,提高人員入侵檢測的精度和魯棒性。實驗結(jié)果表