音視頻融合感知的研究與實踐.pdf

1、隨著監(jiān)測系統(tǒng)智能化的快速發(fā)展，監(jiān)測數(shù)據(jù)在交通、環(huán)境、安防等領域發(fā)揮著越來越重要的作用。音視頻融合的研究可以利用視覺與聽覺的互補效應來感知環(huán)境變化。此外數(shù)據(jù)量巨大的音視頻數(shù)據(jù)，迫使人們尋找更加有效地分析方法，從而將人從重復的勞動中解脫出來。因此，音視頻融合感知技術不僅具有重要的理論研究價值，在應用前景上也是大有可為。
　　本文研究當前音視頻融合感知領域發(fā)展的現(xiàn)狀，以傳統(tǒng)視頻監(jiān)控平臺為基礎，設計了音視頻融合感知的體系結構。立足于音視頻

2、內(nèi)容分析，研究了基于音視頻融合感知的暴力場景分析模型。本文主要貢獻如下:
　　1.以音視頻融合感知的監(jiān)控平臺為出發(fā)點，設計了基于音視頻融合感知的現(xiàn)場監(jiān)測的系統(tǒng)框架、處理流程以及硬件選型，搭建了一套應用于音視頻監(jiān)控系統(tǒng)平臺。
　　2.在聽覺數(shù)據(jù)采集中利用多線程循環(huán)隊列緩沖池技術對采集過程進行了優(yōu)化，設計了數(shù)據(jù)采集階段聲壓級特征對視頻監(jiān)控的融合策略以及程序功能的模塊化分組。測試結果表明，該系統(tǒng)經(jīng)過優(yōu)化后能夠較好地應用于實際檢測中