基于多視角合成算法的視頻監(jiān)控技術(shù)研究.pdf

1、隨著科技的發(fā)展，視頻通信已成為數(shù)據(jù)通信的主要方式之一?，F(xiàn)在社會(huì)對(duì)視頻的功能及質(zhì)量提出了越來(lái)越高的要求，人們不僅僅滿足于只觀看一個(gè)視角方向的平面圖像，而希望從各個(gè)角度看到全部視角的圖像。由于場(chǎng)景限制，某些視角無(wú)法安置攝像機(jī)，因此需要對(duì)相鄰的左右視角視頻進(jìn)行合成，從而獲得多視角視頻?；谶@一需求，多視角視頻編碼（MVC,Multi-view Video Coding)技術(shù)應(yīng)運(yùn)而生。該技術(shù)為現(xiàn)代電視的發(fā)展，例如3DTV，F(xiàn)TV(Free Vi

2、ewpoint Television)，奠定了良好的理論基礎(chǔ)，也勢(shì)必會(huì)廣泛應(yīng)用在未來(lái)眾多領(lǐng)域中。
　　多視角合成是MVC技術(shù)中最重要的部分，目前還有許多待解決問(wèn)題，比如視差圖準(zhǔn)確度不高，初始合成圖存在大量空洞，空洞補(bǔ)漏方法的選擇極大地影響到合成圖的質(zhì)量，算法耗時(shí)過(guò)長(zhǎng)不適用于實(shí)際系統(tǒng)等等。因此，MVC研究的重點(diǎn)就在于選擇兼顧算法耗時(shí)和視差圖準(zhǔn)確度的視差估計(jì)算法，同時(shí)根據(jù)現(xiàn)有圖像信息，高效準(zhǔn)確地填補(bǔ)空洞。
　　本文對(duì)視角合成的兩

3、種模式—平行攝像機(jī)陣列模式和環(huán)形攝像機(jī)陣列模式—分別進(jìn)行研究。對(duì)于平行攝像機(jī)陣列模式，本文實(shí)現(xiàn)了一種自適應(yīng)視差估計(jì)機(jī)制，并提出了一種改進(jìn)的視角合成及補(bǔ)漏算法，僅需一次視差估計(jì)就能得到效果較好的合成圖，并在合成過(guò)程中完成了空洞點(diǎn)的檢測(cè)，減少了算法的運(yùn)行時(shí)間。對(duì)于環(huán)形攝像機(jī)陣列模式，本文整合了一套完整的定角度視角合成系統(tǒng)，選用八點(diǎn)算法進(jìn)行極線校正，通過(guò)立體匹配算法得到深度信息，用得到的深度信息進(jìn)行3D映射，通過(guò)背景圖像進(jìn)行合成圖空洞修復(fù)。兩