三維電視系統(tǒng)編碼、視點(diǎn)變換算法研究及運(yùn)動(dòng)補(bǔ)償硬件設(shè)計(jì).pdf

1、三維影像能夠提供給觀眾身臨其境的視覺體驗(yàn)，三維電視(3DTV)系統(tǒng)是傳統(tǒng)二維電視系統(tǒng)的變革方向，自由立體顯示技術(shù)的發(fā)展為3DTV系統(tǒng)的普及提供了可能性，各種高級(jí)信號(hào)處理算法則為3DTV系統(tǒng)奠定了基礎(chǔ)，研究高效的3DTV系統(tǒng)具有重要的理論、現(xiàn)實(shí)和經(jīng)濟(jì)意義。
　　 當(dāng)前實(shí)用的3DTV系統(tǒng)一般采用視頻加深度的場(chǎng)景表示方法，一個(gè)顯著特點(diǎn)是包含多視點(diǎn)視頻流。論文一方面圍繞3DTV系統(tǒng)的編碼問題，研究提高壓縮效率、繪制虛擬視點(diǎn)的方法；另一方

2、面從視頻解碼的實(shí)時(shí)性出發(fā)，研究運(yùn)動(dòng)補(bǔ)償?shù)挠布O(shè)計(jì)。編碼方法、圖像處理構(gòu)成了3DTV系統(tǒng)的算法基礎(chǔ)，硬件加速則為3DTV系統(tǒng)實(shí)現(xiàn)提供了積極的借鑒意義。論文取得的創(chuàng)新性成果包括：
　　 (1)提出一種多視點(diǎn)加深度的編碼方法，在時(shí)間域上采用層次化B幀的預(yù)測(cè)結(jié)構(gòu)、在空間域上利用視點(diǎn)變換來編碼多個(gè)視點(diǎn)。該方法將視點(diǎn)分成主視點(diǎn)和輔視點(diǎn)，采用圖像渲染技術(shù)來合成輔視點(diǎn)的預(yù)測(cè)圖像；編碼并傳輸視點(diǎn)的遮擋信息，以在解碼端獲得高質(zhì)量的重建圖像；可根據(jù)主

3、、輔視點(diǎn)在空間域上相關(guān)性的強(qiáng)弱，解耦主視點(diǎn)深度圖周期和圖像組長(zhǎng)度，耦合主視點(diǎn)深度圖周期和輔視點(diǎn)圖像組長(zhǎng)度，以充分挖掘時(shí)空域上的相關(guān)性。該編碼方法可擴(kuò)展至二維排列的視點(diǎn)陣列，在保證重建圖像質(zhì)量的同時(shí)可獲得更高的壓縮性能。
　　 (2)提出一種深度輔助樣本匹配算法，以修復(fù)視點(diǎn)內(nèi)部的空洞。采用提出算法的視點(diǎn)變換流程包括深度圖形態(tài)學(xué)處理、圖像渲染和空洞修復(fù)。在預(yù)處理階段，采用膨脹處理深度圖像，以抑制變換視點(diǎn)中的物體分裂；在后處理階段，通

4、過制定優(yōu)先級(jí)確定修復(fù)順序，采用塊匹配搜索空洞紋理，在匹配代價(jià)函數(shù)中加入深度信息，通過紋理相似性和深度一致性確定最佳匹配塊，根據(jù)視頻采樣的特點(diǎn)采用亮度優(yōu)先的修復(fù)策略。采用本算法得到的目標(biāo)視點(diǎn)具有幾何保真、結(jié)構(gòu)保持、深度區(qū)分方面的優(yōu)越性，能夠?yàn)轭A(yù)測(cè)編碼提供有效的參考圖像。
　　 (3)提出一種串并混合的運(yùn)動(dòng)補(bǔ)償亮度插值結(jié)構(gòu)和三級(jí)遞歸色度插值結(jié)構(gòu)，通過在垂直方向串行處理輸入整數(shù)像素點(diǎn)以優(yōu)化數(shù)據(jù)流；提出一種多參考圖像管理的算法和硬件結(jié)構(gòu)