基于深度圖像的虛擬視點(diǎn)繪制方法研究.pdf

1、基于深度圖像的繪制方法是通過其他視點(diǎn)視頻信息生成任意視點(diǎn)視頻，是虛擬視點(diǎn)繪制的最常用方法。虛擬視點(diǎn)繪制方法在3D產(chǎn)品中應(yīng)用廣泛，是整個(gè)3D產(chǎn)品系統(tǒng)生成鏈中一個(gè)很關(guān)鍵的技術(shù)過程，是計(jì)算機(jī)圖像處理領(lǐng)域重要的研究課題之一?；谏疃葓D像的繪制方法的技術(shù)原理是三維圖像變換方程，即通過參考視點(diǎn)與虛擬視點(diǎn)的攝像機(jī)內(nèi)外參數(shù)矩陣，以及參考視點(diǎn)的深度圖信息，建立參考視點(diǎn)圖像與虛擬視點(diǎn)圖像之間的像素點(diǎn)映射關(guān)系。在虛擬視點(diǎn)繪制過程中，參考視點(diǎn)中被前景物體遮擋的

2、區(qū)域在虛擬視點(diǎn)中會(huì)變得可見，這部分區(qū)域由于缺少圖像信息產(chǎn)生空洞問題。在多視點(diǎn)合并的圖像融合過程中，融合方式的選取也是虛擬視點(diǎn)繪制方法需要解決的問題。
　　本文利用圖像修復(fù)算法對空洞進(jìn)行填補(bǔ)，并對算法進(jìn)行改進(jìn)。提出一種新的優(yōu)先級計(jì)算方法，利用加權(quán)平均的結(jié)構(gòu)張量作為數(shù)據(jù)項(xiàng)，提高空間的局部一致性，改善空洞填補(bǔ)的順序;采用局部閾值分割的方法降低空洞邊界前景像素的填補(bǔ)優(yōu)先級，降低空洞邊界前景像素的填補(bǔ)順序，改善前景像素的錯(cuò)誤擴(kuò)散。此外，提出

3、一種新的塊距離計(jì)算公式與源空間識別方法，利用梯度與位置關(guān)系，對塊距離公式進(jìn)行改進(jìn)，在搜索區(qū)域中選擇更為合適的匹配塊對目標(biāo)塊進(jìn)行像素填充;針對由于遮擋產(chǎn)生的空洞，利用深度圖與最大化類間方差算法，識別出相對背景作為搜索區(qū)域的源空間，減少由于誤匹配而導(dǎo)致的錯(cuò)誤填補(bǔ)。實(shí)驗(yàn)結(jié)果表明，與現(xiàn)已有方法相比，虛擬視點(diǎn)繪制的圖像質(zhì)量有了較大的提高。
　　本文利用廣義回歸神經(jīng)網(wǎng)絡(luò)，提出一種基于機(jī)器學(xué)習(xí)的圖像融合方法。本文利用訓(xùn)練樣本數(shù)據(jù)，建立神經(jīng)網(wǎng)絡(luò)預(yù)