提高多視點(diǎn)視頻編碼效率的技術(shù)研究.pdf

1、多視點(diǎn)視頻是由攝像機(jī)陣列從不同角度拍攝同一場(chǎng)景得到的一組視頻信號(hào)，包含了豐富的3D場(chǎng)景信息，將廣泛應(yīng)用于任意視點(diǎn)視頻/任意視點(diǎn)電視、3D視頻/3D電視等多種正在興起的多媒體業(yè)務(wù)。然而多視點(diǎn)視頻的數(shù)據(jù)量隨著攝像機(jī)的數(shù)目增加而線性增加，巨大的數(shù)據(jù)量已經(jīng)成為制約其廣泛應(yīng)用的瓶頸。多視點(diǎn)視頻編碼(MVC)技術(shù)主要致力于如何提高多視點(diǎn)視頻的壓縮編碼效率，越來(lái)越受到學(xué)術(shù)界和工業(yè)界的密切關(guān)注。目前，MVC將作為H.264/AVC的第四個(gè)增修案，由運(yùn)動(dòng)

2、圖像專家組和視頻編碼專家組共同組成的聯(lián)合視頻小組正致力于MVC的標(biāo)準(zhǔn)化工作。 本文主要研究提高M(jìn)VC編碼效率的技術(shù)，主要研究?jī)?nèi)容及成果如下： 1.MVC參考預(yù)測(cè)結(jié)構(gòu)對(duì)每個(gè)視點(diǎn)在時(shí)間方向上采用分層B幀預(yù)測(cè)結(jié)構(gòu)。根據(jù)不同時(shí)間層視點(diǎn)間預(yù)測(cè)對(duì)編碼效率的貢獻(xiàn)系數(shù)不同，提出了一種MVC分級(jí)預(yù)測(cè)結(jié)構(gòu)。該結(jié)構(gòu)對(duì)于時(shí)間相關(guān)性占主導(dǎo)的時(shí)間層的圖像將不使用視點(diǎn)間預(yù)測(cè)。 2.在一個(gè)GOP內(nèi)，對(duì)于不同的時(shí)間層的圖像進(jìn)行編碼時(shí)，視點(diǎn)間參考圖

3、像對(duì)編碼效率的貢獻(xiàn)系數(shù)隨著時(shí)間層的增加而減小。據(jù)此，提出了一種靈活MVC預(yù)測(cè)結(jié)構(gòu)。當(dāng)前編碼圖像的視點(diǎn)間參考圖像對(duì)編碼效率的貢獻(xiàn)系數(shù)可由已編碼圖像預(yù)測(cè)得到。如果視點(diǎn)間參考圖像對(duì)編碼效率預(yù)測(cè)的貢獻(xiàn)系數(shù)很小，當(dāng)前編碼圖像僅使用時(shí)間參考圖像。 3.與單視點(diǎn)視頻編碼標(biāo)準(zhǔn)不同，MVC在使用時(shí)間參考圖像去除時(shí)間冗余的基礎(chǔ)上增加了使用視點(diǎn)間參考圖像去除視點(diǎn)間冗余的可能。MVC空間DIRECT模式照搬H.264/AVC的參考圖像選取方法，忽略了M

4、VC參考圖像列表的多樣性?；诖?，提出了一種改進(jìn)的MVC空間DIRECT模式參考圖像選取方法。 4.多視點(diǎn)視頻由一組攝像機(jī)同步拍攝得到。自動(dòng)白平衡是攝像機(jī)內(nèi)部完成顏色補(bǔ)償?shù)闹饕K，如果每個(gè)攝像機(jī)都能通過(guò)自身參數(shù)調(diào)節(jié)使得所拍攝的圖像顏色逼真，則整個(gè)MVC系統(tǒng)所有視點(diǎn)的圖像就達(dá)到了顏色的一致性。提出了一種基于灰度顏色點(diǎn)提取的自動(dòng)白平衡方法，具有良好的收斂性。 5.實(shí)際中，各視點(diǎn)之間往往存在顏色差異，降低了MVC視點(diǎn)間預(yù)測(cè)的