立體視頻幀估計與內(nèi)插技術(shù)及立體視頻編解碼系統(tǒng)研究.pdf

1、該文首先對影響幀估計和內(nèi)插的各種因素加以分析,對當(dāng)前的立體視頻幀估計和內(nèi)插算法—基于固定塊匹配的FSBM算法中存在的各種問題進(jìn)行了實驗和討論,指出了提高重建幀估計精度的關(guān)鍵在于解決重建幀中運動區(qū)域的運動匹配以及運動遮擋問題,而提高重建速度的關(guān)鍵在于提高運動估計的速度.因此提出了一種基于運動和亮度信息的不規(guī)則四叉樹運動估計和分割方法(簡稱IMRQT法).在運動估計的同時進(jìn)行分割,在分割時綜合了運動和圖象亮度信息,使得分割位置發(fā)生在與尖銳的

2、運動不連續(xù)的地方最接近的位置(如物體的邊緣),避免了塊運動估計中存在的塊狀可視干擾,保留了運動細(xì)節(jié).在進(jìn)行運動估計和分割時,還使用多分辨率結(jié)構(gòu)以降低計算負(fù)擔(dān).在基于IMRQT的運動估計和分割結(jié)果上,又提出了新的立體視頻幀估計方法,將被重建的圖象分為運動匹配區(qū)域和運動失匹配區(qū)域,給出了對于這兩類區(qū)域進(jìn)行預(yù)測和填充的方法.與當(dāng)前算法相比,基于IMRQT的立體視頻幀估計方法比FSBM方法幀重建的速度提高了約20倍,圖象信噪比提高1.27dB~

3、3dB,并具有較好的估計精度和主觀觀感.在幀估計和內(nèi)插時如果利用被編碼傳輸?shù)膮⒖紟倪\動和視差矢量場,就可以避免在解碼端重做運動/視差搜索估計.為此該文利用立體透視投影幾何模型,推導(dǎo)出立體視頻中鄰接幀之間視差矢量場與運動矢量場之間的對應(yīng)關(guān)系,并將這種關(guān)系應(yīng)用于立體視頻的幀估計之中,提出在立體視頻的兩個鄰接立體圖象對中,當(dāng)其中一幅圖象未知時,可以通過其余3幅圖象以及它們之間的視差和運動場來準(zhǔn)確估計該未知圖象的方法:對于非視差遮擋區(qū)域中的象

4、素點,利用視差和運動矢量之間的對應(yīng)關(guān)系獲得該內(nèi)插點的映射位置和映射強(qiáng)度;對于視差遮擋區(qū)域中的象素點,可根據(jù)視差遮擋的特性及其約束條件,定義一個合適的置信度檢驗方法構(gòu)造代價函數(shù),利用其鄰域中非視差遮擋區(qū)域象素點所對應(yīng)的運動矢量來估計其對應(yīng)的運動矢量并進(jìn)行映射,以得到該象素點的位置和強(qiáng)度估計值.該文稱這種方法為基于運動/視差方程及最小代價方程的立體幀估計與內(nèi)插方法(簡稱MDR_LCF方法).該文提出一種與區(qū)域分割技術(shù)相結(jié)合的視差場校正技術(shù),