基于音頻嵌入視頻的HEVC音視頻同步方法研究.pdf

1、多媒體服務(wù)中，音視頻同步是影響用戶(hù)感知體驗(yàn)的一個(gè)核心問(wèn)題，其同步的好壞直接關(guān)系到在線(xiàn)視頻點(diǎn)播、遠(yuǎn)程視頻教學(xué)等多媒體服務(wù)質(zhì)量的高低。以信息隱藏思想為基礎(chǔ)的基于 H.26X的嵌入式音視頻同步技術(shù)是解決這一問(wèn)題的有效方式。然而，進(jìn)幾年隨著數(shù)字多媒體技術(shù)的進(jìn)一步發(fā)展以及人們對(duì)視頻的質(zhì)量要求越來(lái)越高，H.264/AVC在應(yīng)用高清視頻的音視頻同步方面已經(jīng)不能達(dá)到滿(mǎn)意的性能要求，針對(duì)該問(wèn)題，本文進(jìn)行了基于 HEVC的嵌入式音視頻同步方法以及同步質(zhì)量評(píng)

2、價(jià)模型的相關(guān)研究：
　　首先，針對(duì)高清視頻序列，結(jié)合 HEVC幀內(nèi)預(yù)測(cè)編碼技術(shù)，通過(guò)對(duì)幀內(nèi)預(yù)測(cè)模式相關(guān)性分析，提出了一種 HEVC幀內(nèi)預(yù)測(cè)模式分組的嵌入式音視頻同步方法，借助可變長(zhǎng)編碼思想對(duì)音頻信息進(jìn)行變長(zhǎng)分組，通過(guò)變換讀取音頻信息的標(biāo)志位，對(duì)應(yīng)修改引入的哥倫布 exp-Golomb算法的K值，建立音頻信息與預(yù)測(cè)模式的雙映射關(guān)系，并針對(duì)剩下單比特音頻信息情況，建立音頻信息與預(yù)測(cè)模式的奇偶映射，既提升了音頻嵌入容量，又保證了嵌入音頻

3、信息的完整性。實(shí)驗(yàn)結(jié)果表明，所提算法對(duì)高清視頻序列音視頻同步具有良好的適應(yīng)性。
　　其次，選擇幀間預(yù)測(cè)中最優(yōu)預(yù)測(cè)模式占比較高的Skip模式進(jìn)行調(diào)制，結(jié)合其不傳殘差和像素殘差，只傳送索引號(hào)至解碼端的技術(shù)新特點(diǎn)，提出了基于 Skip模式的HEVC低比特率音視頻同步算法。采用奇偶映射的方式，將 Skip模式運(yùn)動(dòng)矢量 MV索引號(hào)進(jìn)行分類(lèi)。只需調(diào)制其索引號(hào)，而無(wú)需對(duì)其運(yùn)動(dòng)矢量進(jìn)行修改，不會(huì)產(chǎn)生誤差也避免了因誤差累計(jì)而造成幀間失真漂移現(xiàn)象。實(shí)

4、驗(yàn)結(jié)果表明，該算法在較低比特率增加的情況下，較好的實(shí)現(xiàn)了音視頻同步編碼傳輸。
　　最后，對(duì)同步后的音視頻序列構(gòu)建模型并進(jìn)行質(zhì)量評(píng)價(jià)。在量化音視頻特征的基礎(chǔ)上，利用協(xié)貫量對(duì)音視頻序列進(jìn)行相關(guān)性分析，描繪音視頻相關(guān)程度曲線(xiàn)，結(jié)合音視頻主觀質(zhì)量評(píng)價(jià)方法，根據(jù)同步誤差的變化，用相關(guān)度曲線(xiàn)量化估計(jì)同步誤差對(duì)感知質(zhì)量的影響，然后建立同步誤差和主觀質(zhì)量的模型映射關(guān)系，從而實(shí)現(xiàn)音視頻同步序列質(zhì)量的快速、準(zhǔn)確評(píng)價(jià)。
　　仿真實(shí)驗(yàn)表明，所提同步