基于唇動(dòng)檢測(cè)的影視作品對(duì)白單元切分.pdf

1、影視作品是以視頻的形式呈現(xiàn)在觀眾面前的，因此對(duì)影視作品進(jìn)行對(duì)白單元切分，實(shí)際上就是對(duì)視頻進(jìn)行對(duì)白單元切分。本論文的工作目標(biāo)是希望通過(guò)對(duì)視頻中張嘴說(shuō)話(huà)狀態(tài)的檢測(cè)來(lái)分割影視作品中對(duì)白單元片段。通過(guò)輸入一段視頻，檢測(cè)出視頻中人物說(shuō)話(huà)段落。影視作品中對(duì)白單元的切分可用于后續(xù)的視頻語(yǔ)義關(guān)聯(lián)分析、視頻摘要、檢索等。對(duì)影視作品中的對(duì)白單元進(jìn)行切分有著重要的理論意義和實(shí)用價(jià)值。影視作品中對(duì)白單元的切分的研究涉及模式識(shí)別、計(jì)算機(jī)視覺(jué)、圖像處理、數(shù)字信號(hào)處

2、理等多個(gè)相關(guān)領(lǐng)域，它所研究的內(nèi)容涉及到了這些領(lǐng)域的最新的研究進(jìn)展。本文的主要研究工作如下：
　　1．提出了基于嘴部亮度信息變化的唇動(dòng)檢測(cè)切分算法。首先提出了基于嘴部低亮度信息的檢測(cè)切分算法，該方法基于人說(shuō)話(huà)時(shí)口腔內(nèi)部低亮度像素?cái)?shù)量的顯著變化特點(diǎn)提出的。這是由于人們?cè)谡f(shuō)話(huà)的時(shí)候口腔部分暴露出來(lái)了。而口腔通常都處于陰影中，因此口腔像素占有的亮度值都屬于低灰度亮度范圍。因此可以采用大量的嘴唇區(qū)域低亮度像素來(lái)指示唇動(dòng)，用來(lái)檢測(cè)。實(shí)驗(yàn)結(jié)果表

3、明，該方法能夠比較準(zhǔn)確的檢測(cè)出視頻中的說(shuō)話(huà)部分。在基于嘴部低亮度信息的檢測(cè)方法基礎(chǔ)上又提出了改進(jìn)算法。由于人們?cè)谡f(shuō)話(huà)時(shí)候經(jīng)常會(huì)露出牙齒，這些高亮度像素直接干擾低亮度像素的檢測(cè)結(jié)果。因此本文又利用高亮度像素信息補(bǔ)充到低亮度像素信息檢測(cè)規(guī)則中，進(jìn)而提高了檢測(cè)的準(zhǔn)確度。
　　2．提出了基于時(shí)序LBP直方圖的說(shuō)話(huà)檢測(cè)切分算法。人在說(shuō)話(huà)時(shí)，上下嘴唇是動(dòng)的，紋理信息在時(shí)間上變化明顯。人不說(shuō)話(huà)時(shí)，上下嘴唇基本不動(dòng)，紋理信息在時(shí)間上基本維持穩(wěn)定。