基于概率主題模型的圖像標(biāo)注研究.pdf

1、在圖像標(biāo)注的工作中，概率主題模型的圖像標(biāo)注是圖像標(biāo)注研究領(lǐng)域的一個(gè)重要分支，旨在通過(guò)學(xué)習(xí)圖像語(yǔ)義進(jìn)行圖像標(biāo)注，近年來(lái)備受研究人員的廣泛關(guān)注。本文從以下三個(gè)方面來(lái)研究概率主題模型的圖像標(biāo)注：一，加強(qiáng)模型中圖像和文本兩個(gè)模態(tài)之間的關(guān)聯(lián)性；二，利用真實(shí)圖像中事物占圖像比例大小構(gòu)建圖像標(biāo)注模型；三，類(lèi)別對(duì)圖像標(biāo)注可提供有價(jià)值的信息，將類(lèi)別信息融入圖像標(biāo)注模型之中。主要具體工作如下：
　　1、針對(duì)圖像和文本之間關(guān)聯(lián)性較弱的問(wèn)題，本文嘗試通過(guò)

2、引入中間變量來(lái)加強(qiáng)兩個(gè)模態(tài)之間的關(guān)聯(lián)性，提出了基于mm-LDA模型的圖像標(biāo)注概率主題模型（mm-LDA-C模型），同時(shí)，為該模型推導(dǎo)了一個(gè)基于變分 EM的參數(shù)估計(jì)算法，并給出了使用該模型標(biāo)注新圖像的方法。
　　2、針對(duì)現(xiàn)有的圖像標(biāo)注工作都還沒(méi)有考慮到將事物占圖像比例大小這一信息融入模型的構(gòu)建當(dāng)中，本文在Corr-LDA模型的基礎(chǔ)上提出了一種文本主題選擇是依照?qǐng)D像主題分布的圖像標(biāo)注概率主題模型（Corr-LDA-ITD模型），同時(shí)，

3、為該模型推導(dǎo)了一個(gè)基于變分EM的參數(shù)估計(jì)算法，并給出了使用該模型標(biāo)注新圖像的方法。
　　3、針對(duì)類(lèi)別對(duì)圖像標(biāo)注可提供有價(jià)值的信息，本文將類(lèi)別信息融入到圖像標(biāo)注的概率主題模型中，提出了一個(gè)融入類(lèi)別信息的圖像標(biāo)注概率主題模型（Corr*-LDA-L模型），同時(shí)，為該模型推導(dǎo)了一個(gè)基于變分EM的參數(shù)估計(jì)算法，并給出了使用該模型標(biāo)注新圖像的方法。
　　本文提出了三個(gè)概率主題圖像標(biāo)注模型，分別是mm-LDA-C模型，Corr-LDA-