基于概率主題模型的圖像標(biāo)注研究.pdf

1、在圖像標(biāo)注的工作中，概率主題模型的圖像標(biāo)注是圖像標(biāo)注研究領(lǐng)域的一個重要分支，旨在通過學(xué)習(xí)圖像語義進(jìn)行圖像標(biāo)注，近年來備受研究人員的廣泛關(guān)注。本文從以下三個方面來研究概率主題模型的圖像標(biāo)注：一，加強模型中圖像和文本兩個模態(tài)之間的關(guān)聯(lián)性；二，利用真實圖像中事物占圖像比例大小構(gòu)建圖像標(biāo)注模型；三，類別對圖像標(biāo)注可提供有價值的信息，將類別信息融入圖像標(biāo)注模型之中。主要具體工作如下：
　　1、針對圖像和文本之間關(guān)聯(lián)性較弱的問題，本文嘗試通過

2、引入中間變量來加強兩個模態(tài)之間的關(guān)聯(lián)性，提出了基于mm-LDA模型的圖像標(biāo)注概率主題模型（mm-LDA-C模型），同時，為該模型推導(dǎo)了一個基于變分 EM的參數(shù)估計算法，并給出了使用該模型標(biāo)注新圖像的方法。
　　2、針對現(xiàn)有的圖像標(biāo)注工作都還沒有考慮到將事物占圖像比例大小這一信息融入模型的構(gòu)建當(dāng)中，本文在Corr-LDA模型的基礎(chǔ)上提出了一種文本主題選擇是依照圖像主題分布的圖像標(biāo)注概率主題模型（Corr-LDA-ITD模型），同時，

3、為該模型推導(dǎo)了一個基于變分EM的參數(shù)估計算法，并給出了使用該模型標(biāo)注新圖像的方法。
　　3、針對類別對圖像標(biāo)注可提供有價值的信息，本文將類別信息融入到圖像標(biāo)注的概率主題模型中，提出了一個融入類別信息的圖像標(biāo)注概率主題模型（Corr*-LDA-L模型），同時，為該模型推導(dǎo)了一個基于變分EM的參數(shù)估計算法，并給出了使用該模型標(biāo)注新圖像的方法。
　　本文提出了三個概率主題圖像標(biāo)注模型，分別是mm-LDA-C模型，Corr-LDA-