基于文本信息與視覺信息相結(jié)合的Web圖像檢索.pdf

1、隨著計(jì)算機(jī)技術(shù)和Internet的高速發(fā)展，各種各樣的信息被存放于互聯(lián)網(wǎng)這個(gè)巨大的信息庫(kù)里。由于Internet的資源共享和快速通信的強(qiáng)大功能，使得Internet的普及率日益提高，人們?cè)絹?lái)越多地利用Internet查找和搜索各種信息，這其中，不僅僅有簡(jiǎn)單的文本數(shù)據(jù)，更加包括了大量的圖像。圖像不同于文本，它具有豐富的視覺特征，可以將抽象的數(shù)據(jù)更加形象化、真實(shí)化，有助于用戶更加直觀、生動(dòng)地對(duì)知識(shí)的深入理解。然而，圖像的視覺信息非常豐富，由

2、于不同人的感知能力與知識(shí)結(jié)構(gòu)等的不同，對(duì)相同圖像的視覺信息的理解必然存在差異，如何快速、準(zhǔn)確地從海量Web圖像資源中查找用戶需要的圖像，成為一個(gè)非常具有挑戰(zhàn)性的任務(wù)。目前主要的 Web圖像檢索方法大致分為兩種：一種是基于文本的圖像檢索(TBIR)，另一種是基于內(nèi)容的圖像檢索(CBIR)。
　　 基于文本的圖像檢索方法具有人工注解工作量巨大、主觀性強(qiáng)以及文本注解無(wú)法完全涵蓋圖像內(nèi)容的缺陷，而基于內(nèi)容的圖像檢索方法雖然有效地克服了人

3、工描述圖像的主觀性，提高了圖像檢索的工作效率，但圖像的低層視覺特征和高層語(yǔ)義特征之間存在著難以逾越的“語(yǔ)義鴻溝”，大大影響了圖像檢索的質(zhì)量。
　　 針對(duì)上述兩種圖像檢索方法的缺陷和Web圖像自身的特點(diǎn)，本文提出了一種改進(jìn)的Web圖像檢索方法：把從Web圖像所在網(wǎng)頁(yè)包含的文本信息中提取的文本特征，和從Web圖像低層視覺特征中抽取的高層語(yǔ)義特征相結(jié)合的Web圖像檢索。
　　 基于以上提出的圖像檢索方法，首先，本文利用語(yǔ)義相似

4、性計(jì)算技術(shù)作為語(yǔ)義信息的度量手段，來(lái)度量Web圖像中文本信息的相似度，并為后面研究Web圖像的文本信息和視覺信息(即從低層視覺特征中抽取的高層語(yǔ)義特征)的結(jié)合，提供基礎(chǔ)和平臺(tái)。
　　 其次，Web圖像的低層視覺特征和高層語(yǔ)義特征之間存在著難以逾越的“語(yǔ)義鴻溝”，針對(duì)語(yǔ)義鴻溝問(wèn)題，本文提出了一個(gè)基于分類的Web圖像內(nèi)容自動(dòng)標(biāo)注方法，來(lái)提取圖像的高層語(yǔ)義特征；然后，利用語(yǔ)義相似性計(jì)算技術(shù)，來(lái)度量提取出的高層語(yǔ)義特征的質(zhì)量，并進(jìn)一步將

5、圖像內(nèi)容的高層語(yǔ)義特征和Web圖像文本信息的更好地結(jié)合在一起。
　　 接著，為了充分利用從Web圖像中提取的文本信息和從Web圖像低層視覺特征中抽取的高層語(yǔ)義特征，把這兩部分的內(nèi)容放在具有多信息源融合能力的貝葉斯推理網(wǎng)上，將它們充分地結(jié)合在一起，實(shí)現(xiàn)基于文本信息與視覺信息相結(jié)合的Web圖像檢索方法。
　　 基于上述研究，本文設(shè)計(jì)并實(shí)現(xiàn)了一個(gè)Web圖像檢索原型系統(tǒng)，把從Web圖像文本信息中提取的文本特征，和從Web圖像內(nèi)容