結合主動學習的視覺場景理解.pdf

1、基于視覺的場景理解能夠有效幫助和提高計算機對于復雜多變室內(nèi)外場景的分析和認知能力，是計算機視覺領域的研究熱點之一。根據(jù)場景的多層次語義表達，場景理解通?？煞譃榫植繄鼍袄斫夂腿謭鼍袄斫鈨纱箢?。前者側重于對場景局部區(qū)域的分布和類別進行分析和描述，諸如場景中各種不同類別局部目標的識別和定位；后者則側重于理解場景的全局屬性，比如場景分類。場景的局部和全局理解能夠從不同認知層面加深計算機對于未知場景的認知和把握程度，在諸如智能監(jiān)控，信息檢索和移

2、動機器人等領域具有廣闊的應用前景，因而具有重要的研究價值和意義。由于視覺信息容易受視角，尺度，背景干擾和遮擋等因素的影響，目前的視覺場景理解技術在準確性和魯棒性上依然存在著諸多問題。本文分別從場景理解的不同認知層面入手，分別研究了局部和全局場景理解領域中的三個熱點課題，并在機器學習環(huán)節(jié)中結合了主動學習來實現(xiàn)人工樣本標注數(shù)目的降低和分類器訓練負擔的減輕，本文內(nèi)容和貢獻如下：
　　 本文重點研究了一種基于支持向量機的多視角主動學習算

3、法。由于主動學習具有降低樣本復雜度的特點，因而在諸如目標識別和場景分類等視覺場景理解領域得到了越來越多的關注和發(fā)展。支持向量機在小樣本分類中具有較好的性能，而多視角學習相比單視角學習則能夠更好地降低樣本的分類誤差，因而兩者的結合有助于改善主動學習的性能。本文算法針對傳統(tǒng)的多視角主動學習算法協(xié)同測試在分類假設生成和采樣策略中存在的不足分別提出了相應的改進。首先，本文將支持向量機作為各個視角的基本分類器，并將基于分類器序貫組合的Adaboo

4、st算法應用到多視角主動學習框架中以強化每次查詢后生成的分類假設；其次，為了適應具有大規(guī)模未標記樣本的訓練集，本文提出了一種自適應的分級采樣競爭策略，當分類爭議樣本數(shù)目較多時通過無監(jiān)督譜聚類獲得上述樣本的空間分布描述，并在各個聚類中通過求解二次規(guī)劃來結合樣本的分類不確定度和冗余度信息以獲得可靠的多視角采樣。通過實驗證明，本文提出的主動學習算法與目前幾種主流算法相比能夠更快地收斂并具有更高的分類性能。
　　 如何在靜態(tài)圖像中對多種

5、不同類別的目標進行聯(lián)合識別和分割是局部場景理解的重要研究領域之一。目前，該研究領域還有諸多難題沒有解決。由于缺乏運動信息，目標識別和分割的結果容易受視角，光照以及遮擋等變化的影響。為此，本文提出了一種結合主動學習的多類別目標聯(lián)合識別和分割方法。本文首先利用三種不同的無監(jiān)督圖像分割方法來獲得目標的多分割描述以增強目標像素之間的空間關聯(lián)。其次，通過第二章的方法構建多視角主動學習分類器來實現(xiàn)多分割圖中各個分割塊的分類，并在分割塊的同質性預測基

6、礎上通過加權不同分割圖的信息來降低分割塊層目標分類的不確定度。最終，本文將分割塊層的局部目標信息和基于圖像層的全局目標信息融合到分級條件隨機場框架中，通過圖模型推理來同步實現(xiàn)目標分割的區(qū)域平滑和語義上下文優(yōu)化。
　　 文中闡述了一種結合主動學習的非結構化道路分割方案。從圖像中獲取準確的道路區(qū)域在諸如自主駕駛和移動機器人等實用領域具有重要的應用價值，而在復雜多變的非結構化場景中將道路與非道路區(qū)域進行準確區(qū)分則面臨比傳統(tǒng)的結構化道路

7、場景更大的挑戰(zhàn)。為此，本文在結合圖像區(qū)域和邊界信息的基礎上，提出了一種自頂向下的道路分割方法?；谙袼貙臃诸惖姆椒ㄍㄟ^基于自監(jiān)督的在線學習來提高對于道路場景變化的適應性，而馬爾可夫隨機場則用于實現(xiàn)分類結果的空域平滑。基于道路邊界約束的方法則通過估計道路的消失點位置來獲取可靠的道路邊界描述。本文通過基于多視角主動學習的全局道路分類器來預測當前場景所對應的道路模型，并根據(jù)不同的道路類型自適應地選擇最優(yōu)的道路分割方法。此外，本文在道路漸變的先

8、驗假設基礎上通過時域平滑機制分別對像素層分類和道路模型預測進行改進，從而進一步提高了道路分割的可靠性。
　　 場景分類能夠幫助計算機在宏觀上準確理解各種復雜的環(huán)境類型，從而在諸如基于內(nèi)容的圖像檢索和自主駕駛等多個領域能夠發(fā)揮重要的作用。為此，本文提出了一種結合主動學習的場景分類方法。在多視角主動學習算法框架中，本文采用了三個基于不同特征的視角來分別生成相應的假設：首先，本文使用多種不同的目標檢測器來獲取場景內(nèi)部的局部目標響應特征

9、；其次，空間關系集的挖掘能夠更好地增強場景中各個局部區(qū)域之間的空間語義關聯(lián)；最后，本文提出了一種基于級聯(lián)的在線隱狄利柯雷分布主題模型框架。基于隨機梯度下降的在線隱狄利柯雷分布模型可以更好地適用于大規(guī)模樣本庫的學習，而針對不同的空間金字塔層采用基于加權的聯(lián)合主題建模則能夠獲取更為準確的場景主題描述。實驗表明，上述三種特征均相比于傳統(tǒng)的低層圖像特征能夠從不同角度對高層圖像語義進行更為有效地描述，而基于上述視角特征隨機組合的多視角主動學習算法