基于AM5728處理器的多攝像頭視頻拼接軟件設(shè)計.pdf

1、隨著電子信息技術(shù)的快速發(fā)展，新的多媒體應(yīng)用不斷涌現(xiàn)，人們對視頻場景的逼真度和清晰度的要求也越來越高。多攝像頭視頻拼接技術(shù)能夠獲得單攝像頭無法比擬的高品質(zhì)寬視角視覺體驗，是視頻信息處理領(lǐng)域的一個重要研發(fā)方向，其中提升不同角度視頻拼接后的圖像質(zhì)量、以及提高多攝像頭同時拼接的處理速度是目前需要解決的主要難點。
　　本文基于TI-AM5728多核處理器設(shè)計的多攝像頭視頻拼接軟件，主要工作內(nèi)容如下:
　　(1)對視頻拼接軟件的功能和性

2、能進行需求分析，基于AM5728對視頻拼接軟件進行總體設(shè)計，并搭建軟硬件開發(fā)環(huán)境。
　　(2)多路視頻圖像拼接模塊設(shè)計。在圖像匹配階段，通過比較常用配準(zhǔn)算法的實驗效果，設(shè)計了一種基于圖像重疊區(qū)的ORB特征匹配方法。該方法僅在限制區(qū)域內(nèi)，根據(jù)ORB方法、雙向FLANN算法以及RANSAC算法完成圖像配準(zhǔn)與變換矩陣計算，不僅有效降低了特征點對配準(zhǔn)的錯誤率，而且對于光照變換、仿射變換具有較好的魯棒性。
　　在耗時較多的圖像融合階段

3、，采用OpenCL異構(gòu)并行編程框架調(diào)用AM5728的DSP核進行加速處理。首先，由動態(tài)規(guī)劃搜索準(zhǔn)則在投影變換后的多路圖像中，計算最佳縫合線;然后，在每一層拉普拉斯金字塔中，根據(jù)縫合線模板對圖像進行融合。最終得到的全景圖像能夠有效避免模糊虛影和拼接縫隙的產(chǎn)生，整體過渡自然。
　　(3)拼接視頻的編碼傳輸模塊設(shè)計。針對視頻拼接軟件低延時低帶寬的網(wǎng)絡(luò)數(shù)據(jù)傳輸要求，首先，采用GStreamer流媒體框架調(diào)用AM5728的視頻編碼硬件加速器