基于AM5728處理器的多攝像頭視頻拼接軟件設(shè)計(jì).pdf

1、隨著電子信息技術(shù)的快速發(fā)展，新的多媒體應(yīng)用不斷涌現(xiàn)，人們對(duì)視頻場(chǎng)景的逼真度和清晰度的要求也越來(lái)越高。多攝像頭視頻拼接技術(shù)能夠獲得單攝像頭無(wú)法比擬的高品質(zhì)寬視角視覺體驗(yàn)，是視頻信息處理領(lǐng)域的一個(gè)重要研發(fā)方向，其中提升不同角度視頻拼接后的圖像質(zhì)量、以及提高多攝像頭同時(shí)拼接的處理速度是目前需要解決的主要難點(diǎn)。
　　本文基于TI-AM5728多核處理器設(shè)計(jì)的多攝像頭視頻拼接軟件，主要工作內(nèi)容如下:
　　(1)對(duì)視頻拼接軟件的功能和性

2、能進(jìn)行需求分析，基于AM5728對(duì)視頻拼接軟件進(jìn)行總體設(shè)計(jì)，并搭建軟硬件開發(fā)環(huán)境。
　　(2)多路視頻圖像拼接模塊設(shè)計(jì)。在圖像匹配階段，通過(guò)比較常用配準(zhǔn)算法的實(shí)驗(yàn)效果，設(shè)計(jì)了一種基于圖像重疊區(qū)的ORB特征匹配方法。該方法僅在限制區(qū)域內(nèi)，根據(jù)ORB方法、雙向FLANN算法以及RANSAC算法完成圖像配準(zhǔn)與變換矩陣計(jì)算，不僅有效降低了特征點(diǎn)對(duì)配準(zhǔn)的錯(cuò)誤率，而且對(duì)于光照變換、仿射變換具有較好的魯棒性。
　　在耗時(shí)較多的圖像融合階段

3、，采用OpenCL異構(gòu)并行編程框架調(diào)用AM5728的DSP核進(jìn)行加速處理。首先，由動(dòng)態(tài)規(guī)劃搜索準(zhǔn)則在投影變換后的多路圖像中，計(jì)算最佳縫合線;然后，在每一層拉普拉斯金字塔中，根據(jù)縫合線模板對(duì)圖像進(jìn)行融合。最終得到的全景圖像能夠有效避免模糊虛影和拼接縫隙的產(chǎn)生，整體過(guò)渡自然。
　　(3)拼接視頻的編碼傳輸模塊設(shè)計(jì)。針對(duì)視頻拼接軟件低延時(shí)低帶寬的網(wǎng)絡(luò)數(shù)據(jù)傳輸要求，首先，采用GStreamer流媒體框架調(diào)用AM5728的視頻編碼硬件加速器