移動手持終端的音視頻會話技術(shù).pdf

1、近年來，隨著計算機技術(shù)、多媒體技術(shù)及網(wǎng)絡(luò)技術(shù)的快速發(fā)展，音視頻會話系統(tǒng)正在向嵌入式、數(shù)字化和網(wǎng)絡(luò)化的方向發(fā)展。隨著移動網(wǎng)絡(luò)的高速發(fā)展，在移動終端上實現(xiàn)音視頻會話功能，越來越普及。本文目的是將嵌入式技術(shù)和移動網(wǎng)絡(luò)技術(shù)相結(jié)合，構(gòu)建一個性能穩(wěn)定且具有較強實時功能的音視頻會話系統(tǒng)。
　　 本文首先介紹了音視頻會話技術(shù)研究的國內(nèi)外現(xiàn)狀，針對移動終端的會話系統(tǒng)的特性，選擇了三星公司的ARM系列處理器S3C6410和必要的外圍設(shè)備構(gòu)成系統(tǒng)的硬

2、件平臺。文章研究的重點集中在音視頻會話的軟件實現(xiàn)，按照音視頻會話的流程，分塊完成。
　　 在采集方面，視頻采集過程中首先認真分析了V4L2驅(qū)動的特性及編程方法，結(jié)合系統(tǒng)中采用的CMOS攝像頭的特性，完成了視頻數(shù)據(jù)的采集；同理，在音頻采集過程中，運用了OSS音頻驅(qū)動，完成音頻數(shù)據(jù)的采集。
　　 在編解碼方面，首先介紹了音視頻編解碼的目的和重要性。分析當(dāng)前主流的編解碼方法，結(jié)合系統(tǒng)的自身特性，選擇采用H.264的視頻編解碼和

3、G.729的音頻編解碼。由于S3C6410本身內(nèi)嵌了一個多媒體處理硬件模塊，能夠?qū)崿F(xiàn)H.264的硬件編解碼，極大的提高了視頻編解碼的速度。而在音頻方面，在ARM平臺上移植了G.729編解碼算法。
　　 在音視頻傳輸方面，首先分析了TCP協(xié)議和UDP協(xié)議，得出TCP協(xié)議并不適合用于來傳輸實時數(shù)據(jù)，而UDP協(xié)議傳輸具有不可靠等特點，會給實時數(shù)據(jù)的傳輸帶來數(shù)據(jù)包的失序、丟包等問題。為了更好的實現(xiàn)多媒體數(shù)據(jù)的傳輸，必須在UDP傳輸?shù)幕A(chǔ)