實(shí)時流媒體系統(tǒng)中音視頻同步的設(shè)計與實(shí)現(xiàn).pdf

1、進(jìn)入21世紀(jì)，伴隨著經(jīng)濟(jì)的高速發(fā)展，整個社會的不安定因素逐漸累積，人們的安全意識也是逐漸加強(qiáng)。而計算機(jī)技術(shù)、高壓縮比的數(shù)據(jù)壓縮技術(shù)以及寬帶通信技術(shù)的發(fā)展，為安防等實(shí)時流媒體系統(tǒng)應(yīng)用領(lǐng)域的發(fā)展帶來了新的增長點(diǎn)。隨著應(yīng)用的多樣化，單一的視頻監(jiān)控顯得有些單調(diào)，己逐漸滿足不了客戶的需求，無論是銀行、鐵路、客運(yùn)站，都需要優(yōu)質(zhì)的音視頻監(jiān)控系統(tǒng)提供較全面的安防服務(wù)。由于網(wǎng)絡(luò)傳輸?shù)牟豢煽啃?，?dǎo)致本應(yīng)保持同步關(guān)系的數(shù)據(jù)，到達(dá)信宿端時己失去了其固有的時間關(guān)

2、聯(lián)性，即失去了同步，因此音視頻的同步性能就成為了實(shí)時流媒體系統(tǒng)中的一個聚焦熱點(diǎn)。
　　為此，本文就實(shí)時流媒體系統(tǒng)中音視頻媒體流的同步問題做了探究。設(shè)計并實(shí)現(xiàn)一個簡易的實(shí)時流媒體系統(tǒng)，該系統(tǒng)包括信源端、流媒體服務(wù)器、信宿端三部分。針對音視頻數(shù)據(jù)在傳輸過程中產(chǎn)生異步的情況，設(shè)計了一個基于RTP/RTCP協(xié)議的網(wǎng)絡(luò)自適應(yīng)控制的實(shí)時流媒體同步方案。該方案從信源端、信宿端、網(wǎng)絡(luò)狀況三方面入手對音視頻實(shí)施同步控制。在信源端實(shí)現(xiàn)了音視頻數(shù)據(jù)的同

3、步采集、編碼;音視頻數(shù)據(jù)在發(fā)送前通過打上時間戳，實(shí)現(xiàn)不同媒體映射到同一條時間軸。在信宿端，第一步是對收到的音視頻包進(jìn)行同步預(yù)處理，消除時延抖動導(dǎo)致的亂序。然后分別對音頻進(jìn)行解壓，對視頻進(jìn)行組幀。最終依據(jù)時間戳值對音視頻數(shù)據(jù)實(shí)施同步控制。在網(wǎng)絡(luò)狀況的自適應(yīng)方面，信宿端統(tǒng)計網(wǎng)絡(luò)延時抖動與丟包，一方面依據(jù)統(tǒng)計信息調(diào)節(jié)信宿端緩存和播放速率，另一方面將統(tǒng)計信息反饋給信源端。信源端再依據(jù)接收的信息調(diào)節(jié)視頻壓縮率，實(shí)現(xiàn)發(fā)送端的碼率調(diào)節(jié)。
　　最