多媒體系統(tǒng)音視頻同步方法的研究與實(shí)現(xiàn).pdf

1、隨著音視頻編解碼和傳輸技術(shù)的發(fā)展，高性能的音視頻壓縮技術(shù)日益成熟，高效可靠的音視頻壓縮技術(shù)使多媒體的實(shí)時傳輸成為了可能，多媒體系統(tǒng)已經(jīng)越來越多的被運(yùn)用于視屏?xí)h、視屏監(jiān)控、桌面共享等領(lǐng)域。
　　在多媒體系統(tǒng)中，音視頻同步技術(shù)起著舉足輕重的作用，如何能夠保證在復(fù)雜的網(wǎng)絡(luò)環(huán)境下還原服務(wù)器端采集到的音視頻數(shù)據(jù)，使其同步播放，已然成為一個評判多媒體系統(tǒng)質(zhì)量的關(guān)鍵因素，怎樣保證多媒體數(shù)據(jù)在采集、傳輸、播放中的同步已經(jīng)成為多媒體系統(tǒng)中的一個重

2、要問題。多媒體數(shù)據(jù)在采集、壓縮、網(wǎng)絡(luò)傳輸、解碼和播放過程中都可能造成音視頻的異步，網(wǎng)絡(luò)傳輸時發(fā)生的擁塞丟包和時延更是影響了接收端中音視頻的播放質(zhì)量，出現(xiàn)音唇不同步的現(xiàn)象。目前用于音視頻同步的算法雖然有很多，但大多都不適用于靈活組網(wǎng)的視頻監(jiān)控系統(tǒng)這樣的實(shí)時系統(tǒng)中。
　　本文將介紹一個適用于視頻監(jiān)控系統(tǒng)的音視頻同步解決方案。系統(tǒng)的組成包含了基于嵌入式的前端采集設(shè)備，基于UNIX的多媒體轉(zhuǎn)發(fā)服務(wù)器，基于windows的PC客戶端，鑒于視

3、頻監(jiān)控系統(tǒng)復(fù)雜的組成和廣泛的運(yùn)用，算法的通用性和靈活性要求要高，能夠運(yùn)行在不同的設(shè)備上面。
　　本文使用標(biāo)準(zhǔn)的RTP/RTCP協(xié)議作為傳輸協(xié)議，使用RTP協(xié)議中的時間戳記錄發(fā)送時間，并將其作為同步依據(jù)，在發(fā)送端和接受端做相應(yīng)的同步控制，從流化，傳輸和解碼播放三個環(huán)節(jié)出發(fā)，在多媒體層，用一種基于時間的自適應(yīng)音視頻同步算法，解決系統(tǒng)中的多媒體流內(nèi)以及多媒體流間的同步問題。算法的研究包括了基于時間的同步、多媒體播放的速率控制、抖動控制、