基于TMS320DM365的音視頻傳輸及智能視頻分析系統(tǒng)的設計與實現(xiàn).pdf

1、近年來，隨著網(wǎng)絡帶寬的迅速提升及視頻處理技術(shù)的不斷發(fā)展，智能視頻分析技術(shù)在智能交通、平安城市、平安校園等應用場合得到了廣泛的應用。本文結(jié)合項目實際需要設計并實現(xiàn)了由TMS320DM365嵌入式前端設備、匯聚轉(zhuǎn)發(fā)服務器、客戶端組成的音視頻采集、處理和傳輸系統(tǒng)，并將該系統(tǒng)應用于智能交通領(lǐng)域中。
　　本文在分析了用戶實際需求的基礎(chǔ)上給出了系統(tǒng)的總體設計方案，并著重從前端設備、匯聚轉(zhuǎn)發(fā)服務器、智能分析子系統(tǒng)、客戶端四個部分詳細闡述了其主要

2、工作：首先分析了TMS320DM365嵌入式前端設備的總體性能與技術(shù)優(yōu)勢，介紹了TMS320DM365的音視頻處理流程及多媒體程序開發(fā)過程，詳細闡述了采集、編碼等應用層軟件的開發(fā)，重點實現(xiàn)了RTSP流媒體服務器。其次，給出了匯聚轉(zhuǎn)發(fā)服務器的總體設計，從匯聚轉(zhuǎn)發(fā)模塊及后臺管理模塊兩個部分詳細闡述了匯聚轉(zhuǎn)發(fā)服務器的具體實現(xiàn)過程。在匯聚轉(zhuǎn)發(fā)模塊中，詳細介紹了碼流的接收過程，并重點闡述了音視頻碼流轉(zhuǎn)發(fā)功能的實現(xiàn)；在后臺管理模塊中，介紹了匯聚轉(zhuǎn)發(fā)

3、服務器對前端設備及系統(tǒng)客戶端的管理流程，并重點給出了前端設備參數(shù)設置及內(nèi)核文件系統(tǒng)自動更新功能的實現(xiàn)。第三，結(jié)合智能交通的實際應用給出了智能視頻分析子系統(tǒng)的設計，介紹了目標檢測、背景提取的相關(guān)算法，詳細闡述了基于Kalman濾波器及MeanShift算法的目標跟蹤過程，并給出了目標跟蹤及車輛計數(shù)算法在本系統(tǒng)中的實現(xiàn)方法。第四，給出了客戶端軟件的總體設計，從接收模塊及解碼模塊兩個部分詳細闡述了音視頻碼流的接收解碼過程。在客戶端的總體設計部

4、分，主要介紹了橋接模式在客戶端軟件設計中的應用，并采用雙緩沖隊列的機制實現(xiàn)了接收模塊與解碼模塊的數(shù)據(jù)傳輸；在接收模塊，主要實現(xiàn)了音視頻碼流的接收與處理；在解碼模塊，實現(xiàn)了音視頻碼流的解碼、播放，重點研究了基于RTP/RTCP協(xié)議棧的音視頻同步問題并給出了本系統(tǒng)的實現(xiàn)方法。最后，對本文實現(xiàn)的系統(tǒng)進行了測試，測試結(jié)果表明本系統(tǒng)可以實現(xiàn)多種分辨率視頻的實時傳輸，且音頻與視頻同步效果較好，視頻分析算法的實時性與準確度基本能夠滿足本項目的實際需求