基于TMS320DM365的音視頻傳輸及智能視頻分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、近年來(lái)，隨著網(wǎng)絡(luò)帶寬的迅速提升及視頻處理技術(shù)的不斷發(fā)展，智能視頻分析技術(shù)在智能交通、平安城市、平安校園等應(yīng)用場(chǎng)合得到了廣泛的應(yīng)用。本文結(jié)合項(xiàng)目實(shí)際需要設(shè)計(jì)并實(shí)現(xiàn)了由TMS320DM365嵌入式前端設(shè)備、匯聚轉(zhuǎn)發(fā)服務(wù)器、客戶端組成的音視頻采集、處理和傳輸系統(tǒng)，并將該系統(tǒng)應(yīng)用于智能交通領(lǐng)域中。
　　本文在分析了用戶實(shí)際需求的基礎(chǔ)上給出了系統(tǒng)的總體設(shè)計(jì)方案，并著重從前端設(shè)備、匯聚轉(zhuǎn)發(fā)服務(wù)器、智能分析子系統(tǒng)、客戶端四個(gè)部分詳細(xì)闡述了其主要

2、工作：首先分析了TMS320DM365嵌入式前端設(shè)備的總體性能與技術(shù)優(yōu)勢(shì)，介紹了TMS320DM365的音視頻處理流程及多媒體程序開發(fā)過(guò)程，詳細(xì)闡述了采集、編碼等應(yīng)用層軟件的開發(fā)，重點(diǎn)實(shí)現(xiàn)了RTSP流媒體服務(wù)器。其次，給出了匯聚轉(zhuǎn)發(fā)服務(wù)器的總體設(shè)計(jì)，從匯聚轉(zhuǎn)發(fā)模塊及后臺(tái)管理模塊兩個(gè)部分詳細(xì)闡述了匯聚轉(zhuǎn)發(fā)服務(wù)器的具體實(shí)現(xiàn)過(guò)程。在匯聚轉(zhuǎn)發(fā)模塊中，詳細(xì)介紹了碼流的接收過(guò)程，并重點(diǎn)闡述了音視頻碼流轉(zhuǎn)發(fā)功能的實(shí)現(xiàn)；在后臺(tái)管理模塊中，介紹了匯聚轉(zhuǎn)發(fā)

3、服務(wù)器對(duì)前端設(shè)備及系統(tǒng)客戶端的管理流程，并重點(diǎn)給出了前端設(shè)備參數(shù)設(shè)置及內(nèi)核文件系統(tǒng)自動(dòng)更新功能的實(shí)現(xiàn)。第三，結(jié)合智能交通的實(shí)際應(yīng)用給出了智能視頻分析子系統(tǒng)的設(shè)計(jì)，介紹了目標(biāo)檢測(cè)、背景提取的相關(guān)算法，詳細(xì)闡述了基于Kalman濾波器及MeanShift算法的目標(biāo)跟蹤過(guò)程，并給出了目標(biāo)跟蹤及車輛計(jì)數(shù)算法在本系統(tǒng)中的實(shí)現(xiàn)方法。第四，給出了客戶端軟件的總體設(shè)計(jì)，從接收模塊及解碼模塊兩個(gè)部分詳細(xì)闡述了音視頻碼流的接收解碼過(guò)程。在客戶端的總體設(shè)計(jì)部

4、分，主要介紹了橋接模式在客戶端軟件設(shè)計(jì)中的應(yīng)用，并采用雙緩沖隊(duì)列的機(jī)制實(shí)現(xiàn)了接收模塊與解碼模塊的數(shù)據(jù)傳輸；在接收模塊，主要實(shí)現(xiàn)了音視頻碼流的接收與處理；在解碼模塊，實(shí)現(xiàn)了音視頻碼流的解碼、播放，重點(diǎn)研究了基于RTP/RTCP協(xié)議棧的音視頻同步問(wèn)題并給出了本系統(tǒng)的實(shí)現(xiàn)方法。最后，對(duì)本文實(shí)現(xiàn)的系統(tǒng)進(jìn)行了測(cè)試，測(cè)試結(jié)果表明本系統(tǒng)可以實(shí)現(xiàn)多種分辨率視頻的實(shí)時(shí)傳輸，且音頻與視頻同步效果較好，視頻分析算法的實(shí)時(shí)性與準(zhǔn)確度基本能夠滿足本項(xiàng)目的實(shí)際需求