基于子空間分析的多視角視頻摘要技術(shù)研究.pdf

1、隨著數(shù)字多媒體技術(shù)、網(wǎng)絡(luò)通信技術(shù)和數(shù)字電視技術(shù)的迅猛發(fā)展，視頻數(shù)據(jù)每天都在以井噴的方式涌現(xiàn)。同時(shí)，近些年視頻監(jiān)控的普及、體育賽事和娛樂(lè)節(jié)目等的爆炸式增長(zhǎng)，多視角視頻已逐步成為視頻家族中的一種主要類型。多視角視頻數(shù)據(jù)是指由多個(gè)攝像機(jī)在不同位置以不同的角度對(duì)同一事件在相同時(shí)間段內(nèi)拍攝獲得的視頻。因其非結(jié)構(gòu)化的數(shù)據(jù)形式使得對(duì)其處理和瀏覽的效率低下，不能滿足實(shí)際應(yīng)用發(fā)展的需要。目前，如何對(duì)海量的多視角視頻數(shù)據(jù)做高效的分析、管理、存儲(chǔ)、傳輸是研究

2、人員亟待解決的問(wèn)題。視頻數(shù)據(jù)技術(shù)是指通過(guò)自動(dòng)或著半自動(dòng)的方式，對(duì)視頻數(shù)據(jù)的內(nèi)容和結(jié)構(gòu)進(jìn)行分析，并分析提取視頻數(shù)據(jù)中有代表性的視頻段。通過(guò)對(duì)多視角視頻合理應(yīng)用數(shù)據(jù)技術(shù)能夠有效的去除多視角視頻的冗余數(shù)據(jù)，從而解決其存儲(chǔ)、傳輸和管理等方面的問(wèn)題、提高視頻檢索和瀏覽的效率、特別對(duì)于公安安防、公共交通、公共娛樂(lè)、體育賽事等領(lǐng)域有重要的意義。本文借鑒現(xiàn)有的單視頻數(shù)據(jù)方法思路，通過(guò)對(duì)多視角視頻的結(jié)果特征進(jìn)行分析，結(jié)合跨視角視頻應(yīng)用中廣泛采用的線性空間

3、假設(shè)，即相同場(chǎng)景目標(biāo)在多視角中存在于同一線性子空間的假設(shè)，論文首次提出基于子空間分析的多視角視頻數(shù)據(jù)生成算法。
　　本研究主要內(nèi)容包括：①研究多視角視頻預(yù)處理方法。分析多視角視頻的結(jié)構(gòu)信息，通過(guò)基于場(chǎng)景變換檢測(cè)的視頻分割方法，對(duì)多視角視頻分割為不同場(chǎng)景的視頻段；研究基于低秩稀疏子空間更新的視頻前景分割方法，對(duì)不同場(chǎng)景的視頻段提取幀的前景圖像；提取SIFT和光流特征，并融合SIFT特征和光流特征為視頻的底層特征信息。②研究跨視角超空

4、間的構(gòu)造方法。通過(guò)對(duì)獲得的各視角場(chǎng)景視頻段特征，做主成分分析獲取各個(gè)場(chǎng)景視頻段投影矩陣，構(gòu)建各視角場(chǎng)景視頻段的基空間；分析各場(chǎng)景子空間中個(gè)元素之間的關(guān)系，通過(guò)子空間中各元素相互投影，構(gòu)建跨視角特征超空間。③研究跨視角超空間下的基于稀疏子空間的視頻內(nèi)容聚類方法。對(duì)構(gòu)建的跨視角的特征超空間聚類分析，在每類中選擇合適的視頻段作為代表性的場(chǎng)景視頻段，按照各個(gè)視頻段的時(shí)間信息生成多視角的視頻數(shù)據(jù)。通過(guò)在多視角視頻公開(kāi)數(shù)據(jù)集上進(jìn)行測(cè)試實(shí)驗(yàn)，提出的基