基于子空間分析的多視角視頻摘要技術研究.pdf

1、隨著數(shù)字多媒體技術、網絡通信技術和數(shù)字電視技術的迅猛發(fā)展，視頻數(shù)據每天都在以井噴的方式涌現(xiàn)。同時，近些年視頻監(jiān)控的普及、體育賽事和娛樂節(jié)目等的爆炸式增長，多視角視頻已逐步成為視頻家族中的一種主要類型。多視角視頻數(shù)據是指由多個攝像機在不同位置以不同的角度對同一事件在相同時間段內拍攝獲得的視頻。因其非結構化的數(shù)據形式使得對其處理和瀏覽的效率低下，不能滿足實際應用發(fā)展的需要。目前，如何對海量的多視角視頻數(shù)據做高效的分析、管理、存儲、傳輸是研究

2、人員亟待解決的問題。視頻數(shù)據技術是指通過自動或著半自動的方式，對視頻數(shù)據的內容和結構進行分析，并分析提取視頻數(shù)據中有代表性的視頻段。通過對多視角視頻合理應用數(shù)據技術能夠有效的去除多視角視頻的冗余數(shù)據，從而解決其存儲、傳輸和管理等方面的問題、提高視頻檢索和瀏覽的效率、特別對于公安安防、公共交通、公共娛樂、體育賽事等領域有重要的意義。本文借鑒現(xiàn)有的單視頻數(shù)據方法思路，通過對多視角視頻的結果特征進行分析，結合跨視角視頻應用中廣泛采用的線性空間

3、假設，即相同場景目標在多視角中存在于同一線性子空間的假設，論文首次提出基于子空間分析的多視角視頻數(shù)據生成算法。
　　本研究主要內容包括：①研究多視角視頻預處理方法。分析多視角視頻的結構信息，通過基于場景變換檢測的視頻分割方法，對多視角視頻分割為不同場景的視頻段；研究基于低秩稀疏子空間更新的視頻前景分割方法，對不同場景的視頻段提取幀的前景圖像；提取SIFT和光流特征，并融合SIFT特征和光流特征為視頻的底層特征信息。②研究跨視角超空

4、間的構造方法。通過對獲得的各視角場景視頻段特征，做主成分分析獲取各個場景視頻段投影矩陣，構建各視角場景視頻段的基空間；分析各場景子空間中個元素之間的關系，通過子空間中各元素相互投影，構建跨視角特征超空間。③研究跨視角超空間下的基于稀疏子空間的視頻內容聚類方法。對構建的跨視角的特征超空間聚類分析，在每類中選擇合適的視頻段作為代表性的場景視頻段，按照各個視頻段的時間信息生成多視角的視頻數(shù)據。通過在多視角視頻公開數(shù)據集上進行測試實驗，提出的基