基于子空間分析的多視角視頻摘要技術(shù)研究.pdf

1、隨著數(shù)字多媒體技術(shù)、網(wǎng)絡(luò)通信技術(shù)和數(shù)字電視技術(shù)的迅猛發(fā)展，視頻數(shù)據(jù)每天都在以井噴的方式涌現(xiàn)。同時，近些年視頻監(jiān)控的普及、體育賽事和娛樂節(jié)目等的爆炸式增長，多視角視頻已逐步成為視頻家族中的一種主要類型。多視角視頻數(shù)據(jù)是指由多個攝像機在不同位置以不同的角度對同一事件在相同時間段內(nèi)拍攝獲得的視頻。因其非結(jié)構(gòu)化的數(shù)據(jù)形式使得對其處理和瀏覽的效率低下，不能滿足實際應(yīng)用發(fā)展的需要。目前，如何對海量的多視角視頻數(shù)據(jù)做高效的分析、管理、存儲、傳輸是研究

2、人員亟待解決的問題。視頻數(shù)據(jù)技術(shù)是指通過自動或著半自動的方式，對視頻數(shù)據(jù)的內(nèi)容和結(jié)構(gòu)進行分析，并分析提取視頻數(shù)據(jù)中有代表性的視頻段。通過對多視角視頻合理應(yīng)用數(shù)據(jù)技術(shù)能夠有效的去除多視角視頻的冗余數(shù)據(jù)，從而解決其存儲、傳輸和管理等方面的問題、提高視頻檢索和瀏覽的效率、特別對于公安安防、公共交通、公共娛樂、體育賽事等領(lǐng)域有重要的意義。本文借鑒現(xiàn)有的單視頻數(shù)據(jù)方法思路，通過對多視角視頻的結(jié)果特征進行分析，結(jié)合跨視角視頻應(yīng)用中廣泛采用的線性空間

3、假設(shè)，即相同場景目標在多視角中存在于同一線性子空間的假設(shè)，論文首次提出基于子空間分析的多視角視頻數(shù)據(jù)生成算法。
　　本研究主要內(nèi)容包括：①研究多視角視頻預(yù)處理方法。分析多視角視頻的結(jié)構(gòu)信息，通過基于場景變換檢測的視頻分割方法，對多視角視頻分割為不同場景的視頻段；研究基于低秩稀疏子空間更新的視頻前景分割方法，對不同場景的視頻段提取幀的前景圖像；提取SIFT和光流特征，并融合SIFT特征和光流特征為視頻的底層特征信息。②研究跨視角超空

4、間的構(gòu)造方法。通過對獲得的各視角場景視頻段特征，做主成分分析獲取各個場景視頻段投影矩陣，構(gòu)建各視角場景視頻段的基空間；分析各場景子空間中個元素之間的關(guān)系，通過子空間中各元素相互投影，構(gòu)建跨視角特征超空間。③研究跨視角超空間下的基于稀疏子空間的視頻內(nèi)容聚類方法。對構(gòu)建的跨視角的特征超空間聚類分析，在每類中選擇合適的視頻段作為代表性的場景視頻段，按照各個視頻段的時間信息生成多視角的視頻數(shù)據(jù)。通過在多視角視頻公開數(shù)據(jù)集上進行測試實驗，提出的基