新聞視頻故事單元分割.pdf

1、隨著日常信息量的增長,新聞節(jié)目的增多,新聞視頻分析、組織、檢索等成為一種迫切需要。故事單元結(jié)構(gòu)作為新聞視頻分析等工作的基礎(chǔ),研究其分割實現(xiàn)具有一定的意義。本文以新聞視頻節(jié)目為對象,對新聞故事單元分割中的相關(guān)技術(shù)進行了討論,主要包括:主持人鏡頭檢測、主題字幕檢測、音頻跳變檢測,并設(shè)計了一種基于多模態(tài)融合的新聞故事單元分割算法。
　　 采用運動補償和自適應(yīng)雙閾值算法的鏡頭邊界檢測后,在每個鏡頭選取關(guān)鍵幀的基礎(chǔ)上,本文提出了一種基于人

2、臉檢測和近鄰傳播聚類的檢測算法,實現(xiàn)了主持人鏡頭檢測。
　　 同時提取鏡頭關(guān)鍵幀的小波系數(shù)作為特征,采用支持向量機分類器對這些特征分類,實現(xiàn)了主題字幕的提取。
　　 對新聞視頻中的音頻,提取Mel頻率倒譜系數(shù)作為音頻特征,設(shè)計了基于混合高斯模型和分割熵的檢測算法,實現(xiàn)了新聞視頻中音頻跳變檢測。
　　 本文在總結(jié)了現(xiàn)有的故事單元分割方法基礎(chǔ)上,利用主持人鏡頭、主題字幕以及音頻跳變的檢測結(jié)果,設(shè)計了一種基于多模態(tài)融合