新聞視頻故事單元分割.pdf

1、隨著日常信息量的增長(zhǎng),新聞節(jié)目的增多,新聞視頻分析、組織、檢索等成為一種迫切需要。故事單元結(jié)構(gòu)作為新聞視頻分析等工作的基礎(chǔ),研究其分割實(shí)現(xiàn)具有一定的意義。本文以新聞視頻節(jié)目為對(duì)象,對(duì)新聞故事單元分割中的相關(guān)技術(shù)進(jìn)行了討論,主要包括:主持人鏡頭檢測(cè)、主題字幕檢測(cè)、音頻跳變檢測(cè),并設(shè)計(jì)了一種基于多模態(tài)融合的新聞故事單元分割算法。
　　 采用運(yùn)動(dòng)補(bǔ)償和自適應(yīng)雙閾值算法的鏡頭邊界檢測(cè)后,在每個(gè)鏡頭選取關(guān)鍵幀的基礎(chǔ)上,本文提出了一種基于人

2、臉檢測(cè)和近鄰傳播聚類的檢測(cè)算法,實(shí)現(xiàn)了主持人鏡頭檢測(cè)。
　　 同時(shí)提取鏡頭關(guān)鍵幀的小波系數(shù)作為特征,采用支持向量機(jī)分類器對(duì)這些特征分類,實(shí)現(xiàn)了主題字幕的提取。
　　 對(duì)新聞視頻中的音頻,提取Mel頻率倒譜系數(shù)作為音頻特征,設(shè)計(jì)了基于混合高斯模型和分割熵的檢測(cè)算法,實(shí)現(xiàn)了新聞視頻中音頻跳變檢測(cè)。
　　 本文在總結(jié)了現(xiàn)有的故事單元分割方法基礎(chǔ)上,利用主持人鏡頭、主題字幕以及音頻跳變的檢測(cè)結(jié)果,設(shè)計(jì)了一種基于多模態(tài)融合