基于開源信息跨媒體融合的圖像分類系統(tǒng)的研究與實現(xiàn).pdf

1、隨著計算機技術和網(wǎng)絡通訊技術的高速發(fā)展，我們的生活和工作中充斥著各種各樣的數(shù)字化信息，這些信息以圖像等多媒體信息為主，在各個領域中都發(fā)揮著重要作用。如何對這些多媒體信息進行有效的組織和利用并從中找出用戶所關心的數(shù)據(jù)已經(jīng)成為目前研究的重要課題。本文將重點討論如何有效組織這些多媒體數(shù)據(jù)并克服“語義鴻溝”提高圖像分類查詢性能的相關技術。
　　本文提出了一種基于開源Web數(shù)據(jù)的圖像分類查詢系統(tǒng)，該系統(tǒng)以提取不同媒體底層特征為基礎。在該系統(tǒng)

2、中主要提出了關于跨媒體關聯(lián)圖模型的構建與更新和基于跨媒體關聯(lián)圖的聚類索引與新媒體對象的加入幾種方法和策略。通過這些方法的提出與使用，不僅降低了系統(tǒng)查詢的時間成本，同時也提高了系統(tǒng)最終的查全率和查準率，達到有效找到用戶感興趣信息的最終目的，即通過Web中圖像周邊文本信息與圖像間不同媒體的關聯(lián)關系找到在高層語義上圖像間的相似關系。
　　跨媒體關聯(lián)圖模型的構建是通過獲得不同媒體信息底層特征進行相似距離計算來構建單模態(tài)鄰接圖，通過鏈接分析

3、找出不同媒體間的關聯(lián)關系，以此為基礎構建模型。為了得到圖像間固有的或潛在的相似關系本文還設計局了兩種更新策略，通過不同媒體間的相似性傳遞原則進行迭代更新，以提高或削弱媒體內(nèi)部的相似關系;通過用戶的相關反饋使關聯(lián)圖模型中數(shù)據(jù)的關系能夠更加與高層語義關系相一致。在本文的查詢和分類過程中都是基于此模型來進行的，與傳統(tǒng)方法相比，本文提出的模型能夠更好的在高層語義范圍內(nèi)找出媒體間的關聯(lián)關系，能夠更好的使不同媒體信息通過數(shù)據(jù)間的關系融合起來。