多媒體信息綜合檢索的關鍵技術研究.pdf

1、該文以數字圖書館等容納多種媒體類型的信息資料庫為應用目標,總結了當前國內外多媒體檢索領域中最活躍的圖像檢索和視頻檢索(包括技術路線、相關技術和典型系統)的研究現狀,討論了數字圖書館對多媒體檢索技術所提出的新問題和挑戰(zhàn),并對多媒體信息檢索技術進行了拓展性研究,重點介紹了三項關鍵技術:綜合時空特性的相關反饋方法,交叉參照索引的多模態(tài)檢索方法、以及面向多媒體文檔的多通道檢索方法.該文深入研究了相關反饋的人機交互方法,分析了基于內容的圖像檢索中

2、相關反饋信息的時間特性與空間特性,在此基礎上首次提出了一種時空約束支持向量機(TSC-SVM)的相關反饋學習方法.在空間和時間維度上有所約束的利用用戶在檢索(相關反饋的循環(huán))過程中不斷反饋的正例(相關圖像)和負例(不相關圖像)信息,達到合理利用相關反饋信息、準確掌握用戶查詢需求以及提高檢索精度的目的.和普通支持向量機方法相比,該方法能夠明顯的提高相關反饋的學習能力,提高檢索結果的準確率;同時還能在檢索過程中準確實時的跟蹤用戶的查詢需求,

3、在用戶的查詢需求發(fā)生轉移時顯得格外有效.為實現多種模態(tài)數據的綜合檢索,該文突破傳統的文本標注方法,提出了一種多媒體對象的索引方法——交叉參照索引方法.在該方法中,多媒體對象的索引就是一組與該多媒體對象語義相關的多媒體對象.同時,提出了一種全新的多模態(tài)檢索機制,在檢索和相關反饋中結合交叉參照索引與底層特征,實現對多模態(tài)數據的統一處理;另外,還提出了能夠有效提高檢索系統的短期和長期性能的一種交叉參照索引的自動更新算法.針對數字圖書館等異構信

4、息知識庫的特點,該文提出和實現了一個面向多媒體文檔的多通道(對應如文本、圖像、視頻等的多種模態(tài))檢索系統;定義了一個新的用來描述多媒體文檔內容的框架,該框架不但提取出多媒體文檔在各通道下的基于內容的底層特征,而且還記錄下多媒體文檔中不同多媒體對象間的鏈接關系;同時,提出了一種基于圖模型的交叉參照知識庫,用來存儲從鏈接關系中挖掘出的多媒體對象間的語義關系,通過一個有效的語義上下文分析算法,在檢索過程中計算每個對象與查詢的語義相似度.語義上