視覺媒體情感建模研究.pdf

1、視覺媒體包含了豐富的信息，在人們的生活與工作中起到了重要的作用，并對人們的生理和心理產(chǎn)生了影響。因此，對視覺媒體與用戶情緒反應之間的分析和建模研究，己成為目前心理學、生理學和計算機科學等多學科交叉的一個重要研究方向。
　　 本文旨在建立一個綜合視覺媒體的物理空間、用戶情感心理空間和生理空間三個空間的混合模型，具體內(nèi)容包括以下三個方面。
　　 (1)分析了基于國際標準音頻庫IADS和國際標準圖像庫IAPS的情感內(nèi)容。本文首

2、先對IADS進行了多種分類方法的分析比較，并在可行性和效果方面得到了一些可供參考的結(jié)論。而對于IAPS，除了對它進行多種分類方法的分析比較外，還對其進行情感維度的規(guī)則挖掘，得到一些可供參考的情感維度規(guī)則。這部分工作主要涉及到圖像和音頻的物理空間與用戶情感維度空間之間的研究。
　　 (2)提出了融合心理、生理的視頻情感內(nèi)容分析模型。首先項目組建立了一個情感視頻刺激庫。在進行實驗時，在視頻刺激庫中選取一部分來誘發(fā)被測試人員的情感反應

3、，在被測試人員對視頻內(nèi)容進行評估的同時，記錄下相應的腦電信號，最后構(gòu)建一個綜合視頻，腦電和情感評價的三個空間數(shù)據(jù)庫。在此基礎(chǔ)上，本文首先分別對視頻-情感心理，腦電-情感心理建立單向的映射模型；然后再對視頻-腦電進行雙向的建模研究；最后對情感維度進行聚類分析，得出情感維度和情感類別之間的關(guān)系。這部分的建模工作包括了視頻的物理空間、用戶情感的生理空間、以及兩種用戶情感的心理空間，初步建立了橫跨這三個空間的視頻情感模型。
　　 (3)