多模態(tài)的和諧樂章：語言與圖像的協(xié)同研究.pdf

1、本文旨在探究語言和圖像的協(xié)同關(guān)系，并深入剖析多模態(tài)話語中為實(shí)現(xiàn)語言符號及圖像符號的有機(jī)結(jié)合而采取的策略。本文搜集及探討的多模態(tài)話語材料特指圖文并茂的圖像文本，以韓禮德的元功能理論、克瑞斯和勒文社會符號學(xué)框架下的視覺交流理論為基礎(chǔ)，從圖像文本的元功能意義和構(gòu)圖意義這兩個方面進(jìn)行多模態(tài)話語分析。筆者認(rèn)為，協(xié)同關(guān)系不是圖文的簡單疊加，而是當(dāng)這兩種模態(tài)出現(xiàn)時，它們在實(shí)現(xiàn)總體意義上相互配合、協(xié)同，形成圖文并茂的組合，達(dá)到和諧的美學(xué)效果。這樣的圖文

2、設(shè)計者，正如一位音樂家運(yùn)用不同的器樂譜寫出絕妙的交響曲，而圖像符號和語言符號正如兩種不同的樂器。不同的樂器合奏產(chǎn)生了和諧的旋律，而圖文的協(xié)調(diào)，則使圖和文各自的表現(xiàn)力和功能都有所增強(qiáng)。本文除了運(yùn)用多模態(tài)話語分析來展現(xiàn)圖文的協(xié)同關(guān)系，同時也解讀了不同圖像文本構(gòu)成的意義。研究的意義在于，進(jìn)入圖像時代以后，人們的交流方式充斥著語言、色彩、布圖設(shè)計、三維物體、排版、聲音以及圖像等多模態(tài)的交織,人們使用多元的模態(tài)符號進(jìn)行交流，交際時的意義產(chǎn)生不僅僅