（1）概念

話語分析理論（Discourse Analysis）最初由美國學者Harris 在20 世紀50 年代提出，其核心旨趣在于從語言符號系統(tǒng)的角度探討話語的內(nèi)涵與意義。這一理論為后續(xù)多模態(tài)話語（Multimodal Discourse）概念的提出奠定了堅實的基礎(chǔ)。

作為話語分析理論的前沿延伸，多模態(tài)話語研究突破了傳統(tǒng)語言學的界限，Kress 和 van Leeuwe 最早從社會符號學的角度對其進行定義，首次提出多模態(tài)話語的具體理論內(nèi)涵，即多模態(tài)話語是指運用語言、圖像、聲音、顏色和音樂等在內(nèi)的多種模態(tài)進行交際，語言與非語言資源在其中共同建構(gòu)話語的意義。

2009 年，中國海洋大學教授張德祿也對多模態(tài)話語的概念進行了闡釋，認為多模態(tài)話語是指運用聽覺、視覺、觸覺等多種感覺，通過語言、圖像、聲音、動作等多種手段和符號資源進行交際的現(xiàn)象。

（2）多模態(tài)話語分析理論框架

①在多模態(tài)話語分析的發(fā)展進程中，Halliday 是系統(tǒng)功能語言學框架的代表人物，他把語篇作為一個語義單位，將語義分為概念功能、人際功能、語篇功能這三大功能。但系統(tǒng)功能語言學的分析還較局限于對語篇的分析，缺少了對聲音、圖像、色彩等方面的關(guān)注。

②Kress 和 van Leeuwen 在 Halliday 系統(tǒng)功能語言學的基礎(chǔ)上，將對語言學領(lǐng)域的分析延伸到視覺模態(tài)中，提出了視覺圖像三層含義：再現(xiàn)意義、互動意義和構(gòu)圖意義。

再現(xiàn)意義涉及圖像如何代表或復(fù)現(xiàn)現(xiàn)實世界，這種意義的構(gòu)建依賴于圖像對現(xiàn)實世界的再現(xiàn)方式，包括現(xiàn)實主義、抽象化、象征主義等不同的表現(xiàn)形式；

互動意義關(guān)注圖像與觀眾之間的互動關(guān)系，包括圖像中的人物如何與觀眾建立眼神接觸、表情、姿態(tài)以及圖像中包含的任何指示性符號；

構(gòu)圖意義包括圖像中的視覺元素如何排列布局，如何通過視覺流程和視覺層次來引導(dǎo)觀眾的視線。該理論為研究視覺圖像的意義表達提供了有效途徑，這也是本文主要依托的理論概念之一。

③學者張德祿則對多模態(tài)話語分析框架進行了開創(chuàng)性的拓展延伸，該框架主要由四個核心層面的概念范疇組成：一是文化層面；二是語境層面；三是內(nèi)容層面；四是表達層面，其中內(nèi)容層面又可劃分為意義和形式兩個維度。這一綜合理論框架在視覺語法的基礎(chǔ)上，增加了對于話語文化和語境背景的分析，使多模態(tài)話語分析框架更加全面，尤其在模態(tài)關(guān)系方面，具備一定的創(chuàng)新性，因而被國內(nèi)研究者們廣泛地采用。

新聞傳播學專業(yè)公眾號

微信號 : media-power

▇ 新傳考研智庫 洞察社會脈動