现代社会符号学认为除语言之外，任何可以表意的手段都是意义的符号资源，包括图像、声音、手势、面部表情等。事实上，在现实社会生活中，人们的交流大多是多种符号资源共同作用的结果，即多模态的交流方式。随着社会科技的进步和多媒体技术的发展，多模态交流方式呈现出普遍性和多样性的特征，并成为人们生活工作的一部分。作为系统功能语言学的创始人，韩礼德的诸多理论和思想都推动了现代社会符号学的发展，如“语言是社会符号”、语言的三大元功能等。其中他概括的语言的三大纯理功能：概念功能、人际功能和组篇功能为多模态语篇分析提供了理论框架。Kress& Van Leeuwen(1996)在韩礼德的理论基础上提出了适用于图像分析的“视觉语法”，提出图像如同语言一样，具有再现社会事实，表达人际关系以及自我组篇连贯的功能。本文将以韩礼德的系统功能语法和Kress& Van Leeuwen的视觉分析语法为理论基础，分析多模态语篇如何表达人际意义，构建社会关系的。本文所选的语料为2010年上海世博会的一个宣传片，主要讲述上海世博会的选址、规模、参与国家、场馆建设及各项准备工作，涵盖语言、影像、颜色、音乐、说明文字等多种视觉和听觉的符号资源，为一个典型的多模态语篇。本文将重点分析语言符号和影像符号的人际意义系统，他们之间复杂的关系以及各种意义符号之间如何互动共同构建整体的意义的。作为一个尝试性研究，本文试图解释系统功能语法在多模态语篇分析中的实用性和可操作性。另一方面，希望本文的探索能够丰富多模态领域的研究以及增强人们的多模态识读能力。
展开▼
