动态多模态语篇的模态间协同作用研究——以央视公益广告《关爱失智老人》为例

摘要

随着计算机技术和多媒体科技的运用，人类已经进入了快速普及且缤纷的多维数字信息时代。语篇已脱离了传统单一书面、口语的形式,发展成由图片、文字、声音等多种模态系统共存的多模态语篇。作为一个全新的研究视角,多模态语篇研究得到了越来越广泛的关注。其中,大多数的多模态语篇研究主要是以 Kress & van Leeuwen(2006)的视觉语法为理论依据，集中对静态多模态语篇进行研究；部分针对动态多模态语篇研究课堂、电影中的模态关系。
　　本文以Halliday(2004)的系统功能语法为基础，结合Kress & van Leeuwen(2006)的视觉语法，研究公益广告中的模态在概念功能，人际功能和语篇功能三方面的协同作用。本研究选择央视公益广告《关爱失智老人》为研究对象，使用音频剪辑软件 Adobe Audition CS6转换音频文本，Edius6非线性编辑软件来制作视频，并截取了广告中16个镜头进行分析。
　　通过分析，本文发现：在概念功能上，文字和视觉模态主要通过互补性关系直观地反映了参与者和观看者之间的互动关系，将失智老人孤独的内心世界给观看者留下深刻的印象，揭示了观看者普遍的感情和想法，呼吁全社会的人孝敬老人，关爱失智老人；而非互补性关系反映了参与者之间的互动关系，通过交叠和蕴含的方式将失智老人常有的行为表现展现给观看者。
　　在人际功能上，文字和视觉模态之间的协同作用完全是互补加强的关系。文字模态中的语态和人际体系展现了观看者和参与者之间的距离，让观看者参与到儿子和父亲的故事中，真切的体会到父亲对儿子浓浓的爱。视觉模态使用高情态展现图像真实性，使参与者和观看者之间建立亲密的关系，观看者自然地融入在参与者的世界里。
　　在语篇功能上，听觉模态中声调的重音突出和视觉模态中元素位置的大小存在互补和非互补关系。其中信息最高值凸显了公益广告中边缘元素的弱势地位，从而唤起观看者对失智老人怜悯与同情之心。
　　本文的研究说明，动态多模态公益广告中的模态协同是向观众呈现有真实性、有感染力世界的重要手段。