多模态语篇分析.pptVIP

多模态语篇分析 当今，人们在交际过程中经常同时使用多种符号工具来表达意义或创造信息。多模态（multimodality）也称多符号（multi-semiotic），指包括口语、书面语、图像、图表、空间以及其他可以用来构建意义的各种符号资源。随着现代技术的发展，人们使用的交际模态和交际媒体都发生了很大的变化。多模态话语冲击了传统上文字在交际领域中的中心地位。在许多情况下，语言与其它符号资源各有所长，一起构建意义。各种模态以整合的整体共同为交际服务。 如今，我们生活在一个多模态的社会，使用各种符号资源来完成意义表征和交际。正如Kress（2001: 68）所提到的，在教材、报纸、机构报告、电子媒介、网络等，图像正替代语言成为主要的意义构建资源，或者与语言平分秋色。在“视觉文化”的影响下，意义的构建往往通过文化处所或实体来体现，视听动态图像逐渐取代文本来传递信息。 人们通常认为现代符号学研究始于Saussure和Peirce。Saussure（1916）认为符号学属于社会心理学，主要研究符号的构成及其支配规律。他认为语言学是符号学的一个组成部分。符号包括能指和所指两方面组成。符号同符号之间的区别构成符号系统，用于实现交际目的。Peirce（1958）则认为符号由三方面组成：表征、对象和解释。他重点区分了三种符号：图像符号、指示符号和象征符号。 受Saussure和Peirce的影响，主要的符号学研究都在寻求能够适用于所有符号的理论框架。根据Hervey（1982）的观察，Morris将符号学分为研究符号与存在之间关系的语义学，符号与人的创造性使用的语用学以及符号与符号之间关系的语形学。Barthes把符号视作一种社会文化意识形态，将符号学的研究范围扩展到整个社会，包括文学、语言、图片、电影、烹饪和衣着等。学者们应用符号学的理论对交通信号系统、罗马数字系统、语表意文字、文学作品、电影、广告作了分析。 近年来的多模态研究主要有四种视角：交互社会学的视角、认知的视角、语体学的视角和功能符号学视角。从交互社会学的视角，学者应用交互社会学理论研究即席话语和公共场所中的多模态，关注人们如何在交际时采用不同模态构建他们所处的情景和身份。其出发点不是语篇而是人们的行为，主要代表人物有Scollon和Norris等。 从认知的视角，学者们关心的是概念化理论如何指导交际者选择不同的模态或模态组合进行连贯的交际。他们侧重研究理想的认知模式中源和目标如何同时以一种以上的模态表征。其主要代表人物有Forceville和Holsanova等人，其主要代表作品有Pictorial Metaphor in Advertising（Forceville 1996）等。此外，St?ckl（2004）也做了相关的研究，认为不同模态在符号属性、认知取向和语义潜势上体现出区别性特征。 符号属性指模态的内在结构和使用者惯常使用该模态构建意义的方式。图像对世界的表征手段是象似性，是对现实世界的直接模拟，而语言则是象征性的。 语言是线性结构，在认知取向上要求把线性的符号组织成短语，短语组织成句子等。图像则基于整体的完形感知（gestalt-perception）。因此，与语言相比，图像是更快捷的意义构建模式。心理学实验表明，图像比语言更容易吸引读者的注意力，更容易记忆。 语体学视角关注的语体特征与多模态的关系。Lanham（1983；2003）注意到受计算机技术的影响，“散文”的概念已发生了变化：从书面到电子、从静态到动态、从无声到有声等。他认为散文分析应该包括传统的书面散文和现代的多媒体散文，并指出计算机给文本写作提供了动态的三维空间。因此，我们需要一种描写这种三维文本的语法，特别是描写文字同声音和图像的关系。 线性阅读和图像式阅读相辅相成，互为补充。 功能符号学的视角运用系统功能语言学理论，分析包括语言之内不同模态的意义构建模式。在多模态话语的研究上，这一视角的研究成果最多，成为多模态研究的主要力量。其代表人物包括Kress，van Leeuwen，O’Toole，Lemke，O’Halloran，Baldry，Thibault，Bateman和Martinec等。功能符号学的多模态分析理论基础主要来自Halliday（1978）的语言是社会符号的观点。 早期的功能符号学多模态研究关注用Halliday的系统功能语法来分析语言之外的某种模态，如O’Toole（1994）对油画、建筑和雕塑的分析，Kress van Leeuwen对图像的分析。20世纪90年代末以来，系统功能符号学者开始关注多模态话语中模态间的分工与整合。 O’Halloran（2007; 2008）称之为系统功能的多模态话语分析（Systemic Functional Multimoda