动态多模态话语的模态协同研讨——以汉语电视天气预报多模态语篇为例.pdfVIP

动态多模态话语的模态协同研究 ——以汉语电视天气预报多模态语篇为例 摘要 随着现代技术的发展，人们使用的交际模态和交际媒体发生了很大变化。人 类交际不再是语言独尊的局面，而是由多种模态来共同完成的，包括空间、手势、 凝视、身势、移动、音乐、三维事物、口语、书面语、图像、图表等(Baldry＆ 用语言、图像、声音、动作等多种符号资源进行交际的现象就是多模态话语(张 德禄，2009a：24)。 近二十年来，国内外许多学者一直密切关注多模态话语分析研究，他们从语 言学领域或者语言学之外的其它很多领域对其进行研究。但是，在众多语言学学 派的研究方法中，由韩礼德所创立的系统功能语言学所提出的‘社会符号’视角 成为主流的研究方法。但是目前多模态话语研究还处于初级阶段，在中国更是如 此。大多数的多模态话语研究主要是以Kress和vanLeeuwen的视觉语法为理论 依据，集中对二维静态多模态语篇进行研究，例如对图画，图形，图表的研究等 等。只有极少数的研究是关于动态多模态语篇或者三维静态语篇的，例如对课堂 教学，电影，建筑的研究等等。 Van 国内对多模态话语中的不同模态间关系的研究越来越多，但是这些研究仍然存在 一些缺陷，缺乏完整性和系统性。大多数的研究集中在对静态多模态话语中模态 间的关系的研究上，而对于动态多模态话语中模态间的关系的研究却很少。所以， 对动态多模态话语中模态间的协同研究对于多模态话语分析研究的理论，框架和 研究方法的完善和发展来说，都有着重要的意义。 汉语电视天气预报是一种典型的动态多模态话语。然而，无论是从语言学的 研究角度还是从多模态话语分析的研究角度，目前还没有关于汉语电视天气预报 的研究。当然，也没有关于汉语电视天气预报多模态话语的模态协同研究和适用 于这类动态多模态话语的系统的理论框架的研究。 所以，本文关于汉语电视天气预报语篇类型的动态多模态话语的模态协同研 究具有重要的意义。它能完善和发展多模态话语分析研究的理论框架和研究方法 并且填补多模态话语分析研究在此领域的空白。 研究图画与语言形成的多模态话语时提供的综合性多符号模式框架，提出了由文 化层面、语境层面、内容层面和表达层面四个层面组成的多模态话语分析综合理 论框架。为了便于分析电视天气预报语篇，我们参照这个综合理论框架，设计出 了动态多模态话语分析框架。并且，我们在互联网上搜集了28篇CCTVl晚间 电视天气预报的视频作为研究的语料。此外，我们还基于张德禄(2010c)提出 的对录像等动态多模态语篇进行切分三个标准：(1)语篇结构(2)经验意义(3) 前景化的事物和特征探讨了视频录像等动态多模态话语的转写方法。通过这种切 分方法可以把动态多模态语篇切分成不同层次的分析单位：‘阶段’、“睛节’和 ‘事件’。为了便于研究电视天气预报多模态话语体裁的语言典型符号分布特征 和语料库中不同类型的模态协同关系的研究，‘事件’被定义为最小的动态多模 态话语分析的意义单位。 本文基于已经探讨的动态多模态话语分析框架和研究方法对28篇CCTVl 晚间电视天气预报进行多模态话语分析从而可以发现电视天气预报多模态话语 中的模态协同关系和不同模态之间的配合和协同的基本原则。这项研究可以分为 两个阶段，第一阶段分析是第二阶段分析的基础，同时后者有效地弥补了前者的 不足。 在第一阶段，本文采取定量研究和定性研究相结合的研究方法，对已经被以 ‘事件’为最小意义单位的进行转写的28篇CCTVl晚间电视天气预报动态多 模态语篇进行多模态话语分析，旨在探明该体裁中的典型符号分布特征和不同模 态间的协同关系的分布特征。 在第二阶段，本文基于第一阶段的研究结果，在动态多模态话语分析理论框 架内，探讨在电视天气预报多模态话语中的模态协同规律和原则，即不同的模态 是怎样相互作用、相互配合来实现话语意义和它为什么会是这样。 根据这两个阶段的分析，本研究得出以下结论： 第一、在电视天气预报多模态话语中，因需在不同的阶段实现不同的交际目 标而选择各类不同的交际模态。在不同的交际阶段为实现不同的交际目标而采用 的不同多模态话语交际模式可以分为三种类型：提示开始结束型、提供信息型和 求取注意型。其中提示开始结束型又包括提示开始型和提示结束型；提供信息型 包括导入型、提供进行中转入提供暂停型和提供进行中转入提供结束型。 第二、通过探讨听觉模态和视觉模态之间的