幽默的多模态-Core.PDFVIP

北京科技大学学报（社会科学版） 2012年12月 Dec.2012 第28卷第4期 （SocialSciencesEdition） Vol.28 No.4 幽默的多模态 李 力 （厦门大学 外文学院，福建厦门 361005） 〔摘要〕 幽默在语义生产和理解过程中最能体现意义的细微差异，在语类系统中占据独特的位置。 幽默语类特征 的独特性需要语言学家进行细致的描写，而多模态则为幽默提供了精密的语义描写工具。 早期的多模态工具较为原始， [1] 以图像语法 为标志，主要以平面文本中的构图与文字间的关系论证为主，探讨语义提供方的设计与消费理解方的解 读。 而近期的多模态研究则较多地关注语义生成中动态的多模态表征，这与近期人们对语义概念理解的深入有关，认为 表义是个动态的过程。 本文提到的多模态限定为人们心目中的意义生成手段，由视觉语法表述。 视觉语法包括语言结构 [2] 方式、形式美法则和符号语义关系 。 视觉语法一方面将图像意义视为客观的活动过程，可分为再现、互动和构图；另一 方面又融入了主体认知的成分。 本文拟通过幽默的多模态分析说明视觉语法的解释力，这种心灵所识与肉眼所见不同， 势必超越以往将动漫以及色彩作为多模态研究的唯一标的的局限。 〔关键词〕 视觉语法；幽默；多模态；解释力 〔中图分类号〕 〔文献标识码〕 〔文章编号〕 （ ） H0 A 1008-2689 2012 04-0052-08 过程。释义与认知过程互为因果。在对幽默效果的分 析中，我们似乎可以了解到释义过程中语义冲突中的 一、引言 参与项。这些参数有助于我们破解语言与认知过程的 关系。 早期的多模态研究多以KressLeeuwen90年代 [3] 述性的，缺乏阐释理据 。但问题的实质是描述性研究 中期的视觉语法为标志。而进入21世纪，多模态的概 在解释力方面与动态语义模式的差异。 念有了许多新的变化，这些创新可以新加坡的多模态 如何避免从书本到书本的研究有赖于我们进行 研究中心的研究作为一个标记。在后KressLeeuwen 独立的思考。多模式研究倾向于社会符号学分析，尤 时代，多模态的动态表意功能得到了人们更多的关 其在视觉模式方面，“正如语言的语法决定词如何组 注。这是因为，表意涉及许多动态因素，比如分场，阶 成小句、句子和语篇，视觉语法将描写所描绘的人物、 段性。动态表意触及多模态的核心问题，即多模态的 地点和事物如何组成具有不同复杂程度的视觉 ‘陈 设计，尤指在表达意义涉及事件中，关系的编织与设 [1][4] 述’” 。这种研究路向并非唯一，还有以认知入手探 计。动态的意义制作过程对传统视觉表意观提出了挑 讨多模态的方法。由此，多模态研究大致上分为两个 战。多模态研究若想摆脱人们对其表面的认识，不局 阵营：一方以认知语法为工具；而另一方以功能语法 限于声光、色彩、视觉、环境和媒体这些外在的形式， 为手段。本文认为，在承认系统选择的前提下，也不可 必须深刻探讨其本质问题。本文提出，多模态外在的 忽视认知的价值