英语多媒体视频阅听过程中知觉负载和选择性注意.docVIP

英语多媒体视频阅听过程中知觉负载和选择性注意 　　摘要：多媒体视频中字幕方式对外语学习的作用机制得到了越来越多关注。本文在Mayer的多媒体学习理论和Lavie的知觉负载理论的基础上，通过实验进一步探讨了在视频阅听过程中字幕的多寡（无字幕、关键词字幕和全字幕）是否因加工任务差异而影响学习者视觉通道中有限的注意力资源的分配，进而影响阅听理解的预期效果。 关键词：注意力分配；多媒体；字幕；视频理解 中图分类号：H319.3 文献标识码：A 文章编号：1001-5795（2013）05-0057-0008 在母语学习环境中，学习者的听觉语言处理能力往往强于其视觉语言处理能力，表现为听力理解能力强于阅读理解能力，所以，带字幕视频节目主要用于低龄学童进行阅读训练以及对成人进行扫盲教育等活动（Goldman，1993，转引自戴劲，2005）。但是，在外语学习环境中，学习者的听觉语言处理能力通常都低于其视觉语言处理能力，表现为听力理解能力不及阅读理解能力强（Lund，1991，转引自戴劲，2005），字幕通常用于对听觉语言处理能力不足的补救。但是这种补救机制十分复杂，因为带字幕多媒体视频的阅听理解与阅听材料本身的组织形状、学习者的认知策略和知识技能、认知加工任务的目的要求以及他们之间的交互关系均有密切关联。以往的字幕效用研究关注字幕对视频理解的总体效应或单一任务操作的绩效影响，但或多或少忽略了对加工过程的探讨。在具体的“阅听”加工过程中，字幕的功效其实往往取决于阅听者的知觉负载水平和选择性注意。 1 理论基础与相关研究 1.1 理论基础 工作记忆（working memory，WM）是指在执行任务过程中，用于信息暂时存储和加工的资源有限系统（Baddley，1992：556-559），选择性注意则是对外界丰富的信息进行筛选以确保有限的认知资源得以高效运行的认知系统（Downing，2000：467-473）。较之于单一的线性文本阅读和时序性话语听解，多媒体阅听理解需要耗用更多的注意资源。静态画面、动态视频以及语言信息（包括听觉和视觉）的知觉加工大致对应于Baddeley（2000：417-423）的工作记忆模型中的视空暂存（visuospatial sketchpad）情境缓冲区（Episodic Buffer）和语音回路（phonological loop）三个缓存区（图1），但三者对注意资源的占用并非是“均衡负载”的。LaVie（1995；2004）根据对工作记忆的研究，提出了知觉负载理论，认为知觉是资源有限的加工过程，当前任务知觉负载的高低决定了选择性注意过程中的资源分配。如果当前任务的知觉负载较高，有限的注意资源被消耗尽，那么与当前任务无关的其他客体或信息无法得到知觉加工，从而不会产生干扰效应。如果当前任务的知觉负载低，目标刺激没有耗尽当前的注意资源，那么多余的资源就要自动溢出，加工无关干扰刺激；观察者无法抑制剩余资源的溢出（魏萍，2005：413-420）。Lavie的理论被认为是解决了心理学上前选择和后选择的一个争端。但Johnson等人的研究进一步揭示：影响选择性注意的根本因素是资源有限性，当前任务的负载水平直接影响注意资源的分配。 认知负荷由反映任务与学习者特征之间交互的原因维度和反映心理负荷、心理努力和绩效等可测性概念的评估维度所组成。为了促进有效学习的发生，教学过程中应通过合理的选材控制内部认知负荷，通过有效的教学设计减少外部认知负荷，增加关联认知负荷，并且使总的认知负荷不超出学习者能承受的水平。 Mayer（2001）基于双重编码理论提出了多媒体认知学习理论的三个假设：双通道假设（视觉通道和听觉通道）、容量有限假设（每个通道的加工容量是有限的）和积极学习假设。在多媒体学习过程中学习者加工来自于两个通道的信息，有限的加工容量只允许部分文字和图片信息能被学习者注意到，进入工作记忆，并由学习者对其进行积极加工，构建成连贯的结构，并与先前知识整合，才能产生有意义的学习。 以上理论都从不同角度揭示了工作记忆中多模态信息的认知加工机制。其共同之处是他们都涉及了知觉过程的注意资源分配问题，只是侧重各有不同。 与单通道线性文本阅读或时序性话语听解相比，多媒体认知学习是对线性文本、视频、语音、图画等离散性视觉信息和时序性听觉信息的多模态加工过程。以原声视频语料为学习材料的视听训练中，中国学生无论在视觉语言处理能力（字幕的快速阅读）还是听觉语言处理能力（实时的语音听解）方面都明显存在不足，尤其是听力理解水平大都不如阅读理解水平。未经教学处理的原版多媒体视频阅听大多属于高知觉负载的认知加工，处于同一加工通道的不同信息会构成阅听者注意资源的竞争。视频字幕在语言学习中之所以具