视听整合加工及其神经机制.pdfVIP

心理科学进展 2011, Vol. 19, No. 7, 976–982 Advances in Psychological Science DOI: 10.3724/SP.J.1042.2011.00976 视听整合加工及其神经机制 1 1 2 文小辉 李国强 刘 强 (1 湖南人文科技学院教育科学系, 湖南娄底 417000) (2 西南大学心理学院, 重庆 400715) 摘 要 通常人们接收到来自不同感觉通道的信息时, 首先在大脑中各个分离的区域单独进行加工处理, 而 后在多感官区进行整合。前人关于言语感知中视听整合加工的神经成像研究认为, 视觉和听觉信息能够相互 影响; 两者进行整合的关键区域是人脑左后侧的颞上沟, 其整合效应受时间和空间因素的限制。未来的研究应 致力于建立更加合理的实验范式和数据分析方法来探讨整合加工的脑区机制, 把多感官整合研究进一步延伸 到更加复杂的领域。 关键词 视听整合; 颞上沟; 时间; 空间 分类号 B842 1 前言 MacDonald, 1976) ：在看说话者说“ga” 的同时听到 “ba” 的发音, 则我们感知到的可能是另一个音节 日常生活中, 大多数事件都同时传递着多种 “da” 。考察视听言语整合的神经机制的研究 信息, 这些信息被大脑通过不同的感官通道加以 登记, 例如, 一列火车从我们身边驶过时, 不仅 (Calvert, Brammer, Bullmore, Campbell, Iversen, 传递视觉、听觉信息, 而且通过带动空气运动传 1997, 1999; Calvert, Campbell, Brammer, 2000; 递皮肤触觉信息。人们在对复杂的外部环境进行 Calvert, 2001; Alsius, Navarra, Campbell, Soto- 感知时, 各种感觉器官都接收到大量的信息, 包 Faraco, 2005; Ryan Thomas, 2009; Jordi, Agnes, 括视觉、听觉、嗅觉、触觉信息等。虽然人们接 Ignacio, Salvado, Charles, 2010; Ingo, Susanne, 收到的是不同信息源从不同的感觉通道输入的信 Hermann, 2010)则认为, 在视觉和听觉言语信 息, 但是并没有将世界知觉为支离破碎的各种形 息的整合过程中, 起关键作用的主要脑区是人脑 状、颜色、方向、距离、声音、气味和材质。这 左后侧的颞上沟, 该区还能通过反馈投射调整特 种将同一感官通道内的不同线索和信息、不同通 定通道皮层区的活动。近年来, 研究者们开始关 道的感觉信息有效地合并为统一、连贯、强健的 注字母和语音整合的神经机制(Raij, Uutela, 知觉的过程, 被称作多种感官通道信息的知觉整 Hari, 2000; van Atteveldt, Formisano, Goebel, 合, 简称多感官整合(Ernst, 2004; 文小辉, 刘强, Blomert, 2004; van Atteveldt, Formisano, 孙弘进, 张庆林, 尹秦清