运动感知中视听时间整合的内隐与外显加工：基于行为及神经活动特征的分析.pdfVIP

摘要

我们生活在充满运动信息的生活环境中，为了与周围环境进行良好有序的互

动，并对动态的复杂环境做出更快、更准确的反应，需要整合来自多个感觉通道

的信息。跨通道刺激的时间同步性是进行多感觉整合的一个关键因素。但在现实

情境中，声与光的物理传播速度以及视觉和听觉的神经传导速度之间都存在着天

然的差异，即使是来源于同一事件的视听信息刺激也很难完全同时到达我们的大

脑，个体需要通过视听时间整合来保持着知觉的适应性和连贯性。前人研究指出，

内隐的时间加工与外显的时间表征是不相同的。在运动感知中，内隐和外显视听

时间整合的行为和神经特征以及两者之间的关系仍不明确。因此本研究将在前人

研究基础上，在穿过-反弹两可运动知觉任务和网球运动任务中，结合一系列行

为指标和脑电技术，探讨内隐和外显视听时间整合的行为及神经活动特征，并分

析自下而上的刺激因素在其中的调节作用。

研究一（实验1）使用“穿过-反弹”两可运动知觉范式的轨迹判断任务（内

隐）结合同时判断任务（外显）的双任务范式，纳入速度和视听时间间隔（Stimulus

OnsetAsynchrony，以下简称SOA）自变量初步探究了内隐和外显时间整合的行

为特征。结果显示，产生最大视听诱发反弹效应（Audio-visualBounce-inducing

Effect，以下简称ABE）幅度（轨迹判断任务结果指标）的最佳时间点显著早于

实现最大同时知觉（同时判断任务结果指标）的时间点；在轨迹判断任务中，速

度对反弹知觉有显著影响；在同时判断任务中，快速条件下的主观同时性点显著

早于慢速条件。

研究二在研究一基础上继续探讨内隐与外显时间整合的神经特征，为了剥离

不同的神经过程，将轨迹判断任务（实验2）和同时判断任务（实验3）分开进

行，并选择了基于研究一结果的60ms（整合时间窗内的SOA）和300ms（整合

时间窗外的SOA）两个时间点进行研究。行为结果显示，实验2中先听后视条

件的ABE幅度显著高于先视后听条件，实验3中先听后视条件同时百分比显著

低于先视后听条件，SOA对ABE幅度和同时百分比都产生了显著影响，即随着

SOA增大，ABE幅度和同时百分比降低。ERP结果显示，两个实验中都显示了

产生视听交互作用的三个神经加工阶段（PD100、ND180和PD290），但在不同

的SOA条件下，整合发生的阶段不同。SOA的影响主要反映在PD100阶段，

即听觉诱发的多感觉N1成分。在V0A和V60A条件下，速度影响了内隐时

间加工的神经活动；而对于外显时间表征，速度影响了A300V、V0A、V60A和

V300A条件下的神经活动。对实验2和实验3的ERP结果进行对比分析发现，

在PD100和ND180阶段，无论速度和SOA如何，内隐任务的VAERPs平均

波幅显著更高。在PD290阶段，当SOA在TBW范围内时，外显任务则显示

出更高的加工水平，而当SOA在TBW范围之外时，不同任务的加工水平受到

运动速度的调节。

研究三纳入新的声音类型变量（碰撞声和非碰撞声），SOA选择基于研究一

结果的60ms、120ms和180ms（整合时间窗内的SOA），仍然使用研究二中相同

的任务范式继续探究了内隐（实验4）和外显（实验5）视听时间整合背后的大

脑节律变化。行为结果显示，实验4中，只有在碰撞声条件下产生了显著的ABE；

实验5中，碰撞声条件下的同时百分比显著高于非碰撞声。脑电结果显示，ERP

结果与研究二一致，并发现声音类型对跨通道加工的影响主要体现在PD290阶

段；theta频段的神经活动变化反映了内隐和外显的视听时间整合的同步动态加

工过程，A60V条件下内隐任务的加工水平显著更高，而V60A条件下外显任务

的加工水平显著更高。

研究四在网球运动中使用速度判断任务（内隐，实验6）和同时判断任务（外

显，实验7）进一步验证了在前期研究中发现的行为及神经活动特征。行为结果

显示，实验6中所有视听双通道条件下都产生了冗余效应，即视听双通道条件下

的反应时显著高于视觉和听觉单通道条件，并且，随着SOA的变大，正确率变

低，反应时变慢，内隐视听