视觉刺激对听觉响度判断影响的的研究.pdfVIP

视觉刺激对听觉响度判断影响的研究                                                                                                                               摘要                                         视觉刺激对听觉响度判断影响的研究 摘要 人通过不同的感受器官接受外界信息，大脑整合来自不同感官的 信息提高获取信息的准确性和完整性。目前的研究结果表明不同感觉 器官获取到的信息存在相互影响。视觉和听觉作为人获取外部信息的 主要通道，同样存在着相互影响。 本文的研究目的探索视觉空间变化的刺激对听觉响度的判断影 响。研究了 61 名受试者在空间变化的视觉刺激与响度相同的听觉刺 激下的行为学反应和相应的电生理数据。行为学结果表明视觉空间变 化的刺激可以影响听觉响度判断，并且刺激时间间隔对这种现象有显 著影响。视听交互作用下的事件相关电位(Event-related potential, ERP) 信号与单独视觉或者听觉刺激下 ERP 信号的差异波存在 ND190 和 ND210 特征峰。170ms 刺激间隔下第二次刺激后 P50 特征峰峰值显著 大于 680ms 刺激间隔下的特征峰。电生理数据的分析结果提供了这种 现象的神经生理机制。本文的研究方法和结果对进一步研究多感官相 互作用有理论参考意义。 本课题在以往视觉和听觉相互作用的基础上，研究了视觉空间变 化刺激对声音响度判断的影响，创新之处有以下三个方面： 首先将视听相互作用的研究范围扩展到听觉的响度域，研究视觉 空间刺激与听觉响度刺激相互作用下的行为学反应。以往关于视觉与 听觉相互作用的集中在频率域和时间域视觉与听觉的相互作用。本文 首次设计了空间视觉变化对声音响度判断影响的实验模式，将实验范 围扩展到了声音响度域。在实验中使用大小变化的圆形作为视觉刺 1    视觉刺激对听觉响度判断影响的研究                                                                                                                               摘要                                         激，响度不变的声音刺激，记录受试者对不同刺激模式的行为学反 应。 其次，将比较受试者双通道刺激下 ERP 与单通道刺激下 ERP 差 异波的实验方法引入本实验，分析了电生理数据。之前的文献表明， 计算视觉与听觉同时作用下的 ERP 与视觉或听觉单独作用下的 ERP 的差异波，当听觉刺激诱发视觉幻觉时，在视皮层可以看到由听觉刺 激诱发的，与出现真实视觉刺激相同的诱发电位。本课题在分析 ERP 数据的过程中，将这种原理创新性地应用到视觉空间刺激与听觉响度 刺激相互作用的实验中。计算了视觉听觉同时作用时的 ERP 与单独 视觉听觉作用时的 ERP 差异波，并且分析了当受试者产生由视觉刺 激诱发的听觉幻觉时的听觉皮层和中央皮层的 ERP 差异波及其特征 峰，探索了视觉刺激诱发听觉幻觉的神经生理机制。 最后，本文将刺激时间间隔的影响引入对视觉空间刺激和听觉响 度刺激作用的实验中。研究了不同刺激间隔对视觉听觉交互作用的影 响受试者的行为学特征，进一步研究这种视听相互作用下的脑电信号 以及刺激时间间隔对相互作用的影响电生理基础。 关键词： 跨模式，幻觉，视觉空间分辨，听觉响度分辨，刺激间隔 2    视觉刺激对听觉响度判断影响的研究                                                                                                                      ABSTRACT                                        The analysis following resized visual stimuli influence on