论文摘要
人通过不同的感受器官接受外界信息,大脑整合来自不同感官的信息提高获取信息的准确性和完整性。目前的研究结果表明不同感觉器官获取到的信息存在相互影响。视觉和听觉作为人获取外部信息的主要通道,同样存在着相互影响。本文的研究目的探索视觉空间变化的刺激对听觉响度的判断影响。研究了61名受试者在空间变化的视觉刺激与响度相同的听觉刺激下的行为学反应和相应的电生理数据。行为学结果表明视觉空间变化的刺激可以影响听觉响度判断,并且刺激时间间隔对这种现象有显著影响。视听交互作用下的事件相关电位（Event-related potential, ERP）信号与单独视觉或者听觉刺激下ERP信号的差异波存在ND190和ND210特征峰。170ms刺激间隔下第二次刺激后P50特征峰峰值显著大于680ms刺激间隔下的特征峰。电生理数据的分析结果提供了这种现象的神经生理机制。本文的研究方法和结果对进一步研究多感官相互作用有理论参考意义。本课题在以往视觉和听觉相互作用的基础上,研究了视觉空间变化刺激对声音响度判断的影响,创新之处有以下三个方面:首先将视听相互作用的研究范围扩展到听觉的响度域,研究视觉空间刺激与听觉响度刺激相互作用下的行为学反应。以往关于视觉与听觉相互作用的集中在频率域和时间域视觉与听觉的相互作用。本文首次设计了空间视觉变化对声音响度判断影响的实验模式,将实验范围扩展到了声音响度域。在实验中使用大小变化的圆形作为视觉刺激,响度不变的声音刺激,记录受试者对不同刺激模式的行为学反应。其次,将比较受试者双通道刺激下ERP与单通道刺激下ERP差异波的实验方法引入本实验,分析了电生理数据。之前的文献表明,计算视觉与听觉同时作用下的ERP与视觉或听觉单独作用下的ERP的差异波,当听觉刺激诱发视觉幻觉时,在视皮层可以看到由听觉刺激诱发的,与出现真实视觉刺激相同的诱发电位。本课题在分析ERP数据的过程中,将这种原理创新性地应用到视觉空间刺激与听觉响度刺激相互作用的实验中。计算了视觉听觉同时作用时的ERP与单独视觉听觉作用时的ERP差异波,并且分析了当受试者产生由视觉刺激诱发的听觉幻觉时的听觉皮层和中央皮层的ERP差异波及其特征峰,探索了视觉刺激诱发听觉幻觉的神经生理机制。最后,本文将刺激时间间隔的影响引入对视觉空间刺激和听觉响度刺激作用的实验中。研究了不同刺激间隔对视觉听觉交互作用的影响受试者的行为学特征,进一步研究这种视听相互作用下的脑电信号以及刺激时间间隔对相互作用的影响电生理基础。