德尔塔频段皮质语音跟踪预测视听语音在噪音中受益于自然和简化的视觉线索
Enrico Varano1, Mike Thornton2, Dorothea Kolossa3
1Linguistic Research Infrastructure, University of Zurich, Andreasstrasse 15, 8050 Zürich, Switzerland.
NeuroImage
|December 18, 2025
概括
看到面部动作显著改善了在噪音中理解语音. 自然的面部暗示,而不是简化的,增强听觉处理和理解,强调详细的视觉语音信号的重要性.
科学领域:
- 神经科学是一个神经科学.
- 听力学 听力学是指听力学.
- 语音感知 语音感知
背景情况:
- 视听 (AV) 语音可以在杂的环境中提高理解力.
- 对AV语音益处的特定视觉特征和神经机制尚未完全理解.
研究的目的:
- 调查简化面部信号如何影响AV语音在噪音中的理解.
- 通过使用简化视觉线索来检查AV语音处理的神经机制.
- 确定面部细节和动态在AV语音感知中的作用.
主要方法:
- 行为实验:参与者在观看自然或简化的面部视频 (轮,振荡盘) 时,在噪音中听到语音.
- 脑电图实验:通过在连续AV语音中使用简化的视觉信号,评估语音包的皮质跟踪.
- 在delta (1-4 Hz) 和theta频段分析时间响应函数 (TRFs).
主要成果:
- 随着视觉面部细节的增加,行为理解得到了改善.
- 一个简单的振荡盘 (几何模拟) 没有提供AV的好处,强调动态线索.
- 自然面部视频增强了三角波段TRF (高达180毫秒),与行为益处相关.
- 泰达波段效应不那么一致,这表明它在AV集成中的作用有限.
结论:
- 面部细节对于视听语言感知至关重要.
- 自然视觉语音输入驱动增强的三角带神经跟踪,可能与视觉线索对准听觉处理.
- 动态的面部运动对于在杂的环境中获得视觉语言的好处至关重要.


