看到一个说话的面孔很重要:眼神行为和听觉视觉语音在成年人皮质跟踪婴儿指导的语音中的好处

科学领域:

• 神经科学是一个神经科学.
• 语音感知 语音感知
• 心理语言学 心理语言学

背景情况:

• 听觉视觉 (AV) 语音效益增强听觉语音感知,特别是在具有挑战性的听力条件下.
• 婴儿导向语音 (IDS) 与成人导向语音 (ADS) 相比,具有独特的声学特征.
• 以前的研究还没有从神经生理学上研究成年人如何处理IDS与ADS.

研究的目的:

• 调查婴儿导向语音 (IDS) 与成人导向语音 (ADS) 的成年处理中的神经生理差异.
• 检查听觉视觉语音效益对IDS和ADS处理的影响.
• 探索眼睛跟踪数据 (凝视行为) 和皮质语音跟踪之间的关系.

主要方法:

• 同时使用脑电图 (EEG) 和眼睛跟踪.
• 成年参与者获得了仅听觉 (AO),仅视觉和IDS和ADS的AV录音.
• 分析了语音信封的皮质跟踪和凝视行为.

主要成果:

• 在AO和AV条件下,语音信封的皮质跟踪对IDS和ADS都具有重要意义.
• 听觉视觉语音益处 (AV > A + V) 仅在IDS中观察到.
• 视线行为在IDS和ADS之间有所不同,但看眼睛/嘴巴与皮质跟踪精度没有相关性.

结论:

• 听觉视觉语言的好处是特定于婴儿导向的成年听众的语言.
• 凝视行为在调节AV语音效益中的作用是复杂的,与皮质跟踪精度没有直接相关.
• 在某些条件下,注意整个视觉显示可能会对语音感知产生负面影响.