领先和跟随:在自然主义语音理解过程中,噪音对语义和声学处理的影响不同
Xinmiao Zhang1, Jiawei Li2, Zhuoran Li1
1Department of Psychology, School of Social Sciences, Tsinghua University, Beijing 100084, China; Tsinghua Laboratory of Brain and Intelligence, Tsinghua University, Beijing 100084, China.
在噪音中理解语音依赖于跟踪声音和含义. 这项研究表明,大脑预测语音语义,随着噪音的增加,变得更具预测性,以保持理解力.
科学领域:
- 神经科学是一个神经科学.
- 认知科学 认知科学
- 语音处理 语音处理
背景情况:
- 尽管有背景噪音,人类的语音理解仍然非常稳定.
- 支持强大的语音噪音理解的精确神经机制尚未完全理解.
- 研究噪音中声学和语义语音特征的神经跟踪是至关重要的.
研究的目的:
- 探索在不同噪音水平下自然主义语音理解过程中声学和语义语音信息的神经跟踪.
- 阐明大脑在噪音条件下维持语音理解的策略.
- 为了区分神经对声学和语义语音特征的反应.
主要方法:
- 使用脑电图 (EEG) 从60个道记录大脑活动.
- 采用时间响应函数 (TRF) 方法来分析神经对连续语音的反应.
- 从语音信号中提取了声学特征 (振幅包) 和语义特征 (词,词惊喜).
- 在三个信号噪声比 (SNR) 级别中测试的参与者:无噪声,3dB和-3dB.
主要成果:
- 声学特征引发了大约400毫秒的达频段前中心TRF响应,噪声中的延迟延迟.
- 语义特征 (词) 显示了三角波段前置TRF响应200-600 ms *之前* 开始发言.
- 这些领先的语义响应随着噪音增加和可理解性降低而变得更快.
结论:
- 语音声学的神经跟踪受噪声的影响,显示延迟反应.
- 大脑表现出语音语义的强大,预测性神经跟踪,特别是在杂的环境中.
- 这种预测语义处理可能是维持在具有挑战性的听觉条件下语音理解的关键机制.
更多相关视频
05:22Dissociation of the Confounding Influences of Expectancy and Integrative Difficulty Residing in Anomalous Sentences in Event-related Potential Studies
Published on: May 9, 2019
07:36Eye Tracking During Visually Situated Language Comprehension: Flexibility and Limitations in Uncovering Visual Context Effects
Published on: November 30, 2018
相关概念视频
Auditory Perception
Perception of Sound Waves
The pitch of a sound depends on the frequency and the pressure amplitude of the source. Two sounds of the same...
Perceiving Loudness, Pitch, and Location
Place theory, or place coding, suggests that different pitches are heard because various sound waves activate specific locations along the cochlea's basilar membrane. The brain determines the pitch of a sound by...
Hearing
Chunking and Rehearsal in Sensory Memory
Factors Affecting Perception
An illustrative example of a perceptual set is the scenario where an airline pilot told...
