一个基于语音节奏的视觉语音可理解性好处
Saya Kawase1, Chris Davis1, Jeesun Kim1
1The MARCS Institute, Western Sydney University, Penrith, NSW 2751, Australia.
Brain sciences
|June 28, 2023
概括
视觉语音提示,如部运动,有助于人们更好地理解语音,特别是在杂的环境中. 这种视觉语音节奏信息有助于语音感知,即使有外国口音.
科学领域:
- 听觉和视觉感知是听觉和视觉感知.
- 语音沟通 语音沟通
- 语音学 语音学 语音学
背景情况:
- 视觉语音信息可以增强语音感知.
- 以视觉方式传达的语音节奏的作用是不太了解的.
- 外国口音可以影响语音感知和视觉线索的实用性.
研究的目的:
- 调查视觉语言是否提供了可用于语音感知的节奏信息.
- 为了确定如何节奏熟悉,受外国口音的影响,影响视觉语言的好处.
- 探索视觉节奏线索在音视觉语音感知中的贡献.
主要方法:
- 与澳大利亚英语听众一起进行了噪音语音感知任务.
- 来自母语和非母语英语使用者 (不同的口音) 的句子以音频单独 (AO),口罩音频视觉 (AVm) 和音频视觉 (AV) 条件呈现.
- 后续实验检查了在听力改善的情况下,具有强烈外国口音的言语.
主要成果:
- 在所有口音类型中,语音识别在AV条件中是最好的.
- 视觉语音 (AVm) 对熟悉的节奏 (没有/弱口音) 的识别比AO更好,但对不熟悉的节奏 (强口音) 没有.
- 没有发现视觉线索 (AVm与AO) 对强烈的外语口音发言有任何益处,即使在更可听的条件下.
结论:
- 视觉语音节奏,可能通过部运动传递,有助于语音感知.
- 视觉节奏线索的有效性取决于节奏的熟悉程度和外国口音的程度.
- 视觉语音信息,包括节奏,对于在具有挑战性的听力条件下强大的语音感知至关重要.


