听觉线索对词汇压力的影响,对手势时间的视觉感知
Chengjia Ye1, James M McQueen2,3, Hans Rutger Bosker2
1Donders Institute for Brain, Cognition and Behaviour, Radboud University, Thomas Van Aquinostraat 4, 6525 GD, Nijmegen, The Netherlands. chengjia.ye@donders.ru.nl.
Attention, perception & psychophysics
|April 30, 2025
概括
听觉语音压力影响我们如何感知伴随手势的时间. 听众可视地调整手部动作以与强调音节保持一致,展示双向视听语音通信.
科学领域:
- 心理学 心理学 心理学
- 语言学的语言学.
- 神经科学是一个神经科学.
背景情况:
- 演讲通常伴随着手势,特别是节拍手势,这通常与表情突出一致.
- 节拍手势可以信号词压力,影响口语识别.
- 听觉语音对视觉感知的影响,特别是词汇压力如何影响感知的手势时间,仍然在很大程度上未被探索.
研究的目的:
- 为了研究词汇压力对节奏手势感知时间的影响.
- 为了确定听觉语音信号是否可以改变手势定时的视觉感知.
- 在语音通信中探索视听互动的双向性.
主要方法:
- 两项实验是使用视频进行的,视频中显示了不同音节的单词与手拍相结合,并改变了它们之间的异步.
- 实验1使用了一种新的节拍时间估计任务.
- 实验2使用强制选择任务来评估感知到的手势对齐与强调的音节.
主要成果:
- 人们认为手势发生在强调音节的音调峰值附近,从而减少了大约60%的时间距离.
- 听众倾向于感知音节之间中间的手势与更强烈的压力音节一致.
- 这种对感知手势时间的听觉影响在手势时间含糊不清时更加明显.
结论:
- 由基本频率 (f0) 和强度驱动的词汇压力,对感知的手势时间产生时间吸引效应.
- 听觉语言显著影响视觉感知,支持沟通中视听互动的双向模式.
- 研究结果强调了听觉和视觉语音处理在日常面对面互动中的综合性.
更多相关视频
07:36Eye Tracking During Visually Situated Language Comprehension: Flexibility and Limitations in Uncovering Visual Context Effects
Published on: November 30, 2018
15.6K
09:27Author Spotlight: Exploring the Link Between Time Perception of Visual Stimuli and Reading Skills
Published on: January 19, 2024
1.1K
