解脱表达意义的纠:为分析语音中非语言信息提供一个框架
Tirza Biron1, Moshe Barboy1, Eran Ben-Artzy1
1Weizmann Institute of Science, Faculty of Mathematics and Computer Science, Rehovot 7610001, Israel.
这项研究引入了一种自动化方法来解释语音中的神器信息,通过适度的数据实现人类水平的准确性. 该框架通过整合语境信息和说话者的意图来增强语音分析.
科学领域:
- 计算语言学 计算语言学
- 语音处理 语音处理
- 人工智能的人工智能
背景情况:
- 代信息传达关键的非语言信息,如情绪和强调.
- 自动解释这些信息具有挑战性,但对于全面的语音分析至关重要.
研究的目的:
- 开发一个理论框架和自动化方法来解释分层的prosodic消息.
- 为了实现一个变体的WHISPER自动语音识别系统的prosodic消息检测.
主要方法:
- 在语调单元内提出了一种分层的前性信息的层次结构.
- 开发了一种用于差异检测同时出现的非语言信息的程序.
- 修改了WHISPER系统以识别语调单元边界,原型和强调.
主要成果:
- 变体WHISPER模型实现了与人类注释相当的或比人类注释更好的性能.
- 该方法在各种数据集 (自发语音和阅读语音) 上表现出有效性.
- 该系统需要相对较少的训练数据才能有效地解释prosodic消息.
结论:
- 拟议的框架和自动化方法显著提升了语音和语言分析.
- 这种方法将上下文信息和说话者的意图与语言描述相结合,以成本有效的方式.
- 该方法具有广泛的应用,用于理解语言中细微的沟通.
更多相关视频
09:27Using Eye Movements Recorded in the Visual World Paradigm to Explore the Online Processing of Spoken Language
Published on: October 13, 2018
05:22Dissociation of the Confounding Influences of Expectancy and Integrative Difficulty Residing in Anomalous Sentences in Event-related Potential Studies
Published on: May 9, 2019
相关概念视频
Non-Verbal Cues
¹³C NMR: Distortionless Enhancement by Polarization Transfer (DEPT)
Components of Language
Channels of Non-Verbal Communication
¹H NMR: Interpreting Distorted and Overlapping Signals
As Δν decreases and the signals move closer, the doublets appear increasingly distorted. The intensities of the inner lines increase at the cost of those of the outer lines as the signals are...
Gestalt Principles of Perception
