一个神经变压器的设计,用于西班牙语到墨西哥手语的自动翻译/口译
Diana Vania Lara-Ortiz1, Rita Q Fuentes Aguilar2, Isaac Chairez2
1Department of Mechatronics, Tecnológico de Monterrey, Escuela de Ingenieria y Ciencias, Colonia Nuevo México, Zapopan, Jal.
Network (Bristol, England)
|December 12, 2024
概括
这项研究引入了一个神经变压器,用于将西班牙语翻译为墨西哥手语 (MSL) 语音. 该模型显示了自动手语翻译的潜力,这对MSL语法至关重要.
科学领域:
- 自然语言处理自然语言处理.
- 计算语言学 计算语言学
- 标语语言语言学 语言学
背景情况:
- 由于其视觉手势模式,手语口译带来了独特的挑战.
- 为手语开发自动翻译系统对于可访问性和沟通至关重要.
- 墨西哥手语 (MSL) 语法需要特别注意准确的翻译.
研究的目的:
- 开发和评估一个文本对文本的翻译系统,用于西班牙语到墨西哥手语 (MSL) 的词汇表.
- 为了研究神经变压器架构对这种翻译任务的有效性.
- 为西班牙语到MSL的光泽翻译创建一个基础数据集.
主要方法:
- 使用多头神经变压器架构进行文本对文本翻译.
- 构建了一套新的西班牙语句子数据集及其相应的MSL光泽解释.
- 实验了各种神经网络架构,调整编码器解码器层和超参数.
主要成果:
- 表现最好的模型在培训期间获得0.68的BLEU分,在验证期间获得0.33的BLEU分.
- 识别出MSL的光谱对于准确地表示MSL语法顺序至关重要.
- 证明了使用NLP技术用于手语翻译的可行性.
结论:
- 神经变压器显示出创造有效的自动翻译器从西班牙语到MSL的巨大潜力.
- 开发的系统为MSL社区弥合沟通差距提供了一个有希望的方法.
- 进一步的研究可以建立在这些发现的基础上,以提高手语翻译的准确性和范围.
