机器人手的手势生成,用于辅助基于印度手语的语音和听力障碍者
1Department of Electrical Engineering, Indian Institute of Technology Roorkee, Roorkee, India.
Heliyon
|May 3, 2024
概括
一个新的机器人手系统将口语翻译成印度手语手势,达到94%的准确率. 这项技术旨在弥合言语和听力障碍患者的沟通差距.
科学领域:
- 辅助技术 辅助技术 辅助技术
- 机器人技术 机器人技术 机器人技术
- 语言学的语言学.
背景情况:
- 语音和听力障碍在印度很普遍,影响所有年龄组.
- 对于听力障碍者而言,现有的沟通方法往往需要专门的培训或对支持机构的认识.
- 弥合听力人士和言语/听力障碍者之间的沟通差距至关重要.
研究的目的:
- 开发一种口译系统,帮助语言和听力障碍者进行沟通.
- 用印度手语 (ISL) 促进有和没有言语/听力障碍者之间的互动.
- 创建一个将口语翻译成ISL手势的系统.
主要方法:
- 使用Raspberry Pi 4设计和编程了一个机器人手模型.
- 该系统被训练来生成与语音命令相对应的ISL手势.
- 在没有听力障碍的十名参与者身上进行了实验试验.
主要成果:
- 机器人手系统成功地根据语音命令生成了不同字母表的符号.
- 实验试验表明,该系统能够将口语解释为ISL手势.
- 拟议的机器人手解释器在生成ISL手势时实现了94%的整体准确性.
结论:
- 开发的机器人手翻译系统有效地将语音翻译成印度手语手势.
- 该系统在改善听力障碍者通信可访问性方面显示出显著的潜力.
- 进一步开发和提高认识可以加强这种辅助技术的采用.
