用手势控制的机器人手臂用于农业收获,使用带有曲传感器和光学跟踪系统的数据手套
Zeping Yu1, Chenghong Lu1, Yunhao Zhang1
1Graduate School of Computer Science and Engineering, University of Aizu, Aizuwakamatsu 965-8580, Japan.
Micromachines
|July 27, 2024
概括
这项研究引入了一个以手势控制的机器人手臂用于农业,使用数据手套和先进的跟踪. 它为劳动密集型农业收获提供了精确有效的解决方案.
科学领域:
- 机器人技术 机器人技术 机器人技术
- 农业技术 农业技术
- 人与计算机的交互
背景情况:
- 收获水果是劳动密集型,对农业可持续性构成挑战.
- 现有的自动化解决方案往往缺乏复杂任务所需的灵巧性或用户友好性.
研究的目的:
- 开发一种以手势控制的机器人手臂系统,以实现高效和用户友好的农业收获.
- 利用机器学习进行准确的手势识别和机器人手臂控制.
主要方法:
- 使用了带有曲传感器的数据手套和OptiTrack系统来捕获手势和空间数据.
- 采用卷积神经网络 (CNN) 结合双向长期短期记忆 (BiLSTM) 模型进行手势识别.
- 集成的手势识别与机器人手臂控制用于自动收获任务.
主要成果:
- 在复制手部动作方面实现了高精度,欧几里德距离为0.0131米,RMSE为0.0095米.
- 展示了强大的手势识别准确性,达到96.43%的整体准确性.
- 在模拟农业收获环境中验证了系统的有效性.
结论:
- 开发的手势控制机器人手臂系统为农业收获提供了一个可行的混合解决方案.
- 这项技术通过精确和直观的控制来提高农业的劳动效率和可持续性.
- 该系统为半自动化农业实践提供了一个有希望的方法,弥合了手动和全自动化方法之间的差距.
