基于手势的多模式VR移动技术,用于在紧密排列的物流环境中实现直观的远程操纵视角控制.
Jaehoon Jeong1, Haegyeom Choi1, Donghun Lee1
1Mechanical Engineering Department, Soongsil University, Seoul 06978, Republic of Korea.
Sensors (Basel, Switzerland)
|February 26, 2025
概括
本研究介绍了一种使用手势进行精确控制的虚拟现实 (VR) 系统,用于远程操作. 它通过允许直观的视角调整来增强对象选择,提高物流任务成功率.
科学领域:
- 机器人和人机交互的人机交互
- 虚拟现实应用 虚拟现实应用
背景情况:
- 使用吸力抓手的远程操纵在物流中面临着物体遮蔽和对齐问题等挑战.
- 精确的视角控制对于成功的对象侧挑选任务至关重要.
研究的目的:
- 开发一种基于手势的直观,多模式的虚拟现实 (VR) 运动方法,用于精确的视角控制.
- 克服物流环境中远程操作的局限性.
主要方法:
- 使用头戴显示 (HMD) 摄像头捕获手骨架数据.
- 使用多层感知器 (MLP) 模型将手势分为翻译,旋转和固定模式.
- 在4312的数据集上训练并验证了MLP模型,其中666用于测试.
主要成果:
- 该MLP模型实现了98.4%的高分类精度.
- 精度,回忆和手势分类的F1分数超过了0.98.8.
- 展示了准确的手势识别和无模式转换,用于视角控制.
结论:
- 拟议的VR移动方法有效地解决了远程操纵方面的挑战,特别是对象侧挑选.
- 精确的手势识别和流的模式转换可以提高物流中的控制和成功率.
- 该系统提供了一个直观的解决方案,用于在远程机器人任务中精确地操纵视角.
