使用毫米波和热成像仪实现手势识别系统
Yi-Lin Cheng1, Wen-Hsiang Yeh1, Yu-Ping Liao1
1Department of Electrical Engineering, Chung Yuan Christian University, Taoyuan 320, Taiwan.
Sensors (Basel, Switzerland)
|January 23, 2024
概括
这项研究介绍了一种使用毫米波雷达和热成像的新手势识别系统. 这种创新方法实现了超过80%的无接触控制精度,改进了传统方法.
科学领域:
- 计算机视觉 计算机视觉
- 人与计算机的交互
- 传感器融合式传感器
背景情况:
- 由于COVID-19的流行,人们对非接触式控制方法的需求增加了.
- 现有的基于机器视觉的手势识别在低光或复杂的环境中扎.
- 在公共空间需要强大而准确的手势识别系统.
研究的目的:
- 为大型运动开发创新的手势识别系统.
- 为了提高准确性和可靠性,超越传统的机器视觉方法.
- 将毫米波雷达和热成像集成在一起,以改进手部跟踪.
主要方法:
- 利用毫米波 (mmWave) 雷达捕获手势点云数据.
- 采用热成像与多色转换算法用于手掌识别.
- 集成深度学习方法用于分析雷达数据并提高识别精度.
- 综合传感器数据,以有效地跟踪和监控手的运动.
主要成果:
- 拟议的系统实现了手势识别准确率超过80%.
- 与单个传感器方法相比,毫米波雷达和热成像的融合显示出更高的性能.
- 该系统有效地追踪了手的运动,即使在具有挑战性的环境条件下.
结论:
- 结合的毫米波雷达和热成像系统为非接触式手势识别提供了高度准确和强大的解决方案.
- 这项技术解决了在各种环境中机器视觉的局限性.
- 开发的系统对于需要可靠的基于手势的交互的应用具有显著的潜力.


