基于屏幕反射的智能手势识别多频段光谱特征
Peiying Lin1, Chenrui Li2, Sijie Chen2
1School of Electrical and Information Engineering, Jiangsu University of Science and Technology, Zhangjiagang 215600, China.
Sensors (Basel, Switzerland)
|September 14, 2024
概括
这项研究引入了一种使用屏幕反射光和光谱特征的新型手势识别系统. 该系统在各种照明条件下实现了高精度的人与计算机交互 (HCI).
科学领域:
- 人与计算机的交互 (HCI)
- 计算机视觉 计算机视觉
- 信号处理 信号处理
背景情况:
- 数字化趋势强调直观的人机交互 (HCI) 方法.
- 通过屏幕进行手势识别是推动HCI发展的关键领域.
- 现有的方法可能会面临各种环境照明的挑战.
研究的目的:
- 提出一种新的手势识别方法,将光谱和空间特征结合起来.
- 开发一个RGB三通道光谱手势识别系统.
- 为了提高HCI的手势识别的准确性和稳定性.
主要方法:
- 利用屏幕反射光的多频段光谱特征和空间特征.
- 开发一个带有显示屏和窄带光谱接收器的系统.
- 制定一个RGB多通道卷积神经网络长期短期记忆 (CNN-LSTM) 模型.
主要成果:
- 在黑暗中达到99.93%的准确性,在明亮条件下达到99.89%.
- 在不同的照明环境中展示了稳定而准确的手势识别.
- 来自频率和空间领域的综合多维特征,用于增强分类.
结论:
- 拟议的光谱手势识别方法提供了高精度和稳定性.
- 开发的RGB CNN-LSTM模型对基于手势的HCI有效.
- 这种智能方法在计算机和移动设备等交互式屏幕上具有广泛的应用.
