眼睛-手的打字:眼睛的目光辅助手指打字通过贝叶斯过程在AR的贝叶斯过程

科学领域:

• 人与计算机的交互
• 增强现实是一种增强现实.
• 工业信息学 工业信息学

背景情况:

• 增强现实头部显示器 (AR HMD) 越来越多地用于智能制造和数字工厂.
• 对于工厂环境中的操作员来说,高效准确的文本输入至关重要,但传统的AR键盘和语音输入由于噪音和速度要求而面临限制.

研究的目的:

• 推出Eye-Hand Typing,一个智能AR键盘,旨在提高工厂操作员的文本输入速度和准确性.
• 利用眼睛的目光和贝叶斯的过程来推断用户的输入意图,而不会改变现有的用户习惯.

主要方法:

• 开发了一个智能AR键盘系统,Eye-Hand Typing,将目光追踪与贝叶斯推理过程集成在一起.
• 贝叶斯过程分析了视角位置,持续时间和输入历史,以预测预期的字符,词汇或命令.
• 该系统动态突出并扩大预测的输入选项,以提高用户的效率.

主要成果:

• 与HoloLens 2系统键盘相比,Eye-Hand Typing减少了28.31%的输入错误率,并增加了14.5%的文本输入速度.
• 超越了只注视技术,实现了43.05%更高的准确性和39.55%更快的输入速度.
• 没有显著增加眼睛疲劳,用户对该系统表示积极偏好.

结论:

• 眼动打字为工业环境中AR应用程序的文本输入提供了显著的改进.
• 该系统有效地将眼睛的目光与智能预测相结合,以提高操作员的效率和准确性.
• 这种新的方法解决了在杂和苛刻的工厂环境中传统输入方法的局限性.