无传染性感染的医疗互动系统与机器视觉在操作期间通过远程手势控制
Van Doi Truong1,2, Hyun-Kyo Lim1,2, Seongje Kim1,2
1Department of Mechanical Design Engineering, Hanyang University, 222, Wangsimni-ro, Seongdongsu, Seoul 04763, Republic of Korea.
Computational and structural biotechnology journal
|May 27, 2024
概括
一个新的无感染医疗互动系统使用手势来精确控制手术期间的医疗图像. 该系统提高了手术安全性,并通过准确的实时操纵减少了外科医生的疲劳.
科学领域:
- 医学技术 医学技术 医学技术
- 人与计算机的互动.
- 手术方面的创新.
背景情况:
- 医学图像可视化在手术中至关重要,以防止"错误水平手术"等错误.
- 无菌环境带来了传统输入设备 (老鼠,触摸屏) 的感染风险.
- 需要一个无接触系统来操纵医疗图像,最大限度地减少感染的传播.
研究的目的:
- 开发一种无传染性感染的医疗互动系统,用于操纵医疗图像.
- 为了在外科手术过程中能够精确有效地控制医疗图像.
- 为了减少外科医生的疲劳,提高无菌操作环境中的安全性.
主要方法:
- 一个综合系统,结合了手指地标检测,指针和手势识别.
- 一个深度学习的手动地标探测器,具有深度增强功能,用于准确地标生成.
- 使用投影和射线指向技术的手指指向系统;通过里程碑式的几何约束和深度学习,通过六个命令 (点击,打开,关闭,放大,拖动,旋转) 进行手势识别.
- 为常见的外科手术功能开发一个控制菜单.
主要成果:
- 手指系统实现了1200毫米 (垂直和水平) 的大控制范围.
- 手势识别显示高精度 (超过97%) 和实时性能.
- 该系统有效地使医疗图像的无接触操纵成为可能.
结论:
- 开发的系统为医疗图像操纵提供了一种无传染性感染的方法.
- 它允许在很大范围内进行精确有效的控制,最大限度地减少手部疲劳.
- 这项创新提高了在无菌环境中外科手术的安全性和效率.


