自主机器人辅助视频捕捉在心脏外科手术中:通过CHELS进行手术现场检测和障碍意识视角规划
Juntao Gao1, Yueri Cai1, Hongjia Zhang2
1Robotics Institute, Beihang University, Beijing, China.
概括
这项研究介绍了一种智能机器人系统,用于自动手术视频捕捉,提高效率和减少干扰. 该系统精确记录手术程序,使智能和自动化视频记录成为可能.
科学领域:
- 机器人和计算机视觉在医学中的应用.
- 手术技术创新 手术技术创新
背景情况:
- 传统的手术视频录制是低效和破坏性的,因为手动摄像机调整.
- 手术视频捕捉中缺乏自动化阻碍了工作流程,需要专门的人员.
研究的目的:
- 开发一个使用智能机器人系统的自动化外科视频捕捉方案.
- 为了提高手术视频录制的效率和精度.
主要方法:
- 使用YOLO v5算法和3D摄像头进行外科领域识别和定位.
- 开发了凸船体边缘线路搜索 (CHELS) 算法,以实现最佳的,无障碍的摄像头定位.
- 应用基于位置的视觉伺服 (PBVS) 用于在拍摄过程中精确控制相机.
主要成果:
- 在外科实地检测中获得了0.962的平均平均精度 (mAP@0.5).
- 该CHELS算法显示平均解决时间为0.1469秒.
- 成功启用了手术场的精确和自动捕捉.
结论:
- 提出的自动手术视频捕捉方案显著提高了录制效率.
- 通过这种机器人系统,可以实现手术视频的智能和自动记录.
- 这项技术为现代手术文档提供了一个有前途的解决方案.
