医疗内镜实时3D重建方面的进展
Alexander Richter1,2, Till Steinmann2, Jean-Claude Rosenthal3
1Fraunhofer Institute for High-Speed Dynamics, Ernst-Mach-Institut (EMI), Ernst-Zermelo-Straße 4, 79104 Freiburg, Germany.
Journal of imaging
|May 24, 2024
概括
本综述涵盖了医疗内镜实时3D重建,适应计算机视觉的进步,以应对无特色表面和不同光线等挑战. 它对方法进行了分类,并讨论了改善内镜可视化的硬件选择.
科学领域:
- 计算机视觉 计算机视觉
- 医疗成像医学成像
- 手术技术 手术技术
背景情况:
- 最近计算能力和计算机视觉方面的进步刺激了自动驾驶和机器人等领域的进步.
- 这些进步为医学内镜提供了适应的潜力,解决了诸如无特征表面,可变照明和可变形解剖等挑战.
研究的目的:
- 为医疗内镜提供当前实时3D重建方法的全面概述.
- 分类和比较现有技术,包括单眼,双眼,三眼和多眼方法,以及主动和被动方法.
- 讨论相关的错误指标,硬件考虑 (GPU与FPGA),以及评估3D重建性能时数据集利用的最佳实践.
主要方法:
- 基于摄像头数量 (单眼到多眼) 和传感方法 (主动与被动) 的3D重建方法的分类.
- 包括对灵活和非灵活内镜的研究,以确保全面覆盖.
- 考虑对各种数据集进行评估的出版物,包括医疗数据集,KITTI和Middlebury,以纳入相关的相关方法.
主要成果:
- 该评论系统地对各种实时3D重建技术进行了分类,这些技术适用于医疗内镜.
- 它强调了计算机视觉技术对内镜挑战的适应性,并讨论了性能评估指标.
- 该比较扩展到硬件选择,例如图形处理单元 (GPU) 与现场可编程门数组 (FPGA),用于基于相机的3D重建.
结论:
- 医疗内镜中的实时3D重建显著受益于计算机视觉和计算能力的进步.
- 通过结构化的方法对方法进行分类,并使用适当的数据集和指标对其进行评估,这对进步至关重要.
- 进一步的研究适应相关领域的技术,如自动驾驶,有望提高内镜可视化和外科导航.


