神经场用于单眼腹腔镜视频片段中的解剖学和手术仪器3D跟踪
Beerend G A Gerats1,2, Jelmer M Wolterink3,4, Seb P Mol1,4
1AI & Data Science Center Meander Medical Center Amersfoort The Netherlands.
Healthcare technology letters
|December 25, 2024
概括
这项研究引入了一种新的神经场方法,用于在腹腔镜视频中同时跟踪手术仪器和解剖学. 这种方法在3D重建和深度估计方面实现了高精度,推进了手术可视化.
科学领域:
- 计算机视觉 计算机视觉
- 医疗成像医学成像
- 手术技术 手术技术
背景情况:
- 腹腔镜视频分析通常单独跟踪手术仪器或解剖学.
- 准确的跟踪对于手术技能评估和增强现实重叠至关重要.
- 现有方法面临的挑战是小,鲜明可见的手术仪器.
研究的目的:
- 从单眼腹腔镜视频开发一种联合3D仪器和解剖学跟踪的统一方法.
- 通过增强类权重来提高小型手术仪器的跟踪精度.
- 评估神经场在腹腔镜中用于单眼3D场景重建的可行性.
主要方法:
- 在单眼二维腹腔镜视频上训练神经场,以表示连续的时空场景.
- 生成所有可见表面的3D轨迹.
- 增强类权重用于改善小仪器的跟踪.
- 深度地图的质量是使用像平均绝对误差 (MAE) 这样的指标来评估的.
主要成果:
- 对解剖结构的平均追踪精度为92.4%,对仪器的平均追踪精度为87.4%.
- 重建的伪深度地图显示的质量与最先进的深度估计器相美.
- 在SCARED数据集上,深度预测实现了2.9mm的MAE和9.2%的相对误差.
结论:
- 神经场在腹腔镜外科手术中为单眼3D重建提供了一种可行的方法.
- 拟议的联合跟踪方法提高了解剖结构和手术仪器的准确性.
- 这项工作有助于改善手术可视化和增强现实应用的潜力.
更多相关视频
05:12Robotized Testing of Camera Positions to Determine Ideal Configuration for Stereo 3D Visualization of Open-Heart Surgery
Published on: August 12, 2021
1.9K
07:46Author Spotlight: Revolutionizing Remote Surgery with Augmented Reality and Robotics for Enhanced Precision and Accessibility
Published on: August 9, 2024
582
