对于腹腔镜摄像头的动作提取动作在动态手术场景中的深度同谱估计
Martin Huber1, Sébastien Ourselin1, Christos Bergeles1
1School of Biomedical Engineering & Image Sciences, Faculty of Life Sciences & Medicine, King's College London, London, UK.
概括
这项研究引入了一种新的方法,用于通过合成相机运动从手术视频中提取腹腔镜支架的动作. 这种方法提高了微创手术中自动摄像机控制的精度和运行时间.
科学领域:
- 医疗机器人 医疗机器人
- 计算机视觉 计算机视觉
- 手术模拟器手术模拟器
背景情况:
- 目前的腹腔镜摄像机自动化依赖于有限的基于规则的系统或以工具为中心的方法.
- 模仿学习 (IL) 是有前途的,但仅限于简化的实验设置.
- 存在一种需要从真实手术程序中提取复杂的摄像机运动的方法.
研究的目的:
- 开发一种方法,从真实的腹腔镜干预视频中提取腹腔镜持有人的动作.
- 为了使模仿学习能够实现更复杂的摄像机运动控制.
- 改进微创手术中摄像头运动的自动化.
主要方法:
- 一个新的同位素生成算法被用来合成添加相机运动到相机无运动的达芬奇手术图像序列.
- 这种合成运动作为监督信号,用于运动不变的摄像机运动估计.
- 最先进的深度神经网络 (DNN) 在不同的计算负载中进行了性能评估.
主要成果:
- 提出的方法成功地从合成数据集转移到真实腹腔镜干预视频中.
- 该方法与经典同谱估计相比,显示出更高的精度.
- 当在CPU上执行时,观察到运行时间的显著改进.
结论:
- 开发的方法有效地从手术视频中提取腹腔镜持有者的动作,克服了以前方法的局限性.
- 这种技术提高了模仿学习的可行性,用于在手术中实现现实的摄像机控制.
- 这些发现表明,在腹腔镜手术中推进自动摄像头辅助的有希望的方向.
更多相关视频
07:43In Vivo Quantification of Hip Arthrokinematics during Dynamic Weight-bearing Activities using Dual Fluoroscopy
Published on: July 2, 2021
3.1K
07:46Author Spotlight: Revolutionizing Remote Surgery with Augmented Reality and Robotics for Enhanced Precision and Accessibility
Published on: August 9, 2024
748
