实时手术工具检测与多尺度位置编码和对比学习
Gerardo Loza1, Pietro Valdastri2, Sharib Ali1
1School of Computing, Faculty of Engineering and Physical Sciences University of Leeds West Yorkshire UK.
Healthcare technology letters
|April 19, 2024
概括
这项研究引入了一个基于变压器的无模型,用于实时检测外科工具. 与现有的最先进的方法相比,新方法显著提高了准确性和速度.
科学领域:
- 计算机视觉 计算机视觉
- 医疗机器人 医疗机器人
- 手术技术 手术技术
背景情况:
- 实时手术工具检测对于腹腔镜手术分析,实习员评估和机器人系统自主性至关重要.
- 目前的检测方法在处理速度和准确性方面扎,通常受到基于或区域提案技术的限制.
- 现有的非基探测器在解决这些局限性方面取得了有限的成功.
研究的目的:
- 为实时手术工具检测引入先进的无,基于变压器的架构.
- 提高对各种工具外观的适应性,提高腹腔镜数据的检测准确性和速度.
主要方法:
- 利用基于变压器的,无架构来增强检测.
- 集成的多尺度功能和位置编码以捕捉工具的上下文和结构.
- 采用监督的对比损失来优化对象嵌入表示,以改善分类.
主要成果:
- 拟议的方法表现出比最先进的 (SOTA) 技术更优越的性能.
- 与SOTA DSSS方法相比,实现了近4%的平均平均精度 (mAP).
- 推断时间缩短了113%,并且显示了比基线模型高7%的mAP.
结论:
- 开发的无,基于变压器的方法显著推进了实时外科工具检测.
- 该方法提供了更好的准确性,速度和适应性,性能优于当前的SOTA模型.
- 这项工作为增强外科分析和自主机器人手术提供了坚实的基础.
