走向手术内视觉智能:实时手术仪器细分,用于增强手术监控
Mostafa Daneshgar Rahbar1, George Pappas1, Nabih Jaber1
1Department of Electrical and Computer Engineering, Lawrence Technological University, Southfield, MI 48075, USA.
Healthcare (Basel, Switzerland)
|June 19, 2024
概括
这项研究引入了一种使用深度摄像头和人工智能进行实时手术仪器跟踪的新系统,达到85.5%的精度,以提高手术效率和情境意识.
科学领域:
- 计算机辅助手术是计算机辅助的手术.
- 医学成像分析分析 医学成像分析
- 手术机器人手术机器人手术机器人手术机器人
背景情况:
- 开放式手术要求外科医生高视觉敏度和空间意识,以便在复杂的环境中跟踪仪器.
- 目前用于仪器跟踪的方法可能受到手术领域的动态和混乱性质的限制.
研究的目的:
- 开发和验证手术仪器细分和跟踪的实时系统.
- 为了提高外科医生在手术室的情境意识和效率.
- 探索数据驱动的洞察力,以改善外科手术实践.
主要方法:
- 使用头戴式深度摄像头,用图像和深度数据捕捉手术场景.
- 采用了增强的U-Net与GridMask (EUGNet) 进行精确的外科工具细分.
- 实现实时流媒体协议 (RTSP) 提供可靠,低延迟的无线视频传输到工作站.
主要成果:
- 该系统在模拟环境中识别和细分手术仪器时达到85.5%的准确性.
- 无线视频传输表现出可靠的性能,延迟200毫秒,适合实时应用.
- 该系统显示了提高情境意识和外科手术效率的潜力.
结论:
- 开发的系统代表了辅助手术技术的重大进步.
- 研究结果表明,通过人工智能驱动的工具,改善外科实践是有希望的途径.
- 进一步开发可能会导致在手术室中广泛采用此类技术.


