概念图 神经网络用于手术视频理解
IEEE transactions on medical imaging
|July 27, 2023
概括
本研究介绍了时间概念图网络,以将外科知识整合到人工智能模型中,以便更好地进行视频分析. 这种新的方法提高了复杂的外科手术基准和概念的识别.
科学领域:
- 人工智能在医学中的应用
- 计算机视觉 计算机视觉
- 手术分析 - 手术分析
背景情况:
- 从视频中了解手术程序对于人工智能增强手术至关重要.
- 将领域知识集成到用于外科视频分析的AI模型中仍然是一个重大挑战.
研究的目的:
- 提出一种新的方法,将概念知识整合到手术视频的时间分析中.
- 提高AI模型对外科概念和对象关系的理解.
主要方法:
- 开发包含知识图的时间概念图网络.
- 将网络应用于手术概念的时间视频分析,从数据中学习概念和关系.
主要成果:
- 证明了复杂的外科手术基准的改进识别和检测.
- 成功应用于安全验证的批判性视图,帕克兰分级尺度估计和仪器-动作-组织三重识别等任务.
结论:
- 拟议的时间概念图形网络有效地将概念知识整合到外科视频分析中.
- 这种方法提升了人工智能在理解和分析外科手术过程中的能力,从而实现了新的分析应用.


