一个创新和高效的头癌诊断预测流:基于文本和多中心PET/CT图像的多模式生存分析预测的深度学习方法
Zhaonian Wang1,2,3, Chundan Zheng1,2,3,4, Xu Han1,2,3,4
1School of Biomedical Engineering, Southern Medical University, 1023 Shatai Road, Guangzhou 510515, China.
Diagnostics (Basel, Switzerland)
|February 24, 2024
概括
这项研究引入了一种新的多模式图像-文本融合策略,用于头癌 (HNC) 的预后. 深度学习模型整合了PET,CT和临床文本数据,显著改善了生存预测.
科学领域:
- 在瘤学瘤学.
- 医疗成像医学成像
- 人工智能的人工智能
背景情况:
- 在头癌 (HNC) 中的瘤内部异质性对准确的预后提出了挑战.
- 最大限度地提高临床数据的实用性对于改善患者的治疗结果至关重要.
研究的目的:
- 开发和验证一种新的多模式图像-文本融合策略,以提高HNC预后.
- 通过整合各种数据源来提高生存预测模型的准确性.
主要方法:
- 开发了一个深度学习算法,使用交叉注意力机制集成PET和CT图像数据.
- 临床文本信息与使用Q-former架构的图像数据进行了融合.
- 为了改进生存分析,构建了一个可变时间的预后模型.
主要成果:
- 多模式融合策略在多中心验证中表现出卓越的性能.
- 在无转移存活率 (0.796),无复发存活率 (0.626),整体存活率 (0.641) 和无进展存活率 (0.691) 中取得了显著的结果.
- 仅使用CT/PET或缺乏临床文本信息的超越性能的模型.
结论:
- 多模式融合有效地帮助HNC诊断和预后.
- 该方法为优化生存分析和推进HNC个性化医疗提供了洞察力.
- 该模型显示了改善患者治疗结果的巨大潜力.


