通过强化学习和文本增大改进放射学报告生成质量和多样性
Daniel Parres1, Alberto Albiol1, Roberto Paredes1,2
1Campus de Vera, Universitat Politècnica València, Camí de Vera s/n, 46022 Valencia, Spain.
Bioengineering (Basel, Switzerland)
|April 27, 2024
概括
这项研究使用深度学习与强化学习和文本增强来增强放射学报告生成 (RRG). 改进的视觉编码器-解码器模型在医疗报告中实现了卓越的准确性和多样性.
科学领域:
- 人工智能的人工智能
- 医学成像分析 医学成像分析
背景情况:
- 使用视觉编码解码器 (VED) 框架的传统放射学报告生成 (RRG) 方法面临报告多样性和概括性的挑战.
- 现有的基准标准往往无法捕捉全面医疗报告的细微差别.
研究的目的:
- 提高基于深度学习的RRG的质量,多样性和概括能力.
- 为RRG准确性和可变性建立新的基准.
主要方法:
- 在VED框架内实施强化学习和创新的文本增强技术.
- 使用RadGraph作为培训和评估的关键奖励指标.
- 与BLEU4,ROUGE-L和F1CheXbert等既有指标进行基准测试.
主要成果:
- 拟议的VED模型远远超过了MIMIC-CXR和Open-i数据集的现有基准.
- 在MIMIC-CXR.上获得了F1分数66.2 (CheXbert) 和37.8 (RadGraph) 的F1.
- 在Open-i.上获得54.7 (CheXbert) 和45.6 (RadGraph) 的F1分数.
结论:
- 强化学习和文本增强的整合代表了RRG的重大突破.
- 改进的模型提高了诊断精度和临床环境中的放射学解释.
- 研究结果和代码是公开的,以促进进一步的进步.
相关概念视频
Improving Translational Accuracy
2.6K
2.6K
Non-equilibrium in the Cell
4.4K
An important concept in studying metabolism and energy is that of chemical equilibrium. Most chemical reactions are reversible. They can proceed in both directions, releasing energy into their environment in one direction, and absorbing it from the environment in the other direction. The same is true for the chemical reactions involved in cell metabolism, such as the breaking down and building up of proteins into and from individual amino acids, respectively. Reactants within a closed system...
4.4K


