一个基于背景的聊天机器人超越训练有素的放射科医生和通用聊天GPT,遵循ACR适当性指南
Alexander Rau1,2, Stephan Rau1, Daniela Zoeller3,4
1Department of Diagnostic and Interventional Radiology, Medical Center - University of Freiburg, Faculty of Medicine, University of Freiburg, 79106 Freiburg, Germany.
Radiology
|July 25, 2023
概括
一个人工智能聊天机器人,accGPT,根据美国放射学学院的标准提供个性化的成像建议,提高诊断准确度和降低成本. 这种人工智能工具与通用聊天机器人和放射科医生相比,表现出更高的性能.
科学领域:
- 医疗信息学 医疗信息学
- 医疗保健中的人工智能
- 放射学决策支持 放射学决定支持
背景情况:
- 放射性成像指南对于准确的诊断和患者护理至关重要.
- 标准化的决策减少了不适当的成像研究.
- 临床决策支持系统可以优化成像实践.
研究的目的:
- 通过美国放射学学院 (ACR) 的适当性标准,研究一个交互式聊天机器人,以提供个性化的成像建议.
- 评估聊天机器人的表现与放射科医生和通用AI模型相比.
- 评估AI在支持成像临床决策方面的潜力.
主要方法:
- 使用LlamaIndex和ChatGPT 3.5-Turbo.开发了一个符合适当性标准的语境聊天机器人 (accGPT).
- 利用209个ACR适当性标准文件作为一个专业知识库.
- 在50个临床病例档案中,accGPT的性能与放射科医生和通用ChatGPT 3.5和4.0进行了比较.
主要成果:
- 所有的聊天机器人至少达到人类水平的性能.
- accGPT提供了符合ACR标准的最准确的建议.
- 与放射科医生相比,accGPT表现出优越的一致性和显著的时间/成本节省.
结论:
- 基于ChatGPT的算法可以根据ACR指南显著提高临床成像决策.
- 在医疗保健应用中,特定于环境的AI算法优于通用同行.
- 将AI解决方案定制为特定的医疗领域提供了相当大的价值.
