使用人工智能解读NCCN指南:对ChatGPT-4.0和Llama 2进行比较评估,用于治疗甲状腺癌
Shivam Pandya1, Tamir E Bresler1, Tyler Wilson1
1Department of Surgery, Los Robles Regional Medical Center, Thousand Oaks, CA, USA.
The American surgeon
|August 13, 2024
概括
聊天GPT-4.0和Llama 2表现出类似的,有限的能力,以帮助甲状腺癌治疗决策. 这两种人工智能工具都提供了一些帮助,但需要进一步开发复杂的临床场景.
科学领域:
- 医疗信息学 医疗信息学
- 医疗保健中的人工智能
- 在瘤学瘤学.
背景情况:
- 人工智能 (AI) 越来越多地被用于医疗保健.
- 像ChatGPT-4.0和Llama 2这样的大型语言模型正在获得医疗应用的吸引力.
研究的目的:
- 评估和比较ChatGPT-4.0和Llama 2在甲状腺癌诊断和治疗的复杂临床决策中的有效性.
- 评估AI在支持瘤治疗指南中的作用.
主要方法:
- 分析国家综合癌症网络 (NCCN) 关于治疗甲状腺癌的指导方针.
- 基于NCCN指南制定复杂的临床问题.
- 对ChatGPT-4.0和Llama 2进行比较查询,并使用利克特评分表来评分答案的正确性和准确性.
主要成果:
- 从58个NCCN指南页面生成了167个独特的问题.
- 在总体得分,正确性或准确性方面,在ChatGPT-4.0和Llama 2之间没有发现统计学上显著的差异.
- 这两种人工智能模型在协助临床决策方面表现相似.
结论:
- 聊天GPT-4.0和Llama 2具有有限但重要的能力,以协助处理甲状腺癌管理的复杂临床决策.
- 在这种特定应用中,ChatGPT-4.0与Llama 2的有效性没有明显的差异.
