与IDSA建议相比,评估ChatGPT和Bard的软组织感染专业知识
Mario Alessandri-Bonetti1, Riccardo Giorgino2,3, Michelle Naegeli4,5
1Department of Plastic Surgery, University of Pittsburgh Medical Center, 1350 Locust Street, Pittsburgh, PA, G10315219, USA.
聊天GPT-3.5和Bard为软组织感染提供了安全可靠的医学答案,符合美国传染病学会的指导方针. 聊天GPT-3.5显示的质量高于Bard,表明AIAI.
科学领域:
- 传染性疾病 传染性疾病
- 人工智能在医学中的应用
- 医疗信息学 医疗信息学
背景情况:
- 人工智能 (AI) 的日益使用需要评估其在医疗保健中的安全性和可靠性.
- 像ChatGPT-3.5和Bard这样的大型语言模型 (LLM) 正在被用于医学信息检索.
- 对人工智能产生的医疗建议与既定临床指南进行评估对于安全实施至关重要.
研究的目的:
- 评估ChatGPT-3.5和Bard在提供软组织感染的医学答案方面的安全性和可靠性.
- 将AI反应与美国传染病学会 (IDSA) 管理软组织感染的指南进行比较.
- 确定LLM产生的信息与当前临床建议的一致性和精度.
主要方法:
- 基于IDSA软组织感染指南的25个查询被输入到ChatGPT-3.5和Bard.
- 两位传染病医生独立评估了LLM反应,使用5点的利克特比例表 (适应全球质量表).
- 评估的重点是人工智能生成的医疗信息的一致性,准确性,完整性和可操作性.
主要成果:
- 聊天GPT-3.5响应的平均得分为4.34±0.74,表明质量良好至优良,并符合IDSA指南.
- 巴德的反应得到了3.5±1.2的平均得分,这表明质量适度,并与指南保持一致.
- 虽然通常是安全的,并且涵盖了大多数主题,但人工智能反应有时是通用的,缺乏细节,并且不太可操作.
结论:
- 聊天GPT-3.5和Bard可以提供安全和一般可靠的软组织感染信息,遵守IDSA指南.
- 与Bard相比,ChatGPT-3.5在响应质量和一致性方面表现优越.
- 人工智能医学知识的进一步进步可能使LLM成为传染病诊断和管理的有价值的临床辅助工具.
更多相关视频
09:07Author Spotlight: Accelerating Diagnostic Accuracy with Direct Identification of Gram-Negatives from Blood Culture Bottles
Published on: May 24, 2024
05:50International Expert Consensus and Recommendations for Neonatal Pneumothorax Ultrasound Diagnosis and Ultrasound-guided Thoracentesis Procedure
Published on: March 12, 2020
相关概念视频
Urinary Tract Infection III: Diagnostic Studies and Interprofessional Care
Healthcare Associated Infections II: Preventive Measures
The best practices for preventing healthcare-associated infections include hand hygiene, patient risk...
Hand hygiene
Hand washing...
Pulmonary Tuberculosis IV
Several diagnostic approaches are used to detect TB. The conventional method is the Tuberculin Skin Test (TST), also known as the Mantoux test. However, this method has...
Endocarditis III: Medical Management
Healthcare Associated Infections I: Iatrogenic, Exogenic and Endogenic
HAIs significantly increase the cost of health care. Extended stays in healthcare institutions, increased disability, increased costs of medications, including specialized antibiotics, and prolonged recovery times add to the patient's expenses and the healthcare institution and funding bodies.
