评估ChatGPT在中国的住院培训教育中的应用:一项探索性研究
Luxiang Shang1,2, Rui Li3, Mingyue Xue4
1Department of Cardiology, The First Affiliated Hospital of Shandong First Medical University & Shandong Provincial Qianfoshan Hospital, Jinan, China.
Medical teacher
|July 12, 2024
概括
聊天GPT展示了在中国加强医疗住院教育的巨大潜力. 它在生成教育内容和协助居民培训方面表现有前途,尽管考试问题的准确性需要改进.
科学领域:
- 医学教育 医学教育
- 医疗保健中的人工智能
- 住院培训 培训 住院培训
背景情况:
- 像ChatGPT这样的人工智能 (AI) 工具的整合到医学教育中正在迅速发展.
- 评估人工智能产生的内容的有效性对于其在结构化培训计划中的采用至关重要.
研究的目的:
- 评估ChatGPT在中国医疗住院教育中的实用性和性能.
- 评估ChatGPT在生成教育材料和为居民培训提供反方面的能力.
主要方法:
- 采用了三步调查方法,涉及ChatGPT在实习生考试问题上的表现,教师对AI产生的临床病例的评估,以及居民对ChatGPT互动的满意度.
- 定量分析包括考试问题的准确率和Likert尺度对案例质量和用户体验的评分.
主要成果:
- 聊天GPT-3.5在居住期期末考试问题上取得了45.1%的准确率.
- 人工智能产生的临床病例得到了教练的高评分 (平均分数在5分之3.95到4.77之间).
- 居民对ChatGPT的易用性 (4.48/5),准确性/完整性 (4.00/5),以及实用性 (4.61/5) 表示积极的看法.
结论:
- 聊天GPT展示了相当大的潜力,作为一个工具,在中国的住院计划内个性化医疗教育.
- 该研究强调了人工智能支持医疗培训的能力,尽管存在提高准确性的领域.
