人工智能与物理医学和康复居民相比:ChatGPT可以在临床考试表现方面竞争吗?

科学领域:

• 人工智能在医学中的应用
• 医疗教育 技术 技术 医学教育
• 物理医学和康复 康复

背景情况:

• 人工智能 (AI) 正在越来越多地影响各种专业领域.
• 人工智能在医学教育和实践中的整合是一个越来越感兴趣的领域.
• 评估AI在专业医疗领域的能力至关重要.

研究的目的:

• 评估ChatGPT-4o对物理医学和康复 (PM&R) 居民的检查的表现.
• 将ChatGPT的分数与不同研究生年 (PGY) 的居民分数进行比较.
• 为了评估ChatGPT的学习能力,当呈现正确的答案.

主要方法:

• 采用了横截面研究设计.
• 聊天GPT-4o使用土耳其年度PM&R培训考试中的多选题进行了测试.
• 绩效与PGY1-4居民进行了比较,并计算了ChatGPT的学习率.

主要成果:

• 在PGY1-4考试中,ChatGPT获得了78%至88%的分数.
• 它的绩效百分位数各不相同,与居民相比,排名在第30至80百分位之间.
• 在教错误答案后,ChatGPT的学习率达到了65%.

结论:

• 聊天GPT具有显著的知识回忆和学习潜力,在某些方面可能超过人类的能力.
• 然而,像ChatGPT这样的当前人工智能模型具有功能限制.
• 人工智能不能取代PM&R医生,因为临床检查和患者互动的关键作用.