在美国牙科检查中,ChatGPT 3.5 和 4 的性能:INBDE,ADAT 和 DATAT
Mahmood Dashti1, Shohreh Ghasemi2, Niloofar Ghadimi3
1Dentofacial Deformities Research Center, Research Institute of Dental Sciences, Shahid Beheshti University of Medical Sciences, Tehran, Iran.
Imaging science in dentistry
|October 7, 2024
概括
像ChatGPT这样的人工智能 (AI) 工具在牙科考试中表现有希望. 聊天GPT 4比3.5更好,特别是在理解方面,但数学分析需要改进.
科学领域:
- 人工智能在牙科中的应用
- 专业教育中的自然语言处理.
- 人工智能辅助的学习和评估
背景情况:
- 人工智能 (AI) 的进步,包括ChatGPT,正在改变医疗保健和教育.
- 人工智能工具有潜力支持牙科的专业发展和患者护理.
研究的目的:
- 评估ChatGPT (版本3.5和4) 在回答美国牙科执照和入学考试问题的有效性.
- 通过改进知识评估,评估AI在帮助牙科专业人员和增强患者护理方面的潜力.
主要方法:
- 聊天GPT 3.5 和 4 测试了 253 个来自综合国家委员会牙科考试 (INBDE),牙科招生测试 (DAT) 和高级牙科招生测试 (ADAT) 的非图像问题.
- 使用定制提示,并将ChatGPT的响应与官方答案键进行比较.
主要成果:
- 两种ChatGPT版本都在考试中表现出了基于知识,病例历史和理解问题的熟练程度.
- 在DAT上,ChatGPT 4显著优于ChatGPT 3.5,在基于知识的问题上达到94%的准确性,在理解问题上达到100%的准确性 (P=0.009).
- 绩效不同,数学分析得分较低,这表明AI发展的领域.
结论:
- 与ChatGPT 3.5相比,ChatGPT 4是一个更可靠的AI工具,用于牙科考试准备,特别是在理解方面表现出色.
- 人工智能显示出提高牙科教育和专业实践的巨大潜力,尽管数学推理需要进一步改进.
