人工智能聊天机器人接受美国牙科局的模拟口腔委员会考试

科学领域:

• 人工智能在牙科中的应用
• 牙周内教育技术 牙周内教育技术
• 人工智能聊天机器人性能评估评估

背景情况:

• 评估人工智能 (AI) 聊天机器人在专业牙科检查中的有效性.
• 在模拟的美国内脏病学会 (ABE) 口腔委员会考试中评估AI性能.

研究的目的:

• 评估人工智能聊天机器人的整体性能,特别是GPT-4o和Gemini-2.5 Pro,在模拟的ABE口头委员会考试中.
• 为了比较领先的人工智能聊天机器人的响应有效性,引文有效性和整体性能得分.

主要方法:

• 三个模拟的ABE口腔委员会案例由董事会认证的牙周内科医生开发.
• 两个人工智能聊天机器人 (GPT-4o,Gemini-2.5 Pro) 每个案例回答了20个问题.
• 答案由两位审查员使用标题独立评分;数据使用累积链接混合模型 (CLMM) 进行分析.

主要成果:

• 双子-2.5 Pro (2.83 ±0.42) 和GPT-4o (2.73 ±0.51) 均获得了高平均整体性能得分.
• 聊天机器人在响应有效性或整体性能方面没有发现统计学上显著的差异 (p > 0.05).
• 观察到对GPT-4o (ρ=0.21,p=0.019) 的反应和引用有效性之间存在正相关性.

结论:

• 人工智能聊天机器人在模拟的ABE口试中表现出很高的表现.
• 这些发现支持人工智能聊天机器人作为内牙科教育辅助工具的潜在使用.
• 进一步的研究可以探索将AI整合到牙科教育和董事会认证准备中.