回答肌肉骨解剖问题的ChatGPT疗效:一项研究评估了评分器和时间点之间的质量和一致性

科学领域:

• 医学教育 医学教育
• 人工智能在医学中的应用
• 人体解剖学 解剖学 解剖学

背景情况:

• 像ChatGPT这样的数字平台在解剖学教育中越来越受欢迎.
• 评估用于教育目的的人工智能工具的可靠性至关重要.

研究的目的:

• 为了评估ChatGPT v3.5对肌肉骨解剖学反应的准确性和一致性.
• 评估不同时间点的响应质量和可重复性.

主要方法:

• 六个肌肉骨解剖问题被提出给ChatGPT v3.5.5.
• 答案是在四个不同的时间点收集的.
• 专家评价者盲目评估答案质量,使用5分利克特等级.

主要成果:

• 答案质量的显著变化 (在50%的案例中质量良好).
• 在不同时间点观察到不一致的反应 (在66.6%的病例中一致).
• 质量不佳的答案包含错误,相互矛盾的数据或遗漏.

结论:

• 由于质量和一致性变化,ChatGPT v3.5作为独立的解剖学学习资源的当前实用程序是有限的.
• 独立验证ChatGPT生成的解剖信息与既定文献对比对于学习者来说是必不可少的.