使用ChatGPT测试问题映射的快速模式工程:一个横截面研究
Jennifer L Babin1, Hanna Raber1, T Joseph Mattingly Ii1
1Department of Pharmacotherapy, University of Utah College of Pharmacy, Salt Lake City, UT, USA.
American journal of pharmaceutical education
|August 17, 2024
概括
这项研究开发了测试问题映射的提示工程,发现ChatGPT与人类教师达成了88.1%的协议,证明了其在教育评估中的有效性.
科学领域:
- 教育技术的教育技术
- 教育中的人工智能
- 课程开发 课程开发
背景情况:
- 有效的测试问题映射对于使评估与教育目标和认证标准保持一致至关重要.
- 目前的方法往往依赖于教师的手动流程,这可能耗时.
研究的目的:
- 使用ChatGPT开发一个快速的工程程序,用于测试问题映射.
- 与人类教师相比,评估ChatGPT对测试问题映射的有效性.
主要方法:
- 一项横截面研究涉及来自综合药理疗课程的139个测试问题.
- 教师将问题映射到模块目标和2016年药学教育标准认证委员会.
- 为ChatGPT开发了快速工程程序,并将其映射结果与人类教师共识进行了比较.
主要成果:
- 聊天GPT显示了88.1%的同意与人类教师测试问题的映射.
- 在68.0%的案例中,与人类共识直接达成一致.
- 当人类教师完全同意映射决定时,ChatGPT显示出更高的准确性.
结论:
- 快速工程为在教育环境中使用ChatGPT提供了一种实用方法,以高效地测试问题和结果映射.
- 这种方法可以帮助学院评估和课程委员会.


