项目响应理论模型突出了标题和评级者-标题相互作用的评级级别在客观结构化临床检查中的作用
Masaki Uto1, Jun Tsuruta2, Kouji Araki3
1Department of Computer and Network Engineering, The University of Electro-Communications, Chofu, Tokyo, Japan.
PloS one
|September 6, 2024
概括
本研究引入了一种新的项目响应理论 (IRT) 模型,通过考虑评级者和项目变化来改进客观结构化临床检查 (OSCE). 改进的模型提供了更准确的能力测量和更深入地了解评级者和项目特征.
科学领域:
- 医学教育 医学教育
- 心理测量 心理测量 心理测量
- 教育评估的教育评估
背景情况:
- 客观结构化临床检查 (OSCE) 是评估医疗和牙科学生的标准.
- 目前的欧安组织面临的局限性是由于评级者和标签的变化影响了评估准确性.
- 项目响应理论 (IRT) 模型,就像多面拉什模型一样,试图解决这些问题,但具有限制性假设.
研究的目的:
- 提出一种新的IRT模型,克服欧安组织传统模型的局限性.
- 通过考虑评级者-项目相互作用和项目特定评级尺度来提高欧安组织能力估计的准确性.
- 为了提供一个更细致的理解的评级者和物品特征在欧安组织.
主要方法:
- 开发一种新的IRT模型,其中包含评价者-项目交互参数和项目特定阶段难度参数.
- 拟议模型应用于东京医疗和牙科大学的OSCE医疗访谈中的现实世界数据.
- 与传统的IRT模型相比,新模型的性能在模型适合性和能力测量准确性方面进行了比较.
主要成果:
- 拟议的IRT模型显示出与欧安组织数据的优越匹配.
- 该模型准确地测量了受试者的能力.
- 新模型提供了有关评级者和物品特征的详细信息,超过了传统模型的能力.
结论:
- 开发的IRT模型有效地解决了欧安组织评估的局限性.
- 这个模型在能力测量方面提供了更高的准确性,并对评估组件有了更丰富的理解.
- 研究结果表明,这种模型可以提高医学教育中的绩效评估的可靠性和有效性.
