使用基于视频的考官分数比较和调整 (VESCA) 来比较在分布式客观结构化临床考试 (OSCE) 中不同地点的考官的影响
Peter Yeates1,2, Adriano Maluf3, Natalie Cope3
1School of Medicine, Keele University, David Weatherall Building, Keele, Staffordshire, ST5 5BG, UK. p.yeates@keele.ac.uk.
开发了一种新的方法,即基于视频的考试者分数比较和调整 (VESCA),以确保分布式客观结构化临床考试 (OSCE) 的公平性. 维斯卡有助于调整考员的分数,提高不同网站的学生评估的有效性.
科学领域:
- 医学教育研究 医学教育研究
- 心理测量 心理测量 心理测量
- 健康 专业 教育 卫生 专业 教育
背景情况:
- 在分布式的客观结构化临床考试 (OSCE) 中确保考官一致的判断对于评估的公平性和有效性至关重要.
- 在分布式的欧安组织中,审查小组之间缺乏绩效交叉,这阻碍了对判断进行比较的能力.
- 这项研究解决了在大型,多地点的欧安组织中相互审查员可靠性的挑战.
研究的目的:
- 开发和应用一种新的方法 - - 基于视频的考生成绩比较和调整 (VESCA),用于在不同欧安组织地点比较考生成绩.
- 在分布式的欧安组织中,量化考试者队列和地点对学生成绩的影响.
- 评估得分调整对学生排名和分类的影响.
主要方法:
- 开发基于视频的考生分数比较和调整 (VESCA) 方法.
- 采用多方面拉什模型 (MFRM) 来分析录制的学生表现和考官成绩.
- 在16个站点的OSCE总结中比较检查员队伍和现场效应.
主要成果:
- 考生队列显示,同样能力的学生在得分上有6.9%的变化.
- 站点差异很小,但检查员队列变异性在站点之间有所不同.
- 成绩调整导致中位数变化为6位,影响了26.9%的学生至少一个十位数,对通过/失败分类的影响最小.
结论:
- 该研究证明了VESCA在大型分布式OSCE质量保证中的可行性.
- 虽然审查员参与率有限,但研究结果支持使用VESCA来提高评估有效性.
- 维斯卡为在多处临床检查中标准化检查员判断提供了一个潜在的解决方案.
更多相关视频
10:38Observational Study Protocol for Repeated Clinical Examination and Critical Care Ultrasonography Within the Simple Intensive Care Studies
Published on: January 16, 2019
15:49Flexible Colonoscopy in Mice to Evaluate the Severity of Colitis and Colorectal Tumors Using a Validated Endoscopic Scoring System
Published on: October 16, 2013
相关概念视频
Urologic Endoscopic Procedure: Cystoscopic Examination
Assessment of the Abdomen II: Percussion
Percussion
Percussion is an essential...
Imaging Studies for Cardiovascular System VI: Calcium -Scoring CT
