收集基于模拟的耳视镜技能测试的有效性证据
Josefine Hastrup von Buchwald1,2, Martin Frendø1,2, Andreas Frithioff1,2
1Department of Otorhinolaryngology, Head & Neck Surgery & Audiology, Rigshospitalet, Copenhagen, Denmark.
The Annals of otology, rhinology, and laryngology
|October 17, 2024
概括
这项研究探讨了自动化耳视镜模拟器的有效性,发现它主要评估认知技能. 手动评估对于技术熟练程度至关重要,突出了联合评估方法的必要性.
科学领域:
- 医学教育 医学教育
- 模拟技术的模拟技术
- 临床技能评估 临床技能评估
背景情况:
- 耳视镜是一种基本的临床技能,对培训和评估方法的研究有限.
- 现有的基于模拟器的耳视镜评估缺乏可靠的有效性证据.
研究的目的:
- 探索一个耳视镜模拟器的自动评估和性能指标.
- 收集基于梅西克框架的自动化耳视镜模拟器得分的有效性证据.
主要方法:
- 新手和经验丰富的眼镜师都使用了Earsi模拟器进行自动化和手动技能评估.
- 使用概括性理论来评估可靠性.
- 自动评分与手动评分进行了比较;建立了一个通过/失败标准.
主要成果:
- 经验丰富的眼镜师在自动评估中得分明显高 (59.9%) 比新手 (44.6%).
- 自动评分与人工技术技能评分没有相关性 (r=0.20).
- 通过/失败标准为49.3%被确定为自动化得分.
结论:
- 自动化耳视镜模拟器的得分主要反映了认知能力,而不是技术能力.
- 目前,手动评估和外部视频录制对于全面的耳视镜技能评估是必要的.
- 越来越多的测试案例和通过/失败标准可以提高模拟器的可靠性.
