基因AI对申请人的行为,表现和面试可靠性的影响,在医学院招生虚拟面试期间

科学领域:

• 教育技术的教育技术
• 人工智能伦理学 人工智能伦理学
• 评估和评价的评估和评估.

背景情况:

• 人工智能 (AI) 越来越强大,越来越容易获得,这给教育计划带来了挑战,特别是在学生选择方面.
• 虚拟面试变得越来越普遍,增加了申请人滥用人工智能工具的易感性.
• 确保招生过程中的公平和诚信至关重要.

研究的目的:

• 在虚拟面试期间实证调查与申请人使用人工智能工具 (如ChatGPT) 相关的风险.
• 评估AI在学生选择中的滥用缓解策略的有效性.
• 为了比较使用人工智能与对照组的候选人的性能,可靠性和可接受性.

主要方法:

• 进行了一项随机实验,比较了三个组:鼓励申请人偷偷使用ChatGPT,一个"常规做法"的对照组,一个预先警告面试内容的组.
• 对所有参与者进行了性能,可靠性和可接受性等级的测量.
• 此外,还评估了减少非摄像头聊天GPT参与时间的影响.

主要成果:

• 与对照组相比,鼓励使用ChatGPT的组没有观察到显著的性能优势.
• 减少受访者在摄像头之外使用ChatGPT的时间并没有对性能,得分精度或可接受性产生负面影响.
• 聊天GPT组的平均表现为3.67 (sd=0.69),对照组为3.74 (sd=0.61) 和3.73 (sd=0.80).

结论:

• 这些发现表明,使用像ChatGPT这样的AI工具在虚拟面试中并没有提供优势.
• 缓解策略,例如限制非摄像机人工智能使用,可以保持面试的公平性和可靠性.
• 这些结果提供了一种实际的方法,以提高对虚拟学生选择流程完整性的信心.