居住计划可以检测个人陈述中的人工智能使用情况吗?

科学领域:

• 医疗教育
• 医疗保健中的人工智能
• 学术诚信

背景情况:

• 越来越多地使用像ChatGPT这样的AI语言模型, 引起了人们对医学实习申请的学术完整性的担忧.
• 个人陈述对于入院选择至关重要,使得人工智能产生的内容的检测成为招生委员会的优先事项.

研究的目的:

• 评估广泛使用的人工智能检测工具在居住申请个人陈述中识别ChatGPT生成的文本的有效性.
• 评估人工智能检测器的可靠性,以确保医学教育的真实性.

主要方法:

• 对提交的25份产科和妇科住院申请进行了定性分析.
• 三种人工智能检测工具 - - GPTZero,不可检测的人工智能和温斯顿人工智能 - - 用于分析选定的写作样本.

主要成果:

• 人工智能生成的内容高度可检测,而人类写的样本显示混合检测率 (范围从3-100%).
• 人工智能检测器的性能有所不同,一些工具在识别人工智能生成的文本方面表现出更高的准确性.
• 在ChatGPT广泛使用后提交的人类书面陈述显示了更广泛的AI检测结果.

结论:

• 目前的人工智能检测工具可以帮助居住计划识别人工智能生成的个人陈述,但它们的可靠性并不绝对.
• 制定关于人工智能使用和作者身份的明确指导方针对于保持申请提交的完整性至关重要.
• 过度依赖未经验证的AI检测工具可能会给合法申请人带来不利影响.