人工智能在个人陈述中 在整形外科内 住院申请
Yagiz Ozdag1, Mahmoud Mahmoud, Joel C Klena
1From the Department of Orthopaedic Surgery, Geisinger Commonwealth School of Medicine, Geisinger Musculoskeletal Institute, Danville, PA.
The Journal of the American Academy of Orthopaedic Surgeons
|March 18, 2025
概括
整形外科住院申请人目前没有使用人工智能 (AI) 来撰写个人陈述. 人工智能检测软件准确地识别了人类生成和人工智能生成的陈述.
科学领域:
- 医学教育 医学教育
- 人工智能在医学中的应用
- 外科住院申请 应用程序
背景情况:
- 人工智能 (AI) 越来越多地融入医疗教育和临床实践.
- 人工智能在骨科外科住院申请中用于编制个人陈述 (PSs) 的使用目前尚未得到审查.
- 这项研究调查了人工智能产生的内容在整形外科住院PSs的流行率.
研究的目的:
- 为了分析骨科外科住院个人陈述 (PSs) 的AI生成文本的存在.
- 为了确定在接受整形外科住院计划的PS中AI利用率.
- 评估人工智能检测软件在区分人类生成和人工智能生成文本方面的有效性.
主要方法:
- 四个组的比较:ChatGPT前 (PRE-PS),ChatGPT后 (POST-PS),人工智能生成 (AI-PS) 和混合 (H-PS) 的个人陈述.
- 利用人工智能检测软件 (GPT-Zero) 来量化人类,混合和人工智能生成的文本百分比.
- 评估AI检测软件的信心水平,以将陈述分类为人类或人工智能生成的.
主要成果:
- 人类生成的文本百分比为:PRE-PS (94%),POST-PS (93%),H-PS (28%),AI-PS (0%).这些文本都是由人工创建的.
- 人工智能检测软件将所有200个提交的PS归类为人类,信心>90%.
- 人工智能生成的陈述 (H-PS和AI-PS组) 正确地被识别为"AI",对AI-PS组有100%的信心.
结论:
- 目前的整形外科住院申请人似乎没有利用人工智能来创建个人陈述.
- 人工智能检测软件 (GPTZero) 在识别用于居住申请的人工智能生成PS时表现出高准确度.
- 未来的研究应监测人工智能利用趋势,并应制定用于研究生应用中的人工智能使用指南.
