人工知能の利用を 居住プログラムで検出できるのか?

科学分野:

• 医学教育
• 医療における人工知能
• 学問的な誠実さ

背景:

• ChatGPTのような AI 言語モデルの使用が増加しているため,医学研修の申請における学術的な整合性に懸念が生じています.
• 人工知能によって生成されたコンテンツの検出は,入学委員会にとって優先事項です.

研究 の 目的:

• 人工知能検出ツールの有効性を評価し,居住申請の個人申告書に ChatGPT によって生成されたテキストを識別する.
• 医学教育への入学における正統性を保証するAI検出器の信頼性を評価する.

主な方法:

• 産科・婦人科の入院申請に提出された25件の個人報告を定性的に分析した.
• 3つのAI検出ツール"GPTZero,Undetectable AI,Winston AI"が選択された文字サンプルを分析するために使用されました.

主要な成果:

• 人工知能によって生成されたコンテンツは高度に検出可能であり,人間によって書かれたサンプルでは混合検出率 (3-100%) が示された.
• AI検出器の性能は様々で,AIによって生成されたテキストを特定する際により高い精度を示すツールもありました.
• ChatGPTが広く利用可能になった後に提出されたヒトによる記述は,より広範なAI検出結果を示した.

結論:

• 現在のAI検出ツールは,AIによって生成された個人声明を特定するのに居住プログラムを支援しますが,その信頼性は絶対的ではありません.
• 人工知能の利用と著作権をめぐる明確な指針を策定することは,申請書の完全性を維持するために不可欠です.
• 検証されていないAI検出ツールへの過度な依存は,正当な申請者に不利な影響を及ぼす可能性があります.