放射線科専門研修医レポート作成支援教育ツールとしての生成AIの評価

科学分野:

• 医用画像処理
• ヘルスケアにおける人工知能
• 放射線科教育

背景:

• 放射線科研修医は、スキル開発のために、適時かつ個別化されたフィードバックを必要とする。
• 臨床ワークロードは、指導放射線科医が包括的なガイダンスを提供する能力を制限する。
• 自動フィードバックシステムは、リアルタイムでこのギャップを埋める可能性がある。

研究 の 目的:

• HIPAA準拠のGPT-4oシステムを用いた研修医の乳房画像診断レポートに対する自動フィードバックの評価。
• 指導放射線科医と比較したAI生成フィードバックの精度と有用性の評価。
• 放射線科教育におけるスケーラブルなツールとしてのAIの可能性の決定。

主な方法:

• 5,000件の研修医と指導医による乳房画像診断レポートのペアの分析。
• GPT-4oに研修医レポートの一般的なエラーを特定するように指示した。
• 4名の指導放射線科医と4名の研修医による読影研究で、100件のレポートペアに対するGPT-4oのフィードバックを評価した。

主要な成果:

• GPT-4oは、エラー特定において指導医のコンセンサスと高い一致率を示した（90.5%、78.3%、90.4%）。
• AIフィードバックは、ほとんどのケースで有用であると評価された（89.8%、83.0%、92.0%）。
• 人間の読影者をGPT-4oに置き換えても、読影者間の一致率に有意な変化はなかった。

結論:

• GPT-4oは、放射線科研修医レポートにおける主要な教育的エラーを確実に特定する。
• AIシステムは、放射線科教育を強化するためのスケーラブルなツールとしての可能性を示す。
• 自動フィードバックは、放射線科トレーニングにおける従来のメンターシップを補完することができる。