眼科専門試験の解答におけるChatGPT-4o言語モデルの性能
Barbara Sławińska1, Dawid Jasiński2, Aleksander Jaworski3
1Department of Medicine, Specialist Medical Center in Polanica-Zdrój Named After St. John Paul II, Polanica-Zdrój, POL.
Cureus
|September 2, 2025
まとめ
ChatGPT-4oは,眼科専門医試験で78.3%の精度を達成し,医学教育におけるAIの可能性を実証しました. その信頼レベルは答えの正しさと相関し,AIの応答信頼性を評価する有用性を示唆しています.
科学分野:
- 医学教育
- 人工知能
- 眼科について
背景:
- ChatGPTのような人工知能 (AI) 言語モデルは,医療教育と知識評価においてますます重要になっています.
- 以前の研究では 医療免許試験におけるAIの有効性が示され 専門家の訓練におけるAIの役割に関する調査が進められました
- この研究は,医療専門家の訓練プロセスをサポートする AI ツールの有用性について言及しています.
研究 の 目的:
- 眼科のポーランドの国家専門試験 (PES) に関するChatGPT-4oモデルのパフォーマンスを評価する.
- チャットGPT-4oの回答の正確性と,その宣言された信頼レベルを評価する.
- 眼科の専門訓練におけるAIの潜在的教育的有用性を決定する.
主な方法:
- この研究では2024年春の公式PES眼科試験を用いて,120の選択式質問が問われた.
- チャットGPT-4oは,ポーランド語の試験規則と質問を提供しました.
- 答えの正確さは,医学教育センター (CEM) のキーと照合され,信頼度レベル (1-5) が分析されました. 統計分析にはチー・スクエアとマン・ウィットニーUテストが含まれていた.
主要な成果:
- ChatGPT-4oは94の質問に正解した (78.3%),合格点数を上回った.
- 臨床試験と理論試験の精度において有意な差は認められなかった (p = 0. 709).
- 信頼度の高いレベルは,正確な答え (p < 0. 001) と有意に関連しており,信頼性の高い自己評価を示しています.
結論:
- ChatGPT-4oは眼科PESにおいて高い有効性を示し,専門医の研修におけるAIの可能性を強調しています.
- モデルの信頼度評価は,応答の正確さの重要な指標として機能します.
- 医療教育に人工知能を統合するには,さらなる研究と専門家の監督が不可欠です.
関連する概念動画
Glaucoma: Overview
745
Glaucoma is an eye condition characterized by increased intraocular pressure that damages the retina and optic nerve, leading to irreversible blindness if left untreated. The human eye has various components, including the cornea, iris, pupil, lens, and optic nerve. Aqueous humor is secreted by the epithelium of the ciliary body in the posterior chamber and flows through the trabecular meshwork and canal of Schlemm, maintaining normal intraocular pressure. The trabecular meshwork and the canal...
745
Open Angle Glaucoma: Treatment
557
In open-angle glaucoma, the iridocorneal angle remains open, but the trabecular meshwork becomes stiff, slowing down the outflow of aqueous humor. This causes a buildup of aqueous humor in the anterior chamber, leading to a sudden increase in intraocular pressure. The treatment for open-angle glaucoma focuses on reducing the elevated intraocular pressure by either decreasing the secretion of aqueous humor or increasing its outflow.
Drugs such as carbonic anhydrase inhibitors, α2- and...
Drugs such as carbonic anhydrase inhibitors, α2- and...
557
Angle Closure Glaucoma: Treatment
669
Angle-closure glaucoma, or closed-angle glaucoma, is an eye condition where the iris bulges out and blocks the iridocorneal angle, resulting in a buildup of aqueous humor and increased intraocular pressure. Immediate medical attention is necessary due to the sudden onset of symptoms. The treatment for angle-closure glaucoma includes short-term and long-term approaches. Short-term treatment involves using eye drops like pilocarpine to lower intraocular pressure by increasing aqueous humor...
669


