在日本国家医疗执照考试中GPT-4V (视觉) 的能力:评估研究
Takahiro Nakao1, Soichiro Miki1, Yuta Nakamura1
1Department of Computational Diagnostic Radiology and Preventive Medicine, The University of Tokyo Hospital, Bunkyo-ku, Tokyo, Japan.
JMIR medical education
|March 12, 2024
概括
发电预训练变压器 (GPT) -4V,一个多式联接式大型语言模型 (LLM),在提供医疗图像时,在日本国家医疗执照考试中没有显示出更好的准确性. 视觉信息并没有显著提高GPT-4V在这个医学测试中的表现.
科学领域:
- 人工智能在医学中的应用
- 医疗教育 技术 技术 医学教育
- 大型语言模型
背景情况:
- 以前的大型语言模型 (LLM) 的医疗应用主要使用基于文本的数据.
- 最近的进步引入了能够进行图像识别的多式联络LLM.
研究的目的:
- 评估生成预训练变压器 (GPT) -4V的医疗图像识别能力,一个多式联络LLM.
- 评估视觉信息对GPT-4V在医疗检查环境中的表现的影响.
主要方法:
- 这项研究使用了包括图像在内的第117届日本国家医疗执照考试的108个问题.
- 在两个条件下测试了GPT-4V:使用文本和图像,以及仅使用文本.
- 分析了两个条件之间的精度差异,使用精确的麦克纳马测试.
主要成果:
- 在没有图像的情况下,GPT-4V的准确度为72% (P=.36),在图像的情况下达到68%的准确度.
- 在临床问题中,图像的准确率为71%和没有图像的78% (P=.21).
- 在一般问题中,图像准确率为30%,没有图像准确率为20% (P≥.99).
结论:
- 整合视觉信息并没有显著改善GPT-4V在日本国家医疗执照考试中的表现.
- 该研究表明,当前的多式联络LLM在某些医疗评估场景中可能无法从图像数据中获益.
关键词:
在这里,我们可以看到AIAIAI.聊天GPT 聊天 在GPT 聊天在 GPT-4 中使用.在GPT-4V中使用.在法学士 (LLM) 课程中.在NLP中,我们使用了NLP.答案 答案 答案 答案 答案答案 答案 答案 答案 答案 答案人工智能的人工智能是人工智能.聊天机器人 聊天机器人聊天机器人聊天机器人聊天机器人交谈代理人是一个对话代理人.交谈代理人 交谈代理人考试 考试 考试 考试 考试考试 考试 考试 考试考试 考试 考试 考试 考试考试 考试 考试 考试发电预训练变压器 预训练变压器图片 图片 图片 图片 图片图片 图片 图片 图片 图片影像成像技术 影像成像技术语言模型语言模型语言模型语言模型大型语言模型医学教育 医学教育自然语言处理自然语言处理.响应 响应 响应 响应答案 答案 响应 响应相关概念视频
Positron Emission Tomography
4.2K
Positron emission tomography (PET) is a medical imaging technique involving radiopharmaceuticals — substances that emit short-lived radiation. Although the first PET scanner was introduced in 1961, it took 15 more years before radiopharmaceuticals were combined with the technique and revolutionized its potential.
One of the main requirements of a PET scan is a positron-emitting radioisotope, which is produced in a cyclotron and then attached to a substance used by the part of the body...
One of the main requirements of a PET scan is a positron-emitting radioisotope, which is produced in a cyclotron and then attached to a substance used by the part of the body...
4.2K
Data Collection III
2.8K
The physical assessment examines the patient for objective data that defines the patient's condition, and aids in formulating the nursing care plan. The purpose of physical assessment is a health status appraisal, which includes identifying health problems, and establishing a database for nursing intervention.
The principles to begin the physical assessment include conducting a comprehensive or problem-related history in a quiet, well-lit room, emphasizing privacy and comfort for the...
The principles to begin the physical assessment include conducting a comprehensive or problem-related history in a quiet, well-lit room, emphasizing privacy and comfort for the...
2.8K


