在日本国家牙科技师考试中,分析了多式联络大型语言模型在视觉问题上的表现
Yuichi Mine1,2, Tsuyoshi Taji3, Shota Okazaki1,2
1Project Research Center for Integrating Digital Dentistry, Hiroshima University, Hiroshima, Japan.
Journal of dental sciences
|October 3, 2025
概括
大型语言模型 (LLM) 在牙科技术教育中显示出潜力,但在视觉问题上扎. 在基于文本的考试中,OpenAI o1表现最好,这表明LLM可以补充学习,但实践培训仍然至关重要.
科学领域:
- 人工智能在牙科中的应用
- 多模式大型语言模型
- 牙科技术教育教育 牙科技术教育
背景情况:
- 大型语言模型 (LLM) 在牙科领域具有潜在的应用.
- 在专业的,图像丰富的牙科技术考试中,LLMs的表现是不确定的.
研究的目的:
- 评估三个多式联络LLM的准确性:ChatGPT-4o,OpenAI o1和克劳德 3.5 索内特.
- 评估LLM在日本国家牙科技师考试中的问题上的表现.
主要方法:
- 从牙科技师考试中使用了240个多选题 (2022-2024年).
- 提出问题,包括数字/图像,以零射击的方式向LLM提出问题.
- 总体计算的正确答案率,按问题类型 (仅文本与视觉) 和学科.
主要成果:
- 整体正确答案率:OpenAI o1 (67.5%),克劳德 3.5 索内特 (64.6%),聊天GPT-4o (58.3%). 没有任何问题.
- 在纯文本问题上,OpenAI o1获得了最高的准确性 (79.1%),明显超过了ChatGPT-4o (68.3%).
- 所有模型都表现出对视觉问题 (44.6-55.4%) 的精度降低,没有显著差异.
结论:
- 多模式的LLM可以补充理论牙科技术教育.
- 对视觉任务的有限表现凸显了传统实践培训的持续必要性.
- 提高LLM图像解释技能可以解决牙科技术劳动力挑战.
相关概念视频
Assessment of the Mouth
1.1K
A thorough mouth assessment, including inspection and palpation of the lips, gums, tongue, tonsils, uvula, and pharynx, is crucial in detecting potential health issues. Diseases ranging from oral cancer to systemic conditions like diabetes could be identified early through careful oral examination. This article provides a detailed guide on conducting a comprehensive mouth assessment.
Mouth Inspection
The inspection begins with visually examining the mouth for symmetry, color, and size.
Mouth Inspection
The inspection begins with visually examining the mouth for symmetry, color, and size.
1.1K
Assessment of Airway, Skin Color, and Use of Accessory Muscles
1.6K
A thorough assessment of respiratory health is paramount in clinical settings to identify and manage respiratory distress and ensure adequate oxygenation. This article elaborates on the critical aspects of respiratory evaluation, including airway assessment, skin color examination, and the observation of accessory muscle use, which are integral to effectively diagnosing and managing patients with respiratory conditions.
Introduction
The initial evaluation of a patient's respiratory system...
Introduction
The initial evaluation of a patient's respiratory system...
1.6K


