超越贝:评估ChatGPT作为口腔外科手术中辅助智能虚拟助理的潜力
Ana Suárez1, Jaime Jiménez2, María Llorente de Pedro1
1Department of Pre-Clinic Dentistry, Faculty of Biomedical and Health Sciences, Universidad Europea de Madrid, Calle Tajo s/n, Villaviciosa de Odón, 28670 Madrid, Spain.
Computational and structural biotechnology journal
|January 1, 2024
概括
在回答牙医的口腔手术问题时,ChatGPT-4的准确率为71.7%. 虽然作为虚拟助理具有价值,但专家监督对于将AI整合到牙科实践中至关重要.
科学领域:
- 人工智能在牙科中的应用
- 口腔外科的决定支持.
背景情况:
- 人工智能和大型语言模型 (LLM) 的进步使像ChatGPT这样的自然生成语言 (NGL) 系统成为可能.
- 法律学士面临着信息的时效和准确性方面的挑战,需要在专业领域进行评估.
研究的目的:
- 评估ChatGPT-4在为一般牙医提供有关口腔外科手术的答案方面的准确性和可靠性.
- 探索ChatGPT-4作为口腔外科临床决策的智能虚拟助理的潜力.
主要方法:
- 对ChatGPT-4提出了30个口腔手术问题,每个问题重复了30次,产生了900个答案.
- 两位外科医生使用基于西班牙口腔外科协会指导方针的三点利克尔特等级 (正确,部分正确/不完整,不正确) 评估了反应.
- 一位经验丰富的口腔外科医生仲裁了分歧,以确定最终的成绩.
主要成果:
- 在回答与口腔手术相关的查询时,ChatGPT-4的整体准确率为71.7%.
- 在重复的代中,专家评分的一致性从中等到几乎完美.
结论:
- 在口腔外科手术中,ChatGPT-4显示出作为辅助智能虚拟助理的潜力,尽管它不会取代人类专家.
- 成功实施需要适当的培训和专家验证牙科领域的AI产生的信息.
- 进一步的研究对于确保人工智能在口腔外科手术中的安全和有效应用至关重要.
