自然语言处理可以作为口腔外科手术的顾问吗?
1Department of Oral and Maxillofacial Surgery, Faculty of Dentistry, Istanbul Medeniyet University, Istanbul, Turkey.
Journal of stomatology, oral and maxillofacial surgery
|December 5, 2023
概括
与Bing和Bard相比,ChatGPT在回答口腔手术问题方面表现优越. 专家们对医疗聊天机器人响应的准确性,完整性和清晰性评价ChatGPT最高.
科学领域:
- 口腔外科和人工智能的人工智能
- 医学中的自然语言处理 (NLP)
背景情况:
- 评估人工智能聊天机器人用于专业医疗查询的有效性.
- 在口腔手术环境中评估聊天机器人的性能,包括牙科植入物和拔牙.
研究的目的:
- 为了比较ChatGPT,微软Bing和谷歌Bard在回答口腔手术问题的有效性.
- 为了确定哪个基于NLP的聊天机器人提供最准确,最完整和最清晰的医疗信息.
主要方法:
- 十位口腔外科医生专家向三个聊天机器人平台提出了20个与口腔手术有关的问题.
- 答案使用利克特尺度 (LS) 进行评估,以确定准确性/完整性,并使用全球质量尺度 (GQS) 进行清晰度.
- 使用ANOVA和Post Hoc Tukey进行了对专家评级的统计分析.
主要成果:
- 与Bing (1.8750±0.18143) 和Bard (2.0500±0.12472) (P < 0.001) 相比,ChatGPT获得了明显更好的平均LS分数 (1.4000±0.15986) 与Bing (1.8750±0.18143) 和Bard (2.0500±0.12472) 相比.
- 聊天GPT也获得了显著更高的GQS分数 (4.4200±0.30111) 比Bing (3.7550±0.28621) 和Bard (3.5250±0.22392) (P < 0.001).比Bing (3.7550±0.28621) 和Bard (3.5250±0.22392) (P < 0.001) 更高.
结论:
- 在准确和清晰地解决与口腔手术相关的查询方面,ChatGPT具有显著的优势.
- 先进的NLP平台显示了在口腔外科手术等专业医疗领域改善信息检索的潜力.
- 该研究强调了人工智能技术在增强医疗和外科通信方面的实用性.


