基于人工智能的聊天机器人的比较分析:评估骨干手术相关患者信息数据质量
Ebru Yurdakurban1, Kübra Gülnur Topsakal2, Gökhan Serhat Duran3
1Research Assistant, Department of Orthodontics, Gulhane Faculty of Dentistry, University of Health Sciences, Ankara, Turkey, 06010.
Journal of stomatology, oral and maxillofacial surgery
|December 29, 2023
概括
人工智能聊天机器人提供高质量,可靠的整形手术信息,但可读性具有挑战性. 患者应咨询医疗保健专业人员,以获得个性化的建议.
科学领域:
- 医疗信息学 医疗信息学
- 医疗保健中的人工智能
- 外科教育的外科教育
背景情况:
- 人工智能聊天机器人越来越多地用于医疗信息检索.
- 需要评估AI聊天机器人的性能在特殊的外科领域,如骨架手术.
研究的目的:
- 评估AI聊天机器人的数据质量,可靠性,可读性和相似性.
- 在整形手术的背景下比较不同的AI聊天机器人.
主要方法:
- 为聊天机器人开发了针对患者的关于整形外科手术的问题.
- 通过确保患者的质量信息 (EQIP),可靠性评分系统,全球质量量量表 (GQS),简单测量Gobbledygook (SMOG) 和相似性指数来评估反应.
- 分析了60个问题,分为两个类别:一般信息和程序,结果和恢复.
主要成果:
- 在EQIP,SMOG和相似性指数中,OpenEvidence领先;在可靠性和GQS中,MediSearch领先.
- 所有聊天机器人都显示出高可靠性和良好的质量,但需要大学水平的阅读理解能力 (SMOG).
- 聊天GPT-4显示出高度的独创性,而OpenEvidence显示出高度的相似性.
结论:
- 人工智能聊天机器人提供高质量,可靠的整形手术信息,尽管经常难以阅读.
- 尽管人工智能取得了进展,但咨询医疗保健专业人员仍然对患者的理解和护理至关重要.
