盲目比较三种生成人工智能聊天机器人用于整形外科手术治疗问题
Vikram Arora1, Joseph Silburt1, Mark Phillips1
1Department of Surgery, McMaster University, Hamilton, CAN.
Cureus
|August 26, 2024
概括
在回答骨科手术治疗问题方面,AskOE聊天机器人显著超过了ChatGPT和Bing Chat. 专家们更喜欢AskOE的临床正确性,完整性和可靠的参考资料,强调其在医疗保健中的潜力.
科学领域:
- 人工智能在医学中的应用
- 整形外科手术 整形外科手术
- 医疗信息系统 医疗信息系统
背景情况:
- 聊天机器人提供了访问医疗信息的潜力.
- 在骨科手术等专业领域评估聊天机器人响应的准确性和可靠性至关重要.
- 评估了现有的聊天机器人 (ChatGPT,Bing Chat) 和一个专门的工具 (AskOE).
研究的目的:
- 为了比较来自ChatGPT,Bing Chat和AskOE对整形外科治疗问题的答案质量.
- 确定哪个聊天机器人提供了最临床正确,完整,安全和有用的信息.
主要方法:
- 来自麦克马斯特大学和多伦多大学的整形外科专家评估了聊天机器人的反应.
- 一个标准化标题评估了临床正确性,完整性,安全性,有用性和参考.
- 混合效应物流回归分析了影响聊天机器人偏好的因素.
主要成果:
- 通过审查者,AskOE显着比ChatGPT和Bing Chat (P<0.001) 更受欢迎.
- 与ChatGPT和Bing Chat相比,AskOE的总评分显著更高 (P<0.001).与ChatGPT和Bing Chat相比,AskOE的总评分显著更高 (P<0.001).
- 临床正确性,完整性,有用性和参考是首选AskOE的关键因素.
结论:
- 与一般聊天机器人相比,AskOE在提供准确可靠的骨科手术治疗信息方面表现出卓越的表现.
- 这些发现表明,AskOE具有重要的潜力,可以在医疗保健机构中作为骨科手术的可靠资源.
- 对专业医疗领域的AI应用进行进一步的研究是有必要的.
