减肥手术患者教育:基于人工智能的聊天机器人可以弥合知识差距吗?

科学领域:

• 医疗信息学 医疗信息学
• 医疗保健中的人工智能
• 外科教育的外科教育

背景情况:

• 全球肥胖流行需要有效的患者教育代谢和腹手术 (MBS).
• 在MBS中心的有限资源造成知识差距,促使患者在网上寻求信息.
• 人工智能 (AI) 聊天机器人为可靠的医疗信息传播提供了潜力,但准确性问题仍然存在.

研究的目的:

• 评估AI聊天机器人的准确性和全面性,以回答患者关于腹腔镜袖子胃切除术 (LSG) 的问题.
• 将各种AI聊天机器人的性能与提供LSG信息的多学科专家团队进行比较.
• 评估人工智能生成的响应对患者教育的可读性和可靠性.

主要方法:

• 七个人工智能聊天机器人 (ChatGPT 3.5/4,Bard,Bing,Claude,Llama,Perplexity) 进行了测试.
• 40个与LSG相关的问题来自患者论坛和社交媒体.
• 来自聊天机器人和多学科专家团队 (外科医生,研究员,全科医生) 的答案在五分级上对准确性和全面性进行了评估.

主要成果:

• 人工智能聊天机器人获得的整体性能得分 (2.55) 比专家组 (1.92; p < 0.001) 高.
• 在聊天机器人中,ChatGPT-4表现最高 (2.94),而Llama表现最低 (2.15).
• 聊天机器人响应通常需要11年级到大学阅读水平,ChatGPT-4显示出最可靠的可靠性.

结论:

• 人工智能聊天机器人显示出作为减肥患者教育的可扩展工具的承诺,产生准确和全面的答案.
• 可读性,模型可变性,偶尔的不准确性和医疗法律方面需要进一步关注.
• 聊天机器人应该补充,而不是取代临床医生的咨询,未来的研究重点是提高可读性和现实世界的影响.