评估聊天生成预训练变压器在回答关于内镜粘膜切除和内镜亚粘膜剖析的问题

科学领域:

• 胃肠病学 胃肠病学
• 人工智能在医学中的应用
• 医疗信息传播 医疗信息传播

背景情况:

• 越来越多的患者询问关于内镜下粘膜解剖 (ESD) 和内镜粘膜切除 (EMR) 的问题.
• 交谈式人工智能工具的出现,如ChatGPT,作为医疗信息的可访问来源.

研究的目的:

• 评估ChatGPT的可靠性和实用性,以回答患者和医疗保健专业人员关于ESD和EMR的问题.
• 将ChatGPT的响应与通过谷歌搜索检索的信息进行比较.

主要方法:

• 对聊天GPT提出了30个关于ESD和EMR的问题,每个问题产生了两个答案.
• 答案被评估准确性,完整性和可理解性使用一个利克特级别的三个评级者.
• 聊天GPT和谷歌的响应被分类为高/低的准确性和完整性.

主要成果:

• 聊天GPT的回复在准确性 (5.14/6),完整性 (2.34/3) 和可理解性 (2.96/3) 上获得了很高的评分.
• 观察到良好的评价者间一致性 (所有P<0.05).
• 超过50%的谷歌生成的答案被评为准确性和完整性较低.

结论:

• 聊天GPT在回答有关ESD和EMR的问题时表现出准确性和可靠性.
• 像ChatGPT这样的AI聊天机器人可以成为患者和医疗保健提供者的重要资源.
• 未来的研究应该专注于通过详细,最新的医疗数据来增强AI聊天机器人,以解决局限性问题.