评估ChatGPT在系统性红斑性狼的生物治疗中的实用性:对ChatGPT和谷歌网络搜索的比较研究
Kai Li1, Yunfei Peng1, Luyi Li1
1School of Journalism and Communication, Guangxi University, No.100, Daxue East Road, Nanning, 530004, China, 86 13367611322.
JMIR formative research
|August 29, 2025
概括
聊天GPT提供了比谷歌搜索更准确和完整的生物治疗系统性红斑狼 (SLE). 然而,它的可读性需要大学水平的教育,尽管这在简化时会有所改善.
科学领域:
- 医疗保健中的人工智能
- 医疗信息传播
- 自身免疫性疾病研究
背景情况:
- 系统性红斑狼 (SLE) 是一种严重的自身免疫性疾病,需要有效的治疗.
- 生物疗法对SLE治疗具有前景, 但公众的理解和在线信息质量不一致.
- 像ChatGPT这样的人工智能 (AI) 工具显示出改善健康信息可访问性的潜力.
研究的目的:
- 评估ChatGPT (特别是GPT-4o) 在提供关于SLE生物治疗的健康信息方面的实用性.
- 将ChatGPT的响应与谷歌网络搜索进行准确性,完整性和可读性比较.
主要方法:
- 我从ChatGPT-4o和谷歌网络搜索中提取了关于SLE生物治疗的20个常见问题及其答案.
- 根据类型 (事实,政策,价值) 和答案来源 (商业,学术等) 分类问题. ) 的情况.
- 使用利克特尺度评估答案的准确性和完整性,并使用弗莱什分数评估可读性.
主要成果:
- 与谷歌网络搜索相比,ChatGPT-4o提供了更准确的 (5.83对4.75) 和完整的 (2.88对1.68) 答案.
- 聊天GPT-4o的答案主要引用学术来源,而谷歌的答案均分布.
- 这两个平台都产生了高阅读难度 (大学毕业生水平) 的文本,但在六年级级要求时,ChatGPT的可读性显著改善.
结论:
- 在回答有关生物SLE治疗的问题时,ChatGPT-4o表现出卓越的准确性和完整性.
- 虽然信息丰富,但ChatGPT的默认输出需要高级阅读能力;简化提高了可访问性.
- 建议进一步研究人工智能在传播复杂医疗信息中的作用.
