在初级保健机构中在线人工智能模型的准确性

科学领域:

• 医疗保健中的人工智能
• 公共卫生信息学 公共卫生信息学
• 数字健康工具 数字健康工具

背景情况:

• 预防医学和初级保健对公共卫生至关重要.
• 患者利用推的医疗服务存在差距.
• 患者越来越多地在网上搜索健康信息,突出了需要可靠的人工智能资源的需求.

研究的目的:

• 评估ChatGPT-4和谷歌巴德在提供预防医学和初级保健建议方面的准确性.
• 在医疗保健环境中比较两种领先的AI语言模型的性能.

主要方法:

• 对ChatGPT-4和谷歌Bard.提出了56个关于预防医学的问题.
• 两个医生独立审查了答案,并将其分类为准确,不准确或准确,缺少信息.
• 意见分歧被第三位医生解决,以确保共识.

主要成果:

• 谷歌巴德为53.6%的问题提供了准确的答案,而ChatGPT-4的答案为28.6%.
• 在42.8%的病例中,ChatGPT-4的反应是准确的,缺少信息,而Bard的情况是28.6%.
• 这两种模型在与疾病预防控制中心指南和免疫接种相关的反应中都显示出显著的不准确性 (80%).

结论:

• 聊天GPT-4和Bard显示出提供准确的预防性护理信息的潜力.
• 人工智能模型需要定期更新,特别是在快速发展的医疗领域.
• 人工智能产生的信息应该被视为一种补充资源,而不是专业医疗建议的替代品.