对比前列腺癌查信息质量在标准和高级版本的ChatGPT,谷歌双子座和微软副驾驶:一个横截面研究
Otis L Owens1, Michael Leonard1
1College of Social Work, University of South Carolina, Columbia, SC, USA.
American journal of health promotion : AJHP
|January 24, 2025
概括
人工智能聊天机器人可以提供准确的前列腺癌 (PrCA) 信息,但完整性和可读性各不相同. 促使低识字度的内容提高了可读性,聊天机器人识别了非洲裔美国男性的特定风险.
科学领域:
- 医疗保健中的人工智能
- 医疗信息学 医疗信息学
- 瘤学的决策支持
背景情况:
- 人工智能 (AI) 聊天机器人为前列腺癌 (PrCA) 的共享决策提供了潜力.
- 评估AI聊天机器人在提供医疗信息方面的表现对于患者的理解和结果至关重要.
研究的目的:
- 评估和比较各种AI聊天机器人的关于PrCA的答案的准确性,完整性,可读性和可信性.
- 调查低识字提示对PrCA信息可读性的影响.
- 为了确定聊天机器人对非裔美国男性的反应是否合适,这是一个具有更高PrCA风险的人群.
主要方法:
- 一项横截面研究评估了来自ChatGPT-3.5,ChatGPT-4.0,微软Copilot,微软Copilot Pro,谷歌双子和谷歌双子高级的响应.
- 从CDC和ACS资源中向每个聊天机器人提出了11个常见的PrCA问题,并对低识字信息提出了单独的提示.
- 通过准确性,完整性,可信度 (引用来源) 和弗莱什-金凯德可读性得分来评估响应质量.
主要成果:
- 所有聊天机器人都提供了准确的PrCA信息,其完整性,可读性和可信度各不相同.
- 低识字率促使提高可读性,但偶尔会降低完整性.
- 聊天机器人承认非洲裔美国男性的PrCA风险增加,并相应地调整了查建议.
- 微软Copilot Pro在标准查询中表现出卓越的性能,而微软Copilot在低识字率响应方面表现出色.
结论:
- 人工智能聊天机器人是PrCA查教育的宝贵资源.
- 建议将AI聊天机器人信息与医疗保健提供者的指导相结合,以获得最佳的患者护理.
- 对优化AI聊天机器人对不同患者群体的反应进行进一步的研究是有必要的.
