相关实验视频
Updated: May 20, 2025

04:08
Metacarpal Small Incision for Carpal Tunnel Syndrome
Published on: April 5, 2024
343
作为手腕道外科手术患者信息来源的GPT-4:对谷歌网络搜索进行比较分析
Paul G Mastrokostas1, Aaron B Lavi, Bruce B Zhang
1From the Department of Orthopaedic Surgery, SUNY Downstate Health Sciences University, Brooklyn, NY (Mastrokostas, Lavi, Zhang, Mastrokostas, Liu, Connors, and Hashem), and the Department of Orthopaedic Surgery, Warren Alpert Medical School of Brown University, Providence, RI (Connors).
The Journal of the American Academy of Orthopaedic Surgeons
|March 26, 2025
概括
这项研究比较了GPT-4和谷歌的手掌道综合征 (CTS) 信息. 谷歌提供了更易于阅读的答案,而GPT-4提供了更详细的技术答案,在数值数据上有所不同.
科学领域:
- 医疗信息学 医疗信息学
- 医疗保健中的人工智能
- 患者教育 患者教育
背景情况:
- 带道手术 (CTS) 是美国常见的手术,需要可靠的信息传播.
- 人们对人工智能聊天机器人和搜索引擎提供的医疗信息的准确性和可访问性存在担忧.
- 评估AI和搜索引擎对关于CTS的常见问题 (FAQ) 的反应至关重要.
研究的目的:
- 为了比较GPT-4和谷歌对十大手掌道综合征 (CTS) 常见问题 (FAQ) 的反应.
- 分析问题类型,答案可读性和数值准确性的差异.
- 评估AI聊天机器人与搜索引擎对患者教育的适用性.
主要方法:
- 通过谷歌搜索确定了前10个CTS常见问题.
- 在GPT-4中查询常见问题和分析答案.
- 使用Flesch阅读方便和Flesch-Kincaid等级水平评估响应可读性.
- 使用罗斯威尔分类对答案进行分类,并比较数值准确度.
- 使用统计分析,包括科恩卡帕和学生t测试.
主要成果:
- 谷歌的常见问题更基于事实 (70%) 和专注于技术细节和活动.
- GPT-4的答案更详细 (162.90字对比谷歌的91.50) 和技术.
- 谷歌的答案显示了更高的可读性 (Flesch阅读方便56.40对比34.19) 和较低的成绩水平 (9.93对比12.85).
- 在数值反应中发现了显著的差异,GPT-4提供了更广泛的时间框架.
结论:
- GPT-4为手腕道综合征 (CTS) 查询提供了更深入,技术导向的信息.
- 谷歌提供了更容易访问和可读的信息,以帮助一般患者理解.
- 这两个平台在医疗保健教育中发挥着不同的作用,满足不同患者信息需求.

