评估ChatGPT-4作为耳硬化手术数字健康顾问的表现
Samil Sahin1, Burak Erkmen1, Yaşar Kemal Duymaz2
1Private Practitioner, Istanbul, Türkiye.
Frontiers in surgery
|June 21, 2024
概括
聊天GPT-4提供了关于耳硬化手术的准确信息,但患者可能不容易理解. 人工智能聊天机器人需要改进,以提高健康素养和患者理解.
科学领域:
- 医疗信息学 医疗信息学
- 医疗保健中的人工智能
- 患者教育 患者教育
背景情况:
- 耳硬化手术的信息需要准确,对患者来说是可以理解的.
- 像ChatGPT-4这样的人工智能 (AI) 聊天机器人越来越多地用于健康信息传播.
- 评估人工智能生成的内容对患者理解的适用性至关重要.
研究的目的:
- 评估ChatGPT-4在提供关于耳硬化手术的准确和可理解信息方面的有效性.
- 评估人工智能生成的患者教育响应的质量和可读性.
主要方法:
- 对ChatGPT-4提出了15个关于耳硬化手术的假设问题.
- 答案由耳鼻喉专家使用DISCERN评分系统进行评估.
- 使用多个指数 (FRE,FKGL,枪击FOG,SMOG,CLI,ARI) 评估可读性.
主要成果:
- 聊天GPT-4响应获得了DISCERN评分,表明了可变质量 (50.7 ± 8.2).
- 可读性分析显示,文本通常高于6年级的水平,可能会阻碍理解.
- 超过90%的信息是正确的,但关于完整性和清晰性的担忧仍然存在.
结论:
- 聊天GPT-4展示了准确提供健康信息的潜力,但在可读性方面面临限制.
- 人工智能系统需要进一步开发,以确保各种健康素养水平的患者能够获得信息.
- 医疗保健专业人员应监督人工智能工具的使用,以优化患者教育和护理.


