评估人工智能聊天机器人在 triaging 紧急情况下的准确性:与专家临床医生的比较研究

科学领域:

• 紧急医疗 紧急医疗
• 人工智能的人工智能
• 临床决策支持 临床决策支持

背景情况:

• 紧急部门的分类对于优先考虑患者紧急情况和优化资源配置至关重要.
• 人工智能 (AI) 系统,包括聊天机器人,在自动化复杂的临床任务,如患者分拣方面,显示出前景.
• 准确的分组直接影响患者的治疗结果和医疗保健的效率.

研究的目的:

• 为了评估AI聊天机器人的准确性,特别是ChatGPT-4o,在紧急情况下进行 triaging.
• 为了比较ChatGPT-4o与经验丰富的急诊医生之间的选性能.

主要方法:

• 一项涉及60种紧急情况的横截面观察研究.
• 病例最初由四名专家急诊医生进行分组;包含需要达成共识 (3/4协议).
• 然后,ChatGPT-4o对所选的病例进行了分组,与使用科恩卡帕的专家临床医生相比,他们的表现有所不同.

主要成果:

• 达成共识46个案例进行分析.
• 聊天GPT-4o获得了0.695的整体卡帕值,这表明与专家医生有中等到实质性的协议.
• 高灵敏度 (100%) 和特异性 (97.67%) 记录在1级选中,100%的灵敏度/93.02%的特异性在5级选中,尽管在4级选中灵敏度较低 (50%).

结论:

• 聊天GPT-4o表现出与专家医生在紧急病例分拣方面的强烈一致,特别是对于危急患者.
• 虽然不是临床医生的替代品,但AI聊天机器人可以作为有价值的决策支持工具.
• 人工智能工具可以帮助医疗团队专注于最关键的病例,提高效率.