预测30天的术后死亡率和美国麻醉师协会使用检索增强的大型语言模型来预测身体状态:开发和验证研究.
Ying-Hao Chen1, Shanq-Jang Ruan1, Pei-Fu Chen2,3
1Department of Electronic and Computer Engineering, National Taiwan University of Science and Technology, Taipei, Taiwan.
Journal of medical Internet research
|June 3, 2025
概括
使用大型语言模型 (LLM) 的检索增强生成 (RAG) 显著改善了30天术后死亡率和美国麻醉学会 (ASA) 身体状况分类的预测. 这种人工智能方法提高了准确性,特别是在罕见的高风险病例中,有助于临床决策支持.
科学领域:
- 人工智能在医学中的应用
- 临床决策支持系统 临床决策支持系统
- 在医疗保健中的自然语言处理.
背景情况:
- 准确的术后风险评估对于手术规划和患者安全至关重要.
- 当前的模型往往错过了自由文本手术前笔记中的细微差别.
- 大型语言模型 (LLM) 提供了利用非结构化临床数据的潜力,但事实准确性令人担忧.
研究的目的:
- 评估将LLM与检索增强生成 (RAG) 集成是否可以提高30天术后死亡率的预测.
- 评估LLM-RAG对美国麻醉学会 (ASA) 身体状况分类的影响,使用手术前的笔记.
主要方法:
- 对24,491份医疗记录进行了回顾性队列研究.
- 利用LLaMA 3.1-8B语言模型与RAG,从自由文本数据中提取见解.
- 与基线机器学习 (ML) 模型 (XGBoost,随机森林,物流回归,SVM) 进行LLM-RAG性能比较.
主要成果:
- 与ML模型 (XGBoost:0.4459) 相比,LLaMA-RAG在30天死亡率预测 (0.4663) 中获得了优异的F1得分.
- 在ASA分类中,LLaMA-RAG表现强 (微F1得分:0.8409),优于ML模型.
- 该模型在识别罕见的高风险病例方面表现出高灵敏度,包括ASA类5患者和术后死亡.
结论:
- 在LLM-RAG显著改善了术后死亡率和ASA分类的预测.
- 通过RAG将LLM输出接地于域知识中,提高了准确性和可解释性.
- 这种方法表明,在外科手术期间的护理中,对现实世界的临床决策支持有希望.
相关概念视频
Actuarial Approach
140
The actuarial approach, a statistical method originally developed for life insurance risk assessment, is widely used to calculate survival rates in clinical and population studies. This method accounts for participants lost to follow-up or those who die from causes unrelated to the study, ensuring a more accurate representation of survival probabilities.
Consider the example of a high-risk surgical procedure with significant early-stage mortality. A two-year clinical study is conducted,...
Consider the example of a high-risk surgical procedure with significant early-stage mortality. A two-year clinical study is conducted,...
140
Cardiopulmonary Resuscitation II: ACLS Airway Management
120
Airway management is a key skill in emergency and critical care settings, as maintaining a clear airway is essential for adequate oxygenation and ventilation.Head Tilt-Chin Lift TechniqueThe head tilt-chin lift maneuver is an essential technique primarily used in patients without suspected cervical spine injuries. To perform this maneuver, one hand is placed on the patient’s forehead, and gentle pressure is applied backward to tilt the head. The fingertips of the other hand are positioned...
120


