验证专有恶化指数模型和住院成人的表现
Thomas F Byrd1,2, Bronwyn Southwell3, Adarsh Ravishankar4
1Department of Medicine, University of Minnesota, Minneapolis.
JAMA network open
|July 24, 2023
概括
恶化指数 (DTI) 在预测患者衰退方面显示出适度的准确性,其表现因人口群体而异. 由于在这个医院预测工具中观察到的偏差,本地验证至关重要.
科学领域:
- 临床信息学 临床信息学
- 医疗保健分析 医疗保健分析
- 患者安全 患者安全
背景情况:
- 病情恶化指数 (DTI) 是医院用来预测患者病情恶化的指数.
- 对DTI的外部验证有限,这引发了对其性能和公平应用的担忧.
- 评估DTI在不同医院环境中的预测能力和潜在偏见是必不可少的.
研究的目的:
- 进行本地验证恶化指数 (DTI) 的表现.
- 评估DTI在预测临床恶化方面的潜在偏差.
- 在现实世界的医院环境中,检查DTI在各种人口学子组的准确性.
主要方法:
- 一项回顾性预后研究,涉及美国中西部8家医院的13,737名成年患者.
- 每15分钟分析一次DTI预测,其恶化被定义为机械通风,ICU转移或死亡.
- 使用AUROC和AUPRC进行了绩效评估,对人口统计学子组进行了偏差评估.
主要成果:
- DTI表现出适度的预测能力,AUROC为0.759 (观察水平) 和0.685 (遭遇水平).
- 人口统计学群体的表现差异很大,美国印第安人/阿拉斯加土著患者和不透露种族的患者的表现有显著差异.
- 偏见指标表明特定少数群体子组的表现较差.
结论:
- 恶化指数 (DTI) 对于预测患者病情恶化的能力有限.
- 人口群体之间显著的绩效差异突出了潜在的不平等.
- 地方验证和模型培训数据的透明度提高是公平的DTI实施所必需的.
