从临床笔记中算法识别治疗出现的不良事件,使用大型语言模型:在炎症性肠病中的试点研究
Anna L Silverman1,2, Madhumita Sushil3, Balu Bhasuran3
1Division of Gastroenterology and Hepatology, Department of Medicine, Mayo Clinic, Phoenix, Arizona, USA.
像UCSF-BERT这样的大型语言模型 (LLM) 显示出改善药物安全监测的希望. 这种新的临床LLM在检测门诊记录中的严重不良事件方面取得了卓越的准确性.
科学领域:
- 药监和药物安全 药监和药物安全
- 临床自然语言处理 临床自然语言处理
- 医疗保健中的人工智能
背景情况:
- 门诊临床笔记包含有价值的药物安全性数据,但由于文本挖掘的限制,这些数据未得到充分利用.
- 现有的文本挖掘方法在准确的不良事件 (AE) 检测方面扎.
- 大型语言模型 (LLM) 显示了自然语言处理任务的潜力,但需要对AE检测进行评估.
研究的目的:
- 调整和评估临床LLM,UCSF-BERT,用于检测炎症性肠病 (IBD) 患者的严重不良事件 (SAE).
- 将UCSF-BERT与其他语言模型在临床笔记中检测AE的性能进行比较.
- 评估LLM在加强药物监督方面的实用性.
主要方法:
- 在使用非类固醇免疫抑制剂后,对SAE相关住院的928个门诊IBD笔记进行了注释.
- 适应UCSF-BERT,一个临床的LLM,用于SAE检测.
- 将UCSF-BERT与其他八种候选语言模型进行比较.
主要成果:
- UCSF-BERT实现了最高的数值性能 (精度为88-92%,宏F1为61-68%),表现比以前的模型优于5-10%.
- 在确定与药物使用相关的住院事件方面,UCSF-BERT表现出显著的优势 (P < 0.01).
- 预期功效的失败是最常见的SAE发现.
结论:
- 与以前的方法相比,LLM,特别是UCSF-BERT,在临床笔记中对SAE检测提供了比较高的数值准确性.
- 这些发现凸显了LLM在显著增强药监工作方面的潜力.
- 用多中心数据和先进架构进行进一步的研究是有必要的,以优化这种方法.
更多相关视频
04:09Predicting Treatment Response to Image-Guided Therapies Using Machine Learning: An Example for Trans-Arterial Treatment of Hepatocellular Carcinoma
Published on: October 10, 2018
07:50A Metadata Extraction Approach for Clinical Case Reports to Enable Advanced Understanding of Biomedical Concepts
Published on: September 20, 2018
相关概念视频
Drugs for Treatment of Crohn's Disease in IBD Using Biologic Agents: Anti-TNF
Drugs for Treatment of Crohn's Disease in IBD Using Immunomodulatory Agents
Inflammatory Bowel Disease IV: Pharmacological Management
Pharmacologic...
Drugs for Treatment of Ulcerative Colitis in IBD
Drugs for Treatment of Crohn's Disease in IBD Using Glucocorticoids
Inflammatory Bowel Disease I: Ulcerative Colitis
Inflammatory bowel disease, or IBD, encompasses a group of disorders characterized by chronic inflammation or ulceration of the gastrointestinal tract.
Risk Factors
The exact cause of IBD remains unclear, although it is believed to be due to a mix of genetic, environmental, microbial, and immune factors. Genetic factors are significant in determining susceptibility to IBD, with family history being a critical risk factor. Individuals with a first-degree relative who has IBD are at...
