详细指令与通用指令对精细调整的语言模型对患者出院指令的影响 生成:比较统计分析
Muneerah Alqahtani1,2, Abdullah Al-Barakati1, Fahd Alotaibi1
1Information System Department, Faculty of Computing and Information Technology, King Abdulaziz University, Jeddah, Saudi Arabia.
详细的说明显著改善了用于生成患者出院说明的大型语言模型 (LLM). 特定任务的微调可以提高LLM的绩效,创造清晰准确的医院后护理指导.
科学领域:
- 人工智能的人工智能
- 自然语言处理自然语言处理.
- 医疗信息学 医疗信息学
背景情况:
- 出院说明书对于患者护理至关重要,但需要大量的劳动力来创建.
- 大型语言模型 (LLM) 为自动生成放电说明提供了一个潜在的解决方案.
- 本研究评估了开源LLM对此任务的有效性.
研究的目的:
- 评估Mistral大型语言模型 (LLM) 在生成可靠,以患者为导向的出院指令方面的能力.
- 为了比较两种不同的指令调整策略来微调LLM:详细的,特定任务的指令与通用的,最小的指导.
- 确定指令设计对生成的放电指令质量的影响.
主要方法:
- 使用了Mistral-NeMo-Instruct大型语言模型 (LLM).
- 微调了LLM使用两种教学策略:详细的,特定任务的指导和通用的,最小的指导.
- 对3621个基准真相引用进行评估,使用多个指标,包括BLEU,ROUGE,句子转换器相似性和BERTScore.
主要成果:
- 该模型以详细的,特定任务的指令进行了微调,在所有自动化评估指标上显著超过了通用指令模型.
- 关键指标显示了显著的改善:BERTScore从78.92%提高到87.05%,ROUGE-L从8.59%提高到26.52%,BLEU-4从0.81%提高到21.24%,ROUGE-1从16.59%提高到42.72%.
- 所有观察到的改善均具有统计学意义 (P<.001),证实了详细的指令设计的好处.
结论:
- 详细的,特定任务的指令策略在提高开源大型语言模型 (LLM) 生成放电指令的性能方面非常有效.
- 在微调过程中精心设计的说明对于最大限度地提高医学应用中的LLM性能至关重要.
- 这种方法在提高患者出院沟通的效率和质量方面具有显著的前景.
更多相关视频
05:47Evidence-based Knowledge Synthesis and Hypothesis Validation: Navigating Biomedical Knowledge Bases via Explainable AI and Agentic Systems
Published on: June 13, 2025
06:48Lexical Decision Task for Studying Written Word Recognition in Adults with and without Dementia or Mild Cognitive Impairment
Published on: June 25, 2019
相关概念视频
Guidelines for Nursing Documentation I
Factual:
The following points emphasize the significance of upholding accurate and unbiased documentation in healthcare.
Discharge Summary Forms
Here's a detailed look at the key components and guidelines for preparing a discharge summary:
Dosage Regimen: Individualization
Guidelines for Writing Outcome
Patient outcomes reflect the patient's response to the goal rather than what the nurse aims to achieve. Terminology should be observable and measurable to avoid the reader's interpretation. The desired outcome should be realistic and achievable in the designated care timeframe. Expected outcomes should align with adjunctive therapies. The outcome should enhance care...
Types of Reports III: Telephone and Verbal Reports
Here's an overview of each type:
Telephone Orders
Improving Translational Accuracy
