在大型语言模型中进行火车时间和测试时间计算,用于电子医疗记录中的错误检测和纠正:一项回顾性研究
Qiong Cai1, Lanting Yang1, Jiangping Xiao1
1Department of Social Medicine and Health Education, School of Public Health, Peking University, Beijing 100191, China.
在大型语言模型中将火车时间和测试时间计算结合起来,可以显著改善电子医疗记录质量管理. 组装模型实现了比单个模型更高的准确性,平衡了效率和性能,以获得更好的临床文档.
科学领域:
- 人工智能的人工智能
- 医疗信息学 医疗信息学
- 自然语言处理自然语言处理.
背景情况:
- 电子医疗记录 (EMR) 质量管理系统需要有效和准确的临床文档.
- 大型语言模型 (LLM) 在提高EMR质量方面表现有前途,但需要优化计算策略.
研究的目的:
- 评估火车时间计算,测试时间计算及其组合对EMR质量管理中的LLM绩效的有效性.
- 确定最佳的LLM策略,以提高临床文档的准确性和效率.
主要方法:
- 从MEDEC-MS数据集中利用了597份临床医疗记录进行LLMs的培训和测试.
- 雇佣了8名LLM,专注于火车时间和测试时间计算策略.
- 使用精度,回忆,F1得分和错误纠正精度评估模型性能;使用后勤回归开发了一个装配模型.
主要成果:
- GPT-4和Deepseek R1显示出高的错误检测准确度.
- 列车时间计算模型提供了更快的推理和更严格的错误检测;测试时间计算模型在错误纠正准确度方面表现出色.
- 集成两种策略的组装模型显著优于单个LLM (0.690对0.477准确度).
结论:
- 列车时间计算的LLM提高了处理速度,而测试时间计算的LLM提高了EMR质量问题的准确性和可解释性.
- 结合火车时间和测试时间计算策略,提供了一种平衡的方法来提高EMR开发和医疗保健质量.
更多相关视频
07:31Implementation of a Real-Time Psychosis Risk Detection and Alerting System Based on Electronic Health Records using CogStack
Published on: May 15, 2020
06:09P300-Based Brain-Computer Interface Speller Performance Estimation with Classifier-Based Latency Estimation
Published on: September 8, 2023
相关概念视频
Methods of Documentation VII: EMR
Detection of Gross Error: The Q Test
Improving Translational Accuracy
Types of Errors: Detection and Minimization
Absolute error in a measurement is the numerical difference from the true or central value. Relative error is the ratio between absolute error and the true or central value, expressed as a percentage.
Errors can be classified by source, magnitude, and sign. There are three types of errors: systematic, random, and gross.
Systematic or...
Methods of Documentation II: POMR
Errors occurring during blood pressure monitoring
Several factors...
