Video Experimental Relacionado
Updated: Sep 10, 2025
05:47
Evidence-based Knowledge Synthesis and Hypothesis Validation: Navigating Biomedical Knowledge Bases via Explainable AI and Agentic Systems
Published on: June 13, 2025
575
Inteligencia artificial para la ciencia de la síntesis de evidencia: ¿qué tan buenas son las herramientas impulsadas
Minghao Ruan1, Junhao Fan2, Mingkai Liu3
1The Third Department of Hepatic Surgery, Eastern Hepatobiliary Surgery Hospital, the Naval Medical University, Shanghai, China.
BMC medical research methodology
|August 26, 2025
Resumen
Las herramientas de IA son prometedoras para la selección de literatura, pero aún no son soluciones independientes. Un enfoque híbrido que combina la IA con la experiencia humana ofrece una mayor eficiencia y precisión en la síntesis de pruebas.
Área de la Ciencia:
- La informática médica
- La inteligencia artificial en la investigación
Sus antecedentes:
- El cribado de la literatura es vital para la síntesis de la evidencia, pero requiere mucho tiempo y recursos.
- La inteligencia artificial (IA) ofrece potencial para automatizar la selección de la literatura, pero su precisión y eficacia requieren evaluación.
Objetivo del estudio:
- Evaluar el rendimiento de cinco herramientas de IA (ChatGPT 4.0, Claude 3.5, Gemini 1.5, DeepSeek-V3 y RobotSearch) en el análisis de la literatura.
- Para comparar las métricas de precisión diagnóstica, incluida la fracción de falsos negativos (FNF) y la fracción de falsos positivos (FPF), junto con el tiempo de detección.
Principales métodos:
- Un estudio de precisión diagnóstica utilizando una cohorte de 1.000 publicaciones.
- La cohorte incluyó 500 ensayos controlados aleatorios (ECA) y otras 500 publicaciones.
- Se evaluaron cinco herramientas de IA por su desempeño en la identificación de la literatura relevante.
Principales resultados:
- RobotSearch tuvo el FNF más bajo (6,4%) para los ECA, mientras que Gemini tuvo el más alto (13,0%).
- Para otras publicaciones, los grandes modelos de lenguaje (LLM) tenían FPF significativamente más bajos (2,8%-3,8%) en comparación con RobotSearch (22,2%).
- El tiempo de selección por artículo varió, siendo Gemini (1.2s) y ChatGPT (1.3s) los más rápidos.
Conclusiones:
- Las herramientas de IA demuestran un potencial significativo en el análisis de la literatura, pero aún no son adecuadas para un uso independiente.
- Estas herramientas de IA pueden funcionar como valiosas ayudas auxiliares en el proceso de síntesis de pruebas.
- Se recomienda un enfoque híbrido que integre la experiencia humana con la IA para optimizar tanto la eficiencia como la precisión en la selección de la literatura.
Videos de Conceptos Relacionados
01:16Non-equilibrium in the Cell
4.8K
An important concept in studying metabolism and energy is that of chemical equilibrium. Most chemical reactions are reversible. They can proceed in both directions, releasing energy into their environment in one direction, and absorbing it from the environment in the other direction. The same is true for the chemical reactions involved in cell metabolism, such as the breaking down and building up of proteins into and from individual amino acids, respectively. Reactants within a closed system...
4.8K
01:04Significance Testing: Overview
3.8K
Significance testing is a set of statistical methods used to test whether a claim about a parameter is valid. In analytical chemistry, significance testing is used primarily to determine whether the difference between two values comes from determinate or random errors. The effect of a particular change in the measurement protocol, analyst, or sample itself can cause a deviation from the expected result. In the case of a suspected deviation/outlier, we need to be able to confirm mathematically...
3.8K
01:23Types of Biopharmaceutical Studies: Controlled and Non-Controlled Approaches
174
Biopharmaceutical studies constitute a vital field aiming to enhance drug delivery methods and refine therapeutic approaches, drawing upon diverse interdisciplinary knowledge. In research methodologies, the choice between controlled and non-controlled studies significantly influences the study's reliability and accuracy.
Non-controlled studies, commonly employed for initial exploration, lack a control group, rendering them susceptible to biases and external influences. In contrast,...
Non-controlled studies, commonly employed for initial exploration, lack a control group, rendering them susceptible to biases and external influences. In contrast,...
174
02:07Improving Translational Accuracy
2.7K
2.7K
01:26Drug Discovery: Overview
8.7K
Drug discovery is a multifaceted process involving extensive screening, testing, and optimization of lead compounds to identify potential new drugs for therapeutic use. It combines several approaches, including screening large numbers of natural products, chemical modification of known active molecules, identification of new drug targets, and rational design based on biological mechanisms and drug-receptor structure. These approaches are carried out in both academic research laboratories and...
8.7K
01:16Bioequivalence: Overview
1.2K
Pharmaceutical equivalents, by definition, are drug products with the same active ingredient in the same quantities, encapsulated in identical dosage forms, and intended for the same administration routes. These pharmaceutical equivalents are deemed bioequivalent if the bioavailability of the active entity in the drug preparations is similar. Moreover, pharmaceutical equivalents demonstrating bioequivalence are also regarded as therapeutically equivalent. This means that when used as directed,...
1.2K