Evaluación de las respuestas de los chatbots de inteligencia artificial al proporcionar información sobre la vacuna...

Área de la Ciencia:

• Inteligencia artificial en la atención médica
• Comunicación de salud pública
• Informática médica

Sus antecedentes:

• El creciente uso de chatbots de inteligencia artificial para la búsqueda de información sobre salud genera preocupación debido a sus orígenes no médicos.
• La calidad de las respuestas de los chatbots de inteligencia artificial varía, y los datos médicos limitados de entrenamiento afectan la precisión y la legibilidad.
• La investigación existente muestra hallazgos mixtos sobre la calidad de las respuestas de salud de los chatbots de inteligencia artificial, lo que requiere una mayor investigación.

Objetivo del estudio:

• Evaluar el rendimiento de los chatbots de inteligencia artificial en la respuesta a consultas relacionadas con el virus del papiloma humano (VPH).
• Analizar la estructura, las características lingüísticas, la precisión, la actualidad y la postura de vacunación de las respuestas de los chatbots de inteligencia artificial.
• Evaluar la idoneidad de los chatbots de inteligencia artificial como fuente de información sobre la vacuna contra el VPH.

Principales métodos:

• Análisis cualitativo de contenido de las respuestas de cuatro chatbots de inteligencia artificial (ChatGPT 4, Claude 3.7 Sonnet, DeepSeek V3, Docus) a preguntas sobre la vacuna contra el VPH.
• Simulación de consultas de usuarios adaptadas de la Escala de Creencias sobre la Conspiración de Vacunas y Google Trends.
• Análisis de la estructura de la respuesta, características lingüísticas, precisión de la información, actualidad, postura de vacunación y legibilidad (Flesch-Kincaid).

Principales resultados:

• Todos los chatbots citaron fuentes confiables y proporcionaron datos precisos, remitiendo las consultas complejas a los profesionales de la salud.
• Los chatbots mantuvieron una postura neutral o a favor de la vacunación, alineándose con el consenso científico.
• La duración de las respuestas y la legibilidad variaron significativamente; ChatGPT y Claude ofrecieron personalización, a diferencia de DeepSeek y Docus.
• Algunos enlaces estaban rotos o eran irrelevantes, y ocasionalmente se utilizó jerga médica.

Conclusiones:

• Los chatbots de inteligencia artificial muestran potencial como fuentes precisas de información sobre el VPH, complementando las plataformas en línea tradicionales.
• Se recomiendan mejoras en la legibilidad, la personalización y la precisión de los enlaces para los chatbots de inteligencia artificial.
• Los usuarios deben considerar los chatbots de inteligencia artificial como herramientas complementarias, no como reemplazos de la orientación profesional de la atención médica.