Integración de granularidad multijerárquica impulsada por el aprendizaje profundo para la comprensión de la escena...

Área de la Ciencia:

• La visión por computadora en la cirugía
• Inteligencia artificial en la medicina
• Ciencia de los datos quirúrgicos

Sus antecedentes:

• La comprensión por computadora de las escenas quirúrgicas es vital para la asistencia quirúrgica inteligente.
• La información de la escena quirúrgica incluye tanto los datos generales del proceso (de grano grueso) como los de operaciones específicas (de grano fino).
• Se necesitan conjuntos de datos estandarizados y IA avanzada para respaldar las aplicaciones clínicas.

Objetivo del estudio:

• Construir un conjunto de datos estandarizado y anotado para la nefrectomía radical laparoscópica.
• Desarrollar un marco de aprendizaje profundo para integrar información de granularidad multijerárquica.
• Apoyar aplicaciones clínicas inteligentes a través de una mejor comprensión de la escena quirúrgica.

Principales métodos:

• Se recogieron 41 vídeos multicéntricos y se realizaron anotaciones exhaustivas (fases, pasos, segmentación de instrumentos, triplets de acción quirúrgica).
• Diseñó un marco de aprendizaje profundo ligero para la percepción simultánea de información de granularidad múltiple.
• Desarrolló un modelo de predicción de hemorragias intraoperatorias y un informe de resumen quirúrgico automatizado.

Principales resultados:

• El conjunto de datos contiene 141,443 marcos con anotaciones de fase / paso, 8,435 con segmentación de instrumentos y 25,305 con tripletes de acción quirúrgica.
• El marco de aprendizaje profundo superó a los algoritmos de última generación en varias tareas de granularidad.
• Se identificaron pasos quirúrgicos clave que involucran a la arteria renal, la vena y el uréter como predictores críticos del riesgo de hemorragia.

Conclusiones:

• Desarrolló el primer conjunto de datos completamente anotado para la nefrectomía radical laparoscópica.
• Creado un nuevo marco para la mejora bidireccional de la información quirúrgica gruesa y de grano fino.
• Estableció las bases para el avance de la cirugía inteligente a través de un ciclo de aplicación de datos y algoritmos.