Correlation of Colorectal Surgical Skill With Patient Outcomes: A Cautionary Tale

Previous work has demonstrated a correlation between video ratings of surgical skill and clinical outcomes. Some have proposed the use of video review for technical skill assessment, credentialing, and quality improvement.

Before its adoption as a quality measure for colorectal surgeons, we must first determine whether video-based skill assessments can predict patient outcomes among specialty surgeons.

Twenty-one surgeons submitted one representative video of a minimally invasive colectomy. Each video was edited to highlight key steps and then rated by 10 peer surgeons using a validated American Society of Colon and Rectal Surgeons assessment tool. Linking surgeons' ratings to a validated surgical outcomes registry, we assessed the relationship between skill and risk-adjusted complication rates.

The study was conducted with the Michigan Surgical Quality Collaborative, a statewide collaborative including 70 community, academic, and tertiary hospitals.

Patients included those who underwent minimally invasive colorectal resection performed by the participating surgeons.

Main outcome measures included 30-day risk-adjusted postoperative complications.

The average technical skill rating for each surgeon ranged from 2.6 to 4.6. Risk-adjusted complication rate per surgeon ranged from 9.9% to 33.1%. Patients of surgeons in the bottom quartile of overall skill ratings were older and more likely to have hypertension or to smoke; patients of surgeons in the top quartile were more likely to be immunosuppressed or have an ASA score of 3 or higher. After patient- and surgery-specific risk adjustment, there was no statistically significant difference in complication rates between the bottom and top quartile surgeons (17.5% vs 16.8%, respectively, p = 0.41).

Limitations included retrospective cohort design with short-term follow-up of sampled cases. Videos were edited to highlight key steps, and reviewers did not undergo training to establish norms.

Our study demonstrates that video-based peer rating of minimally invasive colectomy was not correlated with postoperative complications among specialty surgeons. As such, the adoption of video review for use in credentialing should be approached with caution. See Video Abstract at http://links.lww.com/DCR/B802.CORRELACIÓN ENTRE LA HABILIDAD QUIRÚRGICA COLORRECTAL Y LOS RESULTADOS OBTENIDOS EN EL PACIENTE: RELATO PRECAUTORIOANTECEDENTES:Trabajos anteriores han demostrado una correlación entre la video-calificación de la habilidad quirúrgica y los resultados clínicos. Algunos autores han propuesto el uso de la revisión de videos para la evaluación de la habilidad técnica, la acreditación y la mejoría en la calidad quirúrgica.OBJETIVO:Antes de su adopción como medida de calidad entre los cirujanos colorrectales, primero debemos determinar si las evaluaciones de habilidades basadas en video pueden predecir los resultados clínicos de los pacientes entre cirujanos especializados.DISEÑO:Veintiún cirujanos enviaron un video representativo de una colectomía mínimamente invasiva. Cada video fue editado para resaltar los pasos clave y luego fué calificado por 10 cirujanos revisores utilizando una herramienta de evaluación validada por la ASCRS. Al vincular las calificaciones de los cirujanos al registro de resultados quirúrgicos aprobado, evaluamos la relación entre la habilidad y las tasas de complicaciones ajustadas al riesgo.AJUSTE:Colaboración en todo el estado incluyendo 70 hospitales comunitarios, académicos y terciarios, el Michigan Surgical Quality Collaborative.PACIENTES:Todos aquellos sometidos a resección colorrectal mínimamente invasiva realizada por los cirujanos participantes.MEDIDA DE RESULTADO PRINCIPAL:Complicaciones posoperatorias ajustadas al riesgo a los 30 días.RESULTADOS:La calificación de la habilidad técnica promedio de cada cirujano osciló entre 2.6 y 4.6. La tasa de complicaciones ajustada al riesgo por cirujano osciló entre el 9,9% y el 33,1%. Los pacientes operados por los cirujanos del cuartil inferior de las calificaciones generales de habilidades eran fumadores y añosos, y tambiés más propensos a la hipertensión arterial. Los pacientes operados por los cirujanos del cuartil superior tenían más probabilidades de ser inmunosuprimidos o tener una puntuación ASA> = 3. Después del ajuste de riesgo específico de la cirugía y el paciente, no hubo diferencias estadísticamente significativas en las tasas de complicaciones entre los cirujanos del cuartil inferior y superior (17,5% frente a 16,8%, respectivamente, p = 0,41).LIMITACIONES:Diseño de cohortes retrospectivo con seguimiento a corto plazo de los casos muestreados. Los videos se editaron para resaltar los pasos clave y los revisores no recibieron capacitación para establecer normas.CONCLUSIONES:Nuestro estudio demuestra que la evaluación realizada por los revisores basada en el video de la colectomía mínimamente invasiva no se correlacionó con las complicaciones post-operatorias entre los cirujanos especialistas. Por tanto, la adopción de la revisión del video quirúrgico para su uso en la acreditación profesional, debe abordarse con mucha precaución. Consulte Video Resumen en http://links.lww.com/DCR/B802. (Traducción-Dr. Xavier Delgadillo).