Guía de meta-rutas para la destilación de políticas en la coordinación resiliente de enjambres autónomos no...

Área de la Ciencia:

• Robótica
• Inteligencia Artificial
• Ciencia de Redes

Sus antecedentes:

• Mejorar la resiliencia de los Enjambres Autónomos No Tripulados (AUS) es fundamental para una operación eficaz bajo interrupciones.
• Los métodos actuales de aprendizaje por refuerzo (RL) a menudo pasan por alto dependencias complejas de múltiples saltos en las interacciones entre subsistemas.
• La semántica heterogénea y las meta-rutas son cruciales para políticas de coordinación robustas.

Objetivo del estudio:

• Desarrollar un marco novedoso, Destilación de Políticas Guiada por Meta-Rutas para Coordinación Resiliente (MPGPD-RC), para mejorar la resiliencia de AUS.
• Abordar las limitaciones de los enfoques de RL existentes en el manejo de interrupciones estructuradas y dependencias complejas.
• Permitir políticas de AUS que sigan siendo efectivas bajo perturbaciones severas mediante el modelado de interacciones de alto orden.

Principales métodos:

• MPGPD-RC acopla incrustaciones guiadas por meta-rutas utilizando atención de grafos específica de ruta con reconstrucción contrastiva y fusión de atención.
• Se emplea un esquema profesor-alumno, con un profesor PPO que proporciona trayectorias y un alumno que alinea las distribuciones de acciones y los códigos estructurales.
• Se utiliza el aprendizaje contrastivo consciente de la ruta para capturar dependencias complejas, ordenadas y dirigidas de múltiples saltos.

Principales resultados:

• MPGPD-RC supera consistentemente a las bases de referencia de última generación en varios escenarios de perturbación.
• El marco modela eficazmente dependencias complejas y de alto orden cruciales para la coordinación resiliente.
• Las evaluaciones empíricas demuestran un rendimiento superior en el mantenimiento de la eficacia del enjambre bajo interrupciones estructuradas.

Conclusiones:

• MPGPD-RC ofrece un avance significativo en la creación de políticas de coordinación resilientes para Enjambres Autónomos No Tripulados.
• El método propuesto captura y aprovecha con éxito las intrincadas dependencias entre subsistemas, superando a los enfoques existentes.
• Este marco proporciona una solución robusta para mejorar la fiabilidad de los enjambres autónomos en entornos desafiantes.