Navegación basada en vectores utilizando representaciones tipo cuadrícula en agentes artificiales

Área de la Ciencia:

• La neurociencia
• Inteligencia artificial
• Neurociencia computacional

Sus antecedentes:

• Las redes neuronales profundas sobresalen en muchas tareas pero luchan con la navegación.
• La navegación de los mamíferos se basa en células de cuadrícula en la corteza entorrinal para la representación espacial y la integración de rutas.
• Los agentes artificiales actuales carecen de la sofisticada cognición espacial que se ve en los mamíferos.

Objetivo del estudio:

• Desarrollar un agente de aprendizaje por refuerzo profundo con habilidades de navegación similares a las de los mamíferos mediante el aprovechamiento de las funciones de las células de red.
• Investigar si las representaciones tipo cuadrícula pueden mejorar el rendimiento de los agentes en entornos difíciles.
• Explorar los beneficios computacionales de las representaciones emergentes de cuadrícula para la navegación.

Principales métodos:

• Entrenó una red neuronal recurrente para realizar la integración de rutas, observando el surgimiento de representaciones tipo cuadrícula.
• Utilizó estas representaciones emergentes en forma de cuadrícula como base para un agente de navegación de aprendizaje de refuerzo profundo.
• Evaluación del rendimiento del agente frente a humanos expertos y agentes de comparación en entornos desconocidos y cambiantes.

Principales resultados:

• La red recurrente desarrolló representaciones similares a las células de cuadrícula y otras células entorrinas.
• Los agentes con representaciones tipo cuadrícula superaron significativamente a los expertos humanos y otros agentes en las tareas de navegación.
• Las unidades emergentes en forma de cuadrícula proporcionaron cantidades métricas para la navegación basada en vectores y permitieron comportamientos de atajo.

Conclusiones:

• Las representaciones emergentes en forma de cuadrícula proporcionan a los agentes una métrica espacial euclidiana y operaciones vectoriales, cruciales para una navegación competente.
• Este enfoque apoya las teorías neurocientíficas sobre el papel de las células de cuadrícula en la navegación basada en vectores.
• La combinación de estrategias basadas en rutas y vectores utilizando representaciones tipo cuadrícula mejora la navegación en entornos complejos y dinámicos.