Percepción visual ultrarrápida más allá de las capacidades humanas habilitada por el análisis de movimiento...

Área de la Ciencia:

• Robótica e ingeniería neuromórfica.
• Computación inspirada en la biología.
• Hardware de visión por computadora Hardware de visión por computadora

Sus antecedentes:

• Los algoritmos actuales de flujo óptico, aunque son efectivos en los puntos de referencia, exhiben retrasos en el tiempo que dificultan las aplicaciones robóticas del mundo real.
• Los sistemas visuales biológicos ofrecen información sobre el procesamiento eficiente del movimiento, particularmente la vía del núcleo geniculado lateral de la retina (LGN).
• Necesidad de soluciones de hardware que puedan procesar señales de movimiento temporal rápidamente para entornos dinámicos.

Objetivo del estudio:

• Desarrollar un hardware neuromórfico de atención temporal para la extracción directa basada en hardware de señales de movimiento temporal.
• Para superar las limitaciones de los algoritmos de flujo óptico convencionales mediante la reducción de los retrasos en el tiempo de procesamiento.
• Mejorar las capacidades robóticas en entornos dinámicos a través del análisis de movimiento ultrarrápido.

Principales métodos:

• Emulación de la interacción retina-LGN utilizando una matriz bidimensional de transistores sinápticos.
• Codificar los cambios de brillo y acumularlos en estados analógicos no volátiles para generar regiones de interés (ROI).
• Utilizando ROIs como entradas para algoritmos de flujo óptico y visión aguas abajo.

Principales resultados:

• Análisis de movimiento ultrarrápido demostrado con una aceleración del 400% en comparación con los algoritmos de última generación.
• El rendimiento alcanzado supera la velocidad a nivel humano, manteniendo o mejorando la precisión.
• El hardware del transistor sináptico exhibe una respuesta de alta frecuencia (~ 100 μs), no volatilidad (> 10,000 s) y alta resistencia (> 8,000 ciclos).

Conclusiones:

• El hardware neuromórfico de atención temporal desarrollado acelera significativamente el análisis de movimiento para la robótica.
• Este enfoque basado en hardware ofrece una solución viable para la percepción robótica en tiempo real en escenarios dinámicos.
• El sistema aprovecha los priores temporales para una mayor precisión y velocidad, allanando el camino para la visión robótica avanzada.