Máquina de visión ultrarrápida con sensores de imagen de red neuronal de material 2D

Área de la Ciencia:

• Optoelectrónica y sus derivados
• Inteligencia artificial
• Ciencias de los materiales

Sus antecedentes:

• Los sistemas de visión artificial utilizan comúnmente cámaras basadas en fotogramas y redes neuronales artificiales (ANN), lo que lleva a una alta redundancia de datos, bajas velocidades de fotogramas y un consumo de energía significativo.
• Las técnicas de preprocesamiento de datos visuales existentes tienen como objetivo mejorar la eficiencia de las RAN, pero no abordan los problemas fundamentales de latencia y potencia de la tubería de sensores a procesadores.

Objetivo del estudio:

• Demostrar un sensor de imagen capaz de realizar cálculos de red neuronal artificial (ANN), permitiendo así la detección y el procesamiento simultáneos de imágenes.
• Desarrollar un nuevo dispositivo que integre la detección y el procesamiento para superar las limitaciones de los sistemas convencionales de visión artificial.

Principales métodos:

• Utilizó una matriz de fotodiodos semiconductores reconfigurables bidimensionales (2D) como el núcleo de la red neuronal artificial (ANN).
• Implementó una matriz de fotorresponsividad ajustable continuamente para almacenar y ajustar pesos sinápticos dentro del sensor.
• Demostró paradigmas de aprendizaje supervisado y no supervisado en el sensor integrado.

Principales resultados:

• El sensor de imagen desarrollado funciona como una red neuronal artificial (ANN), realizando la detección y el procesamiento simultáneamente con una latencia mínima.
• El dispositivo clasificó y codificó con éxito imágenes proyectadas ópticamente con un alto rendimiento de 20 millones de contenedores por segundo.
• Se logra un procesamiento de imágenes eficiente directamente en el nivel del sensor, evitando los cuellos de botella tradicionales de conversión y transferencia de datos.

Conclusiones:

• La nueva arquitectura del sensor de imagen combina efectivamente el procesamiento de la red neuronal artificial (ANN), lo que ofrece un avance significativo en la visión artificial.
• Este enfoque integrado promete mejorar la velocidad y la eficiencia energética de los sistemas inteligentes como los vehículos autónomos y la robótica.
• El conjunto de fotodiodos reconfigurables demostrado abre nuevas vías para aplicaciones de procesamiento de datos ópticos de baja latencia y alto rendimiento.