Atención local temporal con decodificación adaptativa: Mejora de las redes neuronales de espigas para aplicaciones de

Hanxiao Fan1, Hanle Zheng1, Zikai Wang2

  • 1Center for Brain-Inspired Computing Research, Department of Precision Instrument, Tsinghua University, Beijing, 100084, China.

Resumen

Las redes neuronales de espigas (SNN) tienen dificultades con secuencias largas. La atención local temporal (TLA) y la decodificación adaptativa (AD) mejoran las SNN para la computación temporal, mejorando el rendimiento y la velocidad de entrenamiento.