Programación basada en DRL para la minimización de AOI en redes de RC con detección perfecta

Área de la Ciencia:

• Redes de comunicaciones inalámbricas
• Teoría de la información
• Inteligencia artificial

Sus antecedentes:

• La Era de la Información (AoI) es crítica para las aplicaciones sensibles al tiempo.
• La optimización de AoI en las redes de Internet de las Cosas (IoT) con restricciones de energía es un desafío.
• Las Redes Cognitivas de Radio (CRN) ofrecen un marco para la utilización eficiente del espectro.

Objetivo del estudio:

• Minimizar la Era de la Información (AoI) en las Redes Cognitivas de Radio (CRN) de un solo usuario y de varios usuarios.
• Desarrollar políticas de programación óptimas para la recolección de energía y la transmisión de datos.
• Evaluar el rendimiento de los algoritmos propuestos con respecto a los métodos existentes.

Principales métodos:

• Formulación del problema de CRN de un solo usuario como un proceso de decisión de Markov parcialmente observable (POMDP).
• Aplicación de la programación dinámica para la toma de decisiones óptima en el caso de un solo usuario.
• Desarrollo de un algoritmo mejorado de Deep Q-Network (DQN) para el escenario de CRN multiusuario.
• Análisis de simulación para comparar las políticas propuestas con una política miope.

Principales resultados:

• El POMDP propuesto y los algoritmos mejorados de DQN superan significativamente a la política de miopía para minimizar el AOI.
• Se identificaron estrategias de programación efectivas para la recolección de energía, la detección de espectro y la transmisión de datos.
• El rendimiento del sistema se analizó bajo varias configuraciones de parámetros, proporcionando información sobre las configuraciones óptimas.

Conclusiones:

• Las técnicas avanzadas de IA, específicamente mejoradas DQN, son efectivas para optimizar la AoI en CRN complejas.
• Los métodos desarrollados proporcionan una solución robusta para administrar la frescura de los datos en entornos de IoT con restricciones de energía.
• El estudio pone de relieve la importancia de la programación sofisticada para las aplicaciones de datos en tiempo real.