Replantear la energía libre esperada: Cuatro formulaciones y una unificación

Área de la Ciencia:

• Neurociencia Computacional
• Aprendizaje Automático
• Robótica
• Psicología

Sus antecedentes:

• La inferencia activa es una teoría unificadora para la percepción, el aprendizaje y la toma de decisiones en múltiples disciplinas científicas.
• Se basa en la energía libre esperada, con formulaciones existentes como riesgo/ambigüedad y ganancia de información que carecen de una derivación unificada.
• El principio de energía libre proporciona un marco fundamental para comprender estos procesos en sistemas biológicos y artificiales.

Objetivo del estudio:

• Formalizar el problema de unificación de derivar varias formulaciones de energía libre esperada a partir de una única definición raíz.
• Analizar dos enfoques distintos para definir la energía libre esperada y sus justificaciones matemáticas.
• Investigar las implicaciones de las restricciones de verosimilitud en las preferencias previas dentro de los procesos de decisión de Markov parcialmente observables (POMDP).

Principales métodos:

• Análisis de dos definiciones principales de energía libre esperada: riesgo sobre observaciones más ambigüedad, y riesgo sobre estados más ambigüedad.
• Examen matemático de las condiciones bajo las cuales se pueden recuperar diferentes formulaciones de energía libre esperada.
• Demostración de cómo las restricciones de verosimilitud impactan la selección de preferencias previas sobre observaciones en los POMDP.

Principales resultados:

• La primera definición (riesgo sobre observaciones más ambigüedad) permite recuperar todas las formulaciones bajo una suposición de verosimilitud específica, pero restringe las preferencias previas en los POMDP.
• La segunda definición (riesgo sobre estados más ambigüedad) ofrece una justificación pero solo tiene en cuenta dos formulaciones específicas (riesgo sobre estados más ambigüedad y entropía más energía esperada).
• Una clase limitada de preferencias previas sobre observaciones es compatible con el mapeo de verosimilitud del modelo generativo en los POMDP.

Conclusiones:

• La unificación de las formulaciones de energía libre esperada requiere una cuidadosa consideración de la definición elegida y sus suposiciones subyacentes.
• Las restricciones de verosimilitud juegan un papel crítico en la determinación de las preferencias previas válidas, particularmente en sistemas complejos como los POMDP.
• Se necesita más investigación para reconciliar completamente las diferentes formulaciones de energía libre esperada dentro del principio de energía libre más amplio, especialmente para sistemas sin fluctuaciones aleatorias.