Thermal3D-GS: Gaussians 3D inducidos por la física para el infrarrojo térmico Síntesis de visión novedosa con un...

Área de la Ciencia:

• Visión por ordenador Visión por ordenador Visión por ordenador Visión por ordenador Visión por ordenador
• Imágenes térmicas de imágenes térmicas.
• Reconstrucción 3D de la reconstrucción en 3D.

Sus antecedentes:

• Las imágenes infrarrojas térmicas ofrecen capacidades penetrantes para todo tiempo, pero se enfrentan a desafíos en la síntesis de nuevas vistas.
• Los métodos existentes luchan con detalles gruesos y artefactos debido a la transmisión atmosférica y la conducción térmica.
• Estas limitaciones restringen la reconstrucción precisa de las escenas térmicas.

Objetivo del estudio:

• Desarrollar un nuevo método de síntesis de visión específicamente para imágenes térmicas infrarrojas.
• Para abordar factores físicos como la transmisión atmosférica y la conducción térmica.
• Para mejorar la precisión y el detalle de la reconstrucción en escenas térmicas.

Principales métodos:

• Se introdujo Thermal3D-GS, un método de salpicado gaussiano 3D inducido por la física.
• Transmisión atmosférica modelada y conducción térmica utilizando redes neuronales.
• Incorporó priores de características escasas para mejorar la reconstrucción a partir de datos infrarrojos escasos.
• Creado el conjunto de datos de síntesis de infrarrojos térmicos de nueva vista (TI-NSD) para su validación.

Principales resultados:

• Thermal3D-GS logró una mejora de 3,19 dB en la relación pico señal-ruido (PSNR) con respecto a los métodos de referencia.
• El método efectivamente redujo los artefactos flotantes y mejoró la claridad de las características de los bordes.
• Los resultados experimentales validaron la efectividad del método en diversas escenas térmicas.

Conclusiones:

• Thermal3D-GS representa un avance significativo en la síntesis de nuevas vistas en el infrarrojo térmico.
• El enfoque basado en la física y la escasez de características previas mejoran la calidad de la reconstrucción.
• El conjunto de datos y el código publicados facilitan una mayor investigación en este dominio.