Evaluación de la reconstrucción 3D a partir de una sola imagen para la generación de modelos de plantas

Área de la Ciencia:

• Visión por Computadora
• Biología Computacional
• Ciencia de las Plantas

Sus antecedentes:

• La reconstrucción 3D precisa de plantas a partir de imágenes únicas es vital para la fenotipificación de alto rendimiento en el mejoramiento de cultivos y la agricultura de precisión.
• Los métodos 2D tradicionales no logran capturar la morfología compleja y ocluida de las plantas, lo que requiere técnicas 3D avanzadas.
• Los métodos generativos 3D existentes no se validan sistemáticamente para desafíos específicos de las plantas, como la geometría intrincada y las oclusiones.

Objetivo del estudio:

• Evaluar y comparar sistemáticamente el rendimiento de seis técnicas generativas 3D avanzadas para la reconstrucción de modelos de plantas a partir de imágenes de vista única.
• Identificar el enfoque generativo más eficaz para capturar estructuras complejas de plantas y rasgos volumétricos.
• Proporcionar información sobre las capacidades y limitaciones de los métodos actuales de reconstrucción 3D para la digitalización de plantas.

Principales métodos:

• Se evaluaron seis técnicas generativas (Hunyuan3D 2.0, Trellis, One2345++, InstantMesh, Direct3D, Unique3D) utilizando el conjunto de datos PlantDreamer.
• Se reconstruyeron modelos de malla de plantas de judía a partir de imágenes únicas.
• La evaluación cuantitativa utilizó la Distancia de Chamfer, la Consistencia Normal, la Puntuación F, PSNR, LPIPS y la Puntuación CLIP en comparación con los modelos de referencia.

Principales resultados:

• Hunyuan3D 2.0 demostró un rendimiento general superior en la reconstrucción de modelos 3D realistas de plantas.
• El estudio proporciona comparaciones cuantitativas y cualitativas de los métodos probados en plantas de judía, col rizada y menta.
• Los resultados resaltan la efectividad de Hunyuan3D 2.0 para capturar la geometría y las estructuras complejas de las plantas.

Conclusiones:

• Hunyuan3D 2.0 es un método muy eficaz para la reconstrucción 3D de plantas a partir de una sola vista.
• La evaluación sistemática ofrece una guía valiosa para seleccionar y mejorar los modelos generativos 3D en la ciencia de las plantas.
• Esta investigación avanza la digitalización no destructiva de plantas para aplicaciones agrícolas.