以模式为导向的紫外线恢复实现现实的视频服装纹理

科学领域:

• 计算机视觉 计算机视觉
• 计算机图形 计算机图形
• 电子商务 技术 技术 电子商务

背景情况:

• 电子商务在时尚领域的快速增长需要高效的虚拟展示各种纹理的服装.
• 目前用于视频中虚拟纹理替换的方法是劳动密集型的,依赖于手动编辑或实时捕获.

研究的目的:

• 从真实视频中开发一种基于模式的自动化方法,用于从真实视频中恢复UV和阴影.
• 为了使虚拟时装展示室能够自动更换服装纹理.

主要方法:

• 一个每像素的紫外线回归模块使用混合重量多层感知子 (MLPs),由检测到的布料图案对应驱动.
• 在紫外线映射的雅科比式上有一个新的损失函数,以确保无的纹理应用,特别是在折叠和遮的周围.
• 在视频中进行一致的紫外线预测的时间限制.

主要成果:

• 在各种服装类型,照明条件和运动挑战中提供强大的性能.
• 可信的纹理替代结果与保存的服装折叠和重叠.
• 与现有的基线方法相比,有显著的质量和数量改进.

结论:

• 拟议的基于模式的方法使时尚视频中的纹理更换自动化,大大减少了手工工作.
• 这种方法提供了一键解决方案,有可能促进时尚电子商务的增长.
• 该技术保留了复杂的服装细节,如折叠和重叠,增强了虚拟产品的表现.