TexHOI:在单眼手对象交互场景中重建3D未知对象的纹理
概括
本研究引入了一种用于从视频中重建3D对象纹理的新方法,准确处理由手对象相互作用引起的阴影和照明变化. 它通过模拟手的可见性及其对物体外观的影响来提高纹理保真度.
科学领域:
- 计算机视觉 计算机视觉
- 计算机图形 计算机图形
- 三维重建的3D重建
背景情况:
- 从单眼视频中重建高准确度的3D对象纹理是困难的,原因是阴影,间接照明和手对象相互作用的遮蔽.
- 准确的对象姿势估计是至关重要的,但在闭合的手中具有挑战性.
研究的目的:
- 从单眼框架序列开发高保真度3D物体纹理重建的新方法.
- 为了应对阴影,间接照明和手对象交互所带来的挑战.
- 为了准确估计物体的姿势,并完善表面的白度和照明.
主要方法:
- 预测手对环境可见度和对物体间接照明的影响.
- 通过对辐射场的复合染来学习几何和低保真纹理.
- 优化手和物体姿势,完善基于物理的染参数,以获得精确的白度和照明.
主要成果:
- 在3D对象纹理重建中实现了最先进的性能.
- 在纹理重建中成功考虑了手对象交互.
- 产生精确的白度,精确的手指照明和阴影区域.
结论:
- 拟议的方法显著推进了3D对象纹理重建.
- 它是第一个明确模拟手对象交互的方法,用于此任务.
- 在重建动态场景时提供了更高的真实性和准确性.


