用IARF和自适应射线采样进行3D光场显示的光场生成

科学领域:

• 计算机视觉 计算机视觉
• 计算机图形 计算机图形
• 3D显示技术 3D显示技术

背景情况:

• 从真实场景中生成高质量的光场用于3D显示是具有挑战性的.
• 神经辐射场具有先进的光场生成,但与速度和圆柱形视角合成作斗争.
• 现有的方法在360度场景的染时间和细节方面存在局限性.

研究的目的:

• 为增强光场生成提出即时自适应辐射场 (IARF) 方法.
• 为了提高质量和减少合成高保真度3D光场的培训时间.
• 为了实现无限场景几何和任意视角的现实化染.

主要方法:

• 引入了适应性射线采样,用于在射线行进期间在被占用和未被占用空间的重新采样点.
• 使用体积采样一致性 (VSC) 损失来保持一致性并减少训练时间.
• 采用了一种代网络结构,用于沿射线重新采样点,以确保收.
• 整合了扭曲损失,以优化无边界的场景几何形状,以实现现实的染.
• 实现了预期的视角染与向后射线跟踪用于直接图像合成.

主要成果:

• 通过IARF的方法,在显著缩短的培训时间内,实现了对360度场景更详细的视角生成.
• 实验结果显示,与既定方法相比,PSNR的平均改善值为2.14dB,训练时间约为9分钟.
• 废除研究验证了VSC损失和扭曲损失的有效性.
• 该方法在任意位置和视角上成功生成了合成图像,克服了视野限制.
• 在一个大视角的高分辨率3D光场显示器上实现了光滑运动抛物线.

结论:

• IARF的方法有效地提高了合成光场质量,并减少了3D光场显示器的培训时间.
• 提出的技术,包括自适应射线采样和VSC损失,有助于提高图像质量和训练效率.
• IARF为3D光场应用中的现实场景合成提供了一个有前途的解决方案.
• 该方法能够染任意的视角并实现平滑的运动偏差对于沉浸式3D体验至关重要.