用少数RGBD摄像头进行桌面远程存在的学习视图合成
IEEE transactions on visualization and computer graphics
|June 14, 2024
概括
这项研究介绍了使用商品硬件和新型神经染器的成本效益高的远程存在系统. 它实现了高质量的视图合成,用于可访问的桌面远程存在.
科学领域:
- 计算机视觉 计算机视觉
- 计算机图形 计算机图形
- 人与计算机的交互
背景情况:
- 现有的远程存在系统面临的是成本和质量之间的权衡.
- 需要价格实惠,高质量的远程存在解决方案,以便广泛采用.
- 商品硬件的限制阻碍了可访问的远程存在的发展.
研究的目的:
- 开发一种高质量的,具有成本效益的视图合成方法,用于远程存在.
- 为了使远程存在系统成为典型桌面的商品.
- 介绍一个使用商品RGBD摄像头的新型神经染器.
主要方法:
- 提出了一个神经染器,使用一些RGBD摄像头进行新的视图合成.
- 引入多层点云 (MPC) 通过减轻深度摄像头偏差来提高3D重建准确性.
- 实现了一个时态感知染器和空间跳过连接 (SSC) 以提高视频稳定性和高效的升级样本.
主要成果:
- 建议的染器在合成质量方面明显优于最近的方法.
- 该方法展示了对新用户的概括性和复杂的内容,如手势和衣服变形.
- 在没有每视频优化,对象模板或重量级预处理的情况下获得高质量的结果.
结论:
- 开发的系统为商品远程存在系统提供了可行的途径.
- 新的MPC表示和染技术使高保真度视图合成从成本效益的硬件.
- 这种方法很强大,很好地泛化,为可访问,高质量的远程存在铺平了道路.
更多相关视频
06:28A Networked Desktop Virtual Reality Setup for Decision Science and Navigation Experiments with Multiple Participants
Published on: August 26, 2018
6.0K
09:55Bridging the Technology Divide in the COVID-19 Era: Using Virtual Outreach to Expose Middle and High School Students to Imaging Technology
Published on: September 28, 2022
1.6K
