在VR中看见自己的新镜像重建技术
V观世界Oculus新实验室发布了自更名以来的首个重大消息,介绍了一种新的镜像重建技术。
当创建逼真的场景时,最难对付的元素之一是镜子和玻璃窗格,不仅使反射看起来真实,而且使它们在场景中散射光的方式。因此,Facebook Reality Labs已经创建了一个新的全自动管道,用于重建镜子和其他反射平面.
研究科学家Julian Straub说:“镜子类型和形状的多样性在开始时非常令人惊叹。”“设计一个能够处理大部分或全部镜像形状和尺寸的系统是主要目标。然后我们意识到系统也可以使用玻璃表面,只需要一个额外的分类步骤。那太酷了。“
他们了解到,通过识别镜像表面,他们可以重新渲染具有正确几何和反射的场景。这导致了一个捕获装置的创建,其中包括红外深度捕获相机,RGB彩色相机,两个SLAM相机,红外投影仪和系统可以识别的特殊目标。这样即使没有框架也可以识别镜像边界。