谷歌的混合现实技术可让VR设备的玩家重新露面
在 YouTube 上的混合实现视频都非常好玩,能看到玩家如何在 VR 世界里畅游,其中一个例子就是 Conan O'Brien 到访 YouTube 的 VR 实验室时在 Tilt Brush 应用里创作。不过这种视频在拍摄时还是有个小问题,就是玩家的面孔都会被 VR 设备遮盖着,谷歌研究团队和 Daydream 实验室就联合一起想办法,结果就想到了利用机器学习、3D 电脑视觉和进阶渲染技术的互相配合来解决问题。为了把视频中的 VR 设备「拿走」,拍摄前需要先用相机扫描玩家的面孔,并以动态 3D 模型来重构不同角度的表现。然后就是利用眼部追踪技术来侦测视频里,玩家的眼应该望向哪方,也就是上图 HTC Vive 上的白色标签。谷歌和 Daydream 联合一起想出的这套技巧能让 3D 模型能还原真人的面孔,但玩