谷歌的混合现实技术可让VR设备的玩家重新露面_3DM单机

在 YouTube 上的混合实现视频都非常好玩，能看到玩家如何在 VR 世界里畅游，其中一个例子就是 Conan O’Brien 到访 YouTube 的 VR 实验室时在 Tilt Brush 应用里创作。不过这种视频在拍摄时还是有个小问题，就是玩家的面孔都会被 VR 设备遮盖着，谷歌研究团队和 Daydream 实验室就联合一起想办法，结果就想到了利用机器学习、3D 电脑视觉和进阶渲染技术的互相配合来解决问题。

为了把视频中的 VR 设备「拿走」，拍摄前需要先用相机扫描玩家的面孔，并以动态 3D 模型来重构不同角度的表现。然后就是利用眼部追踪技术来侦测视频里，玩家的眼应该望向哪方，也就是上图 HTC Vive 上的白色标签。谷歌和 Daydream 联合一起想出的这套技巧能让 3D 模型能还原真人的面孔，但玩家却不需要完全脱下 VR 设备。完成品就像上图右下角所显示的，把原来被 Vive 遮住的部分给透明化。

一如所料的，这技巧能让 YouTuber 们简化后制的工作。当日后 VR 设备和相关的应用都成为主流之后，拍摄人们游玩 VR 内容的视频就会变得更传神、更有趣了。