谷歌新技术,让观众与 VR 使用者感同身受
最近 Google 开发出了一项新技术,也就是将原本被 VR 设备遮挡的用户表情重新呈现,让 VR 体验影片更加的逼真。这项技术由 Google Research 部门、Daydream Labs 和 YouTube Spaces 团队共同研究,其结合了面部摘取程序、眼球追踪和计算机视觉技术,一分钟之内可以建立用户的 3D 面部模型,同时还会建立眼球视线数据库,让不同的面部图像可以对应特定的眼球视线和眨眼动作。
此外,结合「摘掉头盔」技术,可以通过 VR 头盔搜集来的眼球追踪数据,以及可以和头盔同步的外部摄影机,便能将最初设定的面部模型与真实世界的行为合成,这时候你就能够看到 VR 用户的表情了。当然了,这个表情只能算是高度模拟,因此看起来还是会有些不自然和迟钝,甚至还会引起令人不适的「恐怖谷」现象,为此研究团队将这个模拟表情做成了类似潜水镜的效果,VR 头盔也不会完全移除,这样就会显得更加友好。这项技术未来可以运用至 VR 体验影片中,创作者再也不用担心观众们无法理解 VR 用户的感受了。