VR看片不再隐蔽，谷歌新技术能看到头显挡住的表情

混合现实（MR）的伟大之处在于，它可以展示人们在VR中正在做什么。

Owlchemy Labs、LIV等初创公司都在努力简化MR拍摄过程，同时还要提升画面质量，但目前这些方法都有一个很大限制。人体最具表现力的部分——脸，在拍摄期间总是被头显挡住。你得自行想象人们与虚拟世界交互时的表情。

谷歌 新研究将MR画面捕获提高到一个新的水平。利用一系列新技术，包括改良的HTC Vive和 SMI眼动追踪 ，谷歌数字化地重建你的脸，用它代替被挡住的本来的脸。

这项成果由谷歌的Research、Daydream Labs和YouTube团队共同努力得来。其工作原理是：

“我们技术背后的核心思想是把用户面部的3D模型拿来代替被遮住的脸。它可用于在MR视频中合成面部，从而给人实现头显被拿掉的印象。首先，我们为用户创建个性化的3D脸部模型。初始校准步骤要求用户坐在彩色深度相机和显示器面前，然后他们用眼睛追踪显示器的标记。我们利用这种一次性校准程序（通常不到一分钟）来获取用户的3D面部模型，并得到一个数据库，眼睛注视方向和眨眼不同，形成的外观图象也不同，一一对应。”