《Alteration》:这部 VR 电影用上了 Facebook 的风格转移算法
在 VR 电影《Alteration》中,男主角 Alexandro 志愿参与了一个科学实验。他没有意识到,研究人员在做一项危险的研究。这些人想操控他的潜意识,用人工智能 Elsa 取代他对妻子的所有记忆。为了在影片中展现人工智能,电影导演 Jerome Blanquet 找到了 Facebook 的人工智能研究员。
Blanquet 想以视觉化的方法展现人工智能操控意识的过程。最初,他想用传统的动画工具,但后来,他了解到 Facebook 的人工智能研究员开发了一种风格转移算法。于是,他开始思考能否将其应用到 VR 电影之上。“通过模仿 Alexandro 妻子的绘画,Elsa 想要取代她的位置,”Blanquet 对 Fastcompany 网站 说,“当你考虑到电影中的情节,风格转移是最合乎情理的。”
《Alteration》的执行制片人 Yelena Rachitsky 在 Oculus 工作。她解释说,在展示风格转移上,VR 是一个很好的媒介,因为 VR 没有现实世界的各种限制。“如果这是一部传统电影,效果就会不一样了,因为你无法沉浸其中。在 VR 中,一切都在变化,但它又能牢牢抓住你的注意力。它完全改变了你的观影体验。”
在电影开始拍摄之前,FAIR(Facebook 人工智能研究)实验室的人员就开始参与其中。FAIR 的科学家 Antoine Bordes 说,“项目一开始,我们就加入了,向他们展示了人工智能的潜力所在。”他还提到了研究人员面临的一项挑战。FAIR 开发的风格转移算法适用于移动设备和 4K 视频,但研究人员不知道它能否用于 VR 电影。不过,对未知的探索正是乐趣所在。
“如果一开始就有成功的把握,我们或许就不会参与了,”Bordes 说,“通常,在挑选这些项目时,我们考虑的是,能够从中学到什么东西。”从这个项目中,Facebook 的研究人员想要了解的是,风格转移是否适用于 VR 项目。
为取得预想效果,FAIR 团队重新训练了他们的神经网络,以适应专业级 VR 视频的要求,比如 4K 分辨率和 360 度视频。同时,为达到 VR 视频的沉浸感,神经网络必须要处理更大尺寸的图片。在这项工作上,计算机花费的时间合计 12 万小时。“对于电影制作团队来说,这是一个很大的赌注,”Cayrol 说,“因为这是一个全新的过程。我们把文件发给 FAIR 实验室,然后他们开始处理。随后,他们把样本发给我们。每次,我们都感觉是打开了圣诞节礼物。”
题图来着 arte