科技猎Next3D 将实境影片带进 Oculus Rift 头戴式立体显示器，提供身临其境的沈浸式立体观赏体验
文章分类: 显示产品
Oculus Rift 将更轻便易戴的头戴式 3D 眼镜带至游戏体验里的目标已经逐步实现，但还有更多的应用似乎正等着被发掘。Next3D 的创始人 David Cole 预见了将此装置应用在实境电视节目、电影与现场比赛转播的可能未来，并且已经着手经由 3 月便开始发送 的 Oculus Rift 开发工具，来帮助创作者与内容供货商制作他们相关的 3D 内容，将此技术带进现代的电视电影领域当中。该公司藉由其动态影像的处理与压缩技术，将产生的内容应用在这部立体头戴式显示器上，并将其命名为 Full-Court（应该就是篮球术语的「全场」，这名字还真有感觉）。
Next3D 期望能加强与现有创作者与内容商的关系，帮助他们一起投身制作更多实时动态的 VR 实境内容 -- 这其中包括预录的影片甚至是现场转播的内容等。对此，我们自然是抱着满满的好奇与期待，所以找到了个机会直接一睹该公司目前的技术进展。目前还在试验阶段的 Next3D 实境影片，是透过 180 度超广角相机所撷取，并且透过前段所述的后制技术来将影像转文件用作 VR 实境影片的用途。现在甚至也已经被探讨超自然现象的电视节目所采用 -- 虽然多少有点打寒颤的感觉... 但我们的主站编辑还是直击了这些实际应用的拍片器材，并且实际观赏体验了他们的拍摄成果，跳转以后就请观看我们所带来的动眼看介绍吧。
它是如何运作的
Full-Court 身为 Next3D 公司在 VR 应用上的新技术，旨在带给观赏者一种置身影片当中的直接感受。他们藉由装载在两部 Red 4K 摄影机上的鱼眼镜头，搭配模拟人耳的 3Dio 立体声麦克风，录制出范围达 180 度视角的拍摄角度范围，让观赏者最终可用 3D 的视角，观看这样超广角范围中的所有影片角度。而要提供这样的观赏体验，则要仰赖具备头部追踪（Head-tracking）的 VR 立体眼镜，才能让观看者能够自由地改变角度进行实时观看 -- 由下图可以看得出来，此技术采用的是类似数字变焦的技术，而 Red 的 4K 分辨率则是绝对是超过 Oculus Rift 本身所需。为了带来犹如亲临运动赛事的感受，在范例的影片当中，Next3D 选择将这组搭载双 Red 摄影机的拍摄设备给放在了观赏席中央。采用定点式拍摄的这部设备，将可透过 180 度的拍摄视角来完整记录欲拍摄的景物。而一旦设备固定了，便不再需要执行任何实际运镜的动作，便能透过他们的 3D 技术来提供观赏者多角度观赏立体影片的体验。它们亦提供了多拍摄点的镜位设置可能。事实上，Cole 告诉我们将会提供观赏者切换观赏点的选项，让用户可以在不同的拍摄点进行控制切换，以避免产生强制移动镜位的不适感。
鱼眼镜头与 4K 摄影机的硬件配置方面，都只能算是 Next3D 在此领域付诸努力的一小部分而已。他们在后制阶段所带来的更是如魔法一般的技术 -- 他们正打造可以实时处理观看 3D 影片的转播技术。该系统仰赖的是特殊的编码与译码技术，将来自两部摄影机的源文件经由快速处理后，立即显示于 VR 虚拟现实的头戴式显示器之中。在目前的技术下，他们只需要将一部装好 QuickTime plugin、播放软件与 Oculus Rift 开发工具的 PC 连接摄影机，便能达成这样的转播功能，而未来是否会有更系统化的转播套件就端看此系统的后续开发进程了。
3D 摄影机所撷取的原始影像
经后制过后的影像截图，已经是可以放进 VR 眼镜显示的状态（原始影像被 Next3D 给变焦放大）
实时的 Live 虚拟现实内容
Next3D 的愿景不仅止于单一应用，他们对于创作生产虚拟现实影片的梦想，引起了资深纪录片导演兼 3DigitalVision 公司创办人 Michael Watchulonis 的注意，希望可以将此技术运用在目前正在制播的超自然现象电视节目 Anomaly 中。他们将此技术应用在节目的体验纪录上，不过，相较于 Red 4K 的配置，Next3D 在 Anomaly 配置的是双 1080p 的双摄影机（由前滚轮配置与外型看来，应该是两台转接鱼眼镜头的 Panasonic DMC-GH1）。重点是，因应「超自然」的拍摄需求这组配置的相机是红外线的改装版本。
看似提供了不错创作方式的虚拟现实影片制片技术，留下了一个疑虑。就是在录制影片的当下，似乎不太能够移动镜位来做运镜，改变拍摄涵盖范围或角度 -- 根据 Cole 所述，除了简单的前后 Dolly 外，其他的运镜方式都会让观看者感到迷失（编按：整体感觉会有点像是镜头防手震补偿时的晕眩感吧？）。
所以在基本的拍摄守则中，固定相机拍摄角度变成必要 -- 头部追踪归零观赏者的观赏角度即是与摄影机平行置中为基准，这也为导演在拍摄工作上带来了诸多限制。不过上述的几点都没让 Watchulonis 感到却步，他对于理出一套新的实境拍摄系统感到十分兴奋。甚至跟我们谈到了希望能将所有的实境内容，在 Oculus Rift 眼镜最终市售时准备好的殷切期盼 -- 这与 Cole 的梦想可说是一拍即合。
我们动手玩
主站编辑有机会直接体验到他们目前的工作成果。撇除目前开发工具仍仅支持较低分辨率，并且伴随着一些可见的小瑕疵（像是纱门效果、动态模糊以及数字扩图所带来的柔化等问题），在 Oculus Rift 眼镜与耳机的沈浸式虚拟现实体验上，的确是十分令人跃跃欲试的体验。第一时间感觉到的是 Oculus Rift 实境眼镜令人惊讶的轻量表现，接着便是来自耳机的优异环绕音效体验。此时，穿戴整套装置的你将深陷于寂静的黑暗当中，不过这一切很快便跳至调整眼位的影像画面。体验的过程其实很难用言语描述，但整体的观赏体验，比起一般的电视与计算机屏幕要来得更像是在真实世界中的观赏事物感觉。
这次的动眼看体验中我们尝试了三个虚拟现实影片的场景；一场球赛、在沙滩上观看动力飞行伞及 Anomaly 节目的实境体验。三者都用单一镜位记录了完整片段，而观赏者则是可以透过头戴装置实时追踪到欲观看的视角。环绕音效对实境体验的效果亦有诸多帮助，让主站编辑得到了前所未有的沈浸式虚拟现实体验。这感觉有点像是戴上了面罩一般，即代表你将只能在有限的周边视野观看内容。正当 3D 影片与环绕音效即将让你感到犹如身历其境震撼的同时；可见的影像瑕疵、狭小的视野范围与必须保持原位（镜位）的限制，都让你一再地被拉回现实。不过 Full-Court 在提供新鲜的虚拟参访体验方面来说倒算是真的相当成功。
尽管我们无法如游玩游戏时一样，自行移动到下个房间继续参访的行程。事实上，目前看来 180 度的拍摄角度，虽然在观看时会有一点点受限的感觉，但这样的广度也会影响到未来多摄影机设定的镜位配置，而很容易让观赏者看到场景中出现别台摄影机的窘境发生。当然，若拍摄的是运动赛事与记录片等题材影响较小，但如果你是希望提供更精致的观赏体验，那么这反而将会让一切的变得复杂。是说，毕竟这套拍摄系统还只是在早期的试做阶段，所以未来是否能排除一切困难让我们体验到在各房间或观赏点切换，就还有待他们的继续努力了。
未来展望
自此之后，Next3D 将持续寻求如何将此技术运用在内容实时播送媒体的合作伙伴。除了硬件配置外，他们也希望能藉此增进把原始影片转成可用 Oculus Rift 观赏虚拟现实内容的影像后制效率。Cole 现阶段也表示已有几间内容商对此科技的测试感到兴趣，而目前仅有 Watchulonis 宣布与 Next3D 的合作关系。不过我们并不确定是否没有其他厂商也对于开发此市场感到兴趣，或甚至早已着手进入，但对一般消费者而言，似乎 Oculus Rift 到货了没的消息还是比较令人关心啦。总结
这次所体验的影片内容长度其实都并不是很长，也没有看完整场的运动赛事，但此技术的实际效果表现倒是相当足以说服我们了。现阶段的 3D 内容还不足以满足大家对于置身虚拟现实的要求，但这次我们所尝试到与拥有头部追踪技术的 3D 头戴式立体显示器的结合，则是让我们体验到与以往截然不同的沈浸式观赏经验。这个惊奇的新格式给予电影制片更多令人兴奋的创作空间，但反过来讲，也是个需要耗费投注更多资源探索的一个全新领域。我们非常期待这样的虚拟现实技术的未来潜能，让它而不仅仅只是是个用做游戏用途的头戴式立体装置而已。
引用来源： Engadget