隔着屏幕如何幻乐一场?揭秘腾讯视频王菲在线演唱会背后的故事
文/腾讯 科技 韩依民
2016年12月31日凌晨1点, 腾讯网 络媒体事业群(以下简称OMG)市场部总经理Jeff微信收到梁静茹老公赵元同给他发来的一条消息:“Amazing!”
四小时前,王菲幻乐一场演唱会正式开场。作为幻乐一场的唯一网络直播平台,腾讯LiveMusic团队已经为这场演唱会直播忙碌了好几个月。
这场现场票价最低1800元起的演唱会在上海梅赛德斯奔驰文化中心举行,场地共一万八千个位置,能亲临现场的人数有限,但有超过两千万人通过腾讯视频观看了演唱会直播。
腾讯视频交出了一份拥有4K画质、杜比环绕声效果及观看无卡顿的直播答卷,对王菲演唱会的画面色彩和声音质感进行了真实还原。同时这也是LiveMusic和腾讯视频做过的VR直播中在线人数最多的一场。
尽管已是31号凌晨,但外界的评价依然陆续反馈过来,直播效果收到了外界尤其是业界人士,包括传统电视台人士的好评,赵元同是为之点赞的观众之一。
湖南著名节目制作人马昊给团队发微信称赞道,“王菲演唱会的画面色彩和声音质感都很惊艳,不输任何电视直播。我在家看嗨了。”
这让直播总指挥腾讯OMG综艺业务部总经理Tina及其团队感到兴奋。
Tina告诉腾讯 科技 ,能为观众提供这样高水准的还原现场甚至超越现场的观看体验,其背后是包括前端制作、后端技术在信号直播及输出上,对声音、色彩、清晰度在各种端设备还原度的一系列技术投入。
赵元同告诉Jeff,业界都在看腾讯这场演唱会直播做的怎么样,而“amazing”是他看完直播后给出的评价。
120人×90天
腾讯OMG演播技术中心副总监常树磊得知腾讯视频与王菲幻乐一场演唱会达成网络直播合作的消息,是在2016年8月。从8月开始,常树磊及其所在团队开始为12月30日的演唱会直播进行技术储备和调研。
对于网络直播,王菲团队一开始的诉求是画质要高清,音质要立体声。但面对王菲这位华语乐坛顶级歌手,及仅此一场的幻乐演唱会,腾讯LiveMusic团队决心把直播标准从高清画质提升至4K,立体声升级至杜比环绕声。
这是一次前所未有的尝试。
常树磊回忆到,“王菲团队听到之后也比较惊讶,说你们一个网站能有这样的技术,他们特别惊讶,就尝试一点点地跟我们推进,一开始是用很排斥的状态,后来大家一点点打磨。”
视觉与听觉是一场演唱会所能提供的核心价值,4K画质与杜比环绕声毫无疑问能大大提高演唱会直播的质量,但同时也意味着一系列技术挑战。为此腾讯团队构建了一整套方案。
腾讯不仅从国内组织了最好的团队和设备,更是聘请了海外的相关专家专程过来为项目提供顾问咨询,具有4K直播经验的德国TV SKYLINE被请来担任直播的技术顾问,娄炜、张岩等顶尖声音制作专家为音频顾问和设计师。
整个负责演唱会直播的团队共120人,从10月确定直播方案到12月30日正式开唱中间只有两个多月,时间紧,任务重。
视频技术从SD到HD(高清)再到4K,4K是4倍HD的效果,是当前技术条件下能达到的最高清效果。
根据腾讯LiveMusic团队的介绍,本次直播,腾讯选择了先进的4K设备拍摄和IP传输方式,高清播出。这是腾讯视频第一次尝试4K拍摄制作:从摄像机拍摄,到收录、切换系统,包括整体的构架都可以当4K信号切换、收录。这与只采用4K设备拍摄,是完全不同的概念。
画质提高随之需要解决的便是传输问题,当前业界普遍采用的高清画质(2K)传输所需带宽是1.5G,而4K画质传输需要的带宽是12G,为2K画质的8倍。这意味着视频传输的难度同时上升8倍。
常树磊介绍,为了解决传输问题,团队采用了现阶段比较成熟TICO压缩技术作为4K制作系统的传输解决方案,提高了整体流畅度。
“我们采用了一个IP架构的系统,大家可以理解为以前用铜轴电缆,现在都用上了光纤和网线,然后做了浅压缩,把12G压缩到10G,压缩到光缆去做传输、切换。这是一个比较前沿的技术,这套系统在整个亚洲腾讯是第一个用的,第一个尝试的,做了吃螃蟹的人。”
演唱会声音的传播质量更重要,为了最真实的还原现场音效,演唱会由杜比负责声音制作,腾讯直播团队推出杜比环绕声直播。
基于演唱会现场条件,经与主办方不断沟通,根据演唱会的现场条件和特点,腾讯在现场布置了15个机位,并使用了较多的特种设备,以更多的运动镜头和更为全面的角度,来展现相对安静的演唱者与时光隧道一般不断变化的舞台。
包含视频、音频、传输、灯光配合的一整套方案定下来后,12月18日,团队第一批人到达上海,经过多月准备,现在上场检验的时刻即将来临。
而直到此时,腾讯团队是否真能做好一场4K画质、环绕音质的直播仍受质疑,这需要团队用实践去证明。
从幻乐到真实
12月18日,腾讯团队第一批人到达上海,从那天起直到31号,团队要完成包括设备安装、调试、磨合现场环境、与王菲团队、东方卫视合作以及撤场等一系列工作。
从18日到31日,腾讯LiveMusic团队日程表上安排满满。
先前的方案此时被分解为一个个板块。
在拍摄上,腾讯在演唱会现场设置了15个机位,其中内场13个机位,机位的设置除了要恰到好处的捕捉到演唱会的各个细节,还需要确认与VR机位没有冲突。
15个机位中有6台为特种设备摄像机,包括国内最新进口的MovieBird52电动伸缩摇臂18米;Blackcam B40 电动遥控轨道,定制弧形轨道15米长。
这些名字冗长的特种设备摄像机存在的主要目的,是为观众提供更多角度,更独特运动轨迹的视觉感受,为个人演唱会创造更多镜头的新意,避免气氛单调沉闷,创造时空变幻的意象。
在音频上,在王菲团队设置的话筒外,腾讯团队在内场布置了8支收取观众音效的话筒,并在直播时进行音乐缩混配比,这样做的目的是为了更好的还原现场效果。
王菲、窦靖童同台演唱
幻乐一场演唱会的一大亮点是王菲与窦靖童同台演唱《你快乐所以我快乐》,当现场镜头切到窦靖童的画面时,观看视频直播的观众也能清晰听到现场的欢呼,并且现场的欢呼声与台上的演唱声高低协调,观众有身临其境的代入感。这便是那八支话筒的功劳。
但话筒只是收取声音的第一步,在处理和传输上,腾讯团队进行了更多尝试。常树磊介绍,这次腾讯与杜比的合作不仅在前端和制作端,杜比更在终端播放器上进行了支持。
“我们整合开发了杜比的编解码技术,让用户在手机端、Pad端,甚至OTT端听到环绕声,就我们所说的5.1音频。”
什么是5.1音频?常树磊介绍,日常大家交谈可以简单 地理 解为立体声,立体声是能分清左右的声音;环绕声是一个360度的声场,让听者能更好地沉浸在声场的环境下;全景声则是3D的,更立体。环绕声可使耳朵感受到来自不同方向的声音,全景声是在整体的空间里会有很多3D立体的维度。
“所以我们在声音里也不断地在尝试做升级。我们在直播的时候,有立体声也有5.1,这次直播里头没有全景声是因为客户端还没做完,但是未来的点播,我们会把4K和全景声结合在一起,给用户一个更好的沉浸式地体验。”
腾讯团队的行动最终获得了王菲团队的认可,“直到最后一两天,他们看到彩排效果越来越好,而且按照我们的修改意见,修改灯光、修改他们的一些舞美装置,他们才发现这个是对的。”
高质量的音视频,最终通过IP架构系统稳定的传输到了观看直播的几千万观众面前,保证了播放流畅不卡顿的体验。
除了前端IP架构外,后端云服务也提供了很大帮助。
常树磊介绍,“一方面,团队前期做了一下变换(IP架构),另一方面是我们的后台、运维和架构平台部同学做了全面规划,准备了合理的带宽和服务器资源到王菲的演唱会上。”
根据统计,2100万用户在线观看王菲演唱会,腾讯视频为此消耗的带宽相当于全国用户每天在 今 日头条阅读和观看视频所使用带宽的两倍以上。
除了保证播放流畅外,由于这次演唱会是面向全球用户直播,腾讯视频技术团队联合第三方厂商为海外的体验做了充分优化,共有166个海外国家和地区的用户在线观看了直播,不少地区的海外用户打开直播的缓冲时间达到两秒以内的缓冲速度,和国内用户的体验相差无几,可以说是视频网站在全球直播中达到海内外用户体验最接近的一次。
在制作上的充分投入和准备最终收到了好的结果,来自外部的好评让团队感到开心,但常树磊却已经在总结这次直播中的经验和教训。
“这是第一次尝试,我们也发现一些问题,回去也要总结。比如说,摄像机和光之间的配合、机位的排布、调度以及音频上游信号的实取等,说起来比较琐碎,都是一些小的点比较散。如果未来再做这种类似的事情,我们也希望能再往前走一步。我们最终的想法,就是真实地还原现场效果,让观众有更好地体验。”
对于外界关于直播音效与实际音效存在差异的质疑,常树磊解释,直播做的是现场同期声的缩混,并不是把王菲的东西全部修饰掉,直播要的是还原歌手真实的声音和现场氛围。
“我们追求真实,但从不放弃画质和音质。”
(腾讯 科技 记者俞斯译、孙实对本文亦有贡献)