一款“便宜好用”的 VR 全景相机是如何做出来的?
【本文来自钛媒体特色栏目“创业者说”,最有钛度的创业者故事】
VR作为一个全新的内容平台,由于其展现形式的独特性,受到了许多业内许多人士的关注。不过这一平台面临的问题也很显著——没有太多的内容,如何给予这个新兴平台更多内容?
目前来看,全景视频似乎是一个不错的选择。
在全景相机还没有出现之前,大多数内容生产者都是用数个 Go Pro 设备攒出一个设备完成拍摄。当然这并不是长远之计,所以诸多厂家针对这一特殊的使用场景开发了拍摄设备,而 IDEALSEE 便是其中之一。
钛媒体记者有机会采访到了 IDEALSEE CEO 刘天成,在刚刚过去的 CES Asia 上他们发布了新品 IDEALOEYE。
IDEALSEE CEO 刘天成
他们的新一代产品 IDEALOEYE C4 主要强调便携,重量只有 990g,高度仅为 12cm。
电池池采用了可插拔的设计方案,方便户外更换,考虑到全景相机在拍摄和拼接时发热较大,他们与热管理解决方案全球领导者——爱美达联合开发设计,打造了一套高效的强力散热方案,确保在各种苛刻环境下长时间连续拍摄的稳定性。
当然,这款产品在配置上面也没有妥协:它采用了 4 目 185°FOV SONY 背照式传感器,直播/录播视频输出可达 3840×1920@30fps(360°×180°)。
除了全景相机之外,IDEALSEE 发布的另一款产品同样值得关注——一款针对全景视频拼接加速设计的硬件。这款硬件能够极大地降低全景图像拼接的效率,这与他们研发出的算法不无关系,而这套算法也被封装打包进了硬件。
同时,这套硬件也不是 IDEALOEYE C4 专用的,几乎任何全景相机都可以使用这款硬件进行加速,包括诺基亚的 OZO,Jaunt 等等。
“其实我当时也想过将算法开源,但我们的工程师肯定不会同意,最后只得选择把算法加密封装在硬件里。当然,这样做也会有破解的风险。”刘天成在接受钛媒体采访时表示。
对于全景相机而言,硬件只是一部分,更为重要的是算法——这决定了渲染输出视频的效率。IDEALOEYE C4 在算法拼接上采用了光流拼接算法。
如果用图像表示光流……
所谓的光流,就是你在这个运动着的世界里感觉到的明显的视觉运动。例如,当你坐在火车上,然后往窗外看。你可以看到树、地面、建筑等等,他们都在往后退,这个运动就是光流。
通过不同目标的运动速度判断它们与我们的距离。一些比较远的目标,例如云、山,它们移动很慢,感觉就像静止一样。但一些离得比较近的物体,例如建筑和树,就比较快的往后退,然后离我们的距离越近,它们往后退的速度越快。
光流除了提供远近外,还可以提供角度信息。与我们的眼睛正对着的方向成 90° 方向运动的物体速度要比其他角度的快,当小到 0° 的时候,也就是物体朝着我们的方向直接撞过来,我们就是感受不到它的运动(光流)了,看起来好像是静止的。当它离我们越近,就越来越大。
光流法是对运动序列图像进行分析的一个重要方法,光流不仅包含图像中目标的运动信息,而且包含了三维物理结构的丰富信息,因此可用来确定目标的运动情况以及反映图像其它等信息。
光流算法的主要目的就是基于序列图像实现对光流场的可靠、快速、精确以及鲁棒性的估计。换而言之,光流算法能够有效地提升图像拼接的速率。
IDEALOEYE 可以直接放上无人机使用
“简单来讲,我们其实就一个要求——快。“刘天成对钛媒体表示,他们公司的拼接算法的准确性已经遥遥领先,但随之而来的是对效率的诉求,针对用户,好和快是缺一不可的,所以团队在速度上下了很大功夫。
“目前我们已经把拼接效率做到了 1:10,这意味着完成 1 分钟的 4K 视频源的高质量拼接仅需 10 分钟,这还只是一般的处理配置,如果进一步提升运算能力,1:1 拼接也不是问题。更重要的是,C4 支持 VR 直播级录播缝合标准的实时拼接,即连即拼,即拼即播,便携性强。在这一年中,我们在算法上真的做出了大量努力,目前能做到这种缝合表现的也就我们一家。”
在钛媒体过去采访的VR视频制作团队中,他们早期设备大多自制,拼接都是使用一些定制的软件。这样拍摄三五分钟的视频,加上剪辑在内,至少需要三个晚上的时间——这其中花费时间最多的就是拼接渲染,单从时间成本上算,足以见得拼接对于全景视频制作的重要性。
纵观当前的 VR 全景摄像机市场,技术门槛较低的双目消费级、四目准专业级VR全景摄像机,虽然售价相对低廉,但却难以满足专业拍摄、直播团队的需求。
以诺基亚OZO、Jaunt One、红龙为代表的专业级 VR 全景摄像机,动辄数十万人民币的售价,或者上万元每天的租金,成本实在过于高昂。这无疑在很大程度上制约了 VR 行业的发展,可谓是导致优质内容稀缺的主要元凶之一。
NOKIA OZO
从这个角度来说,IDEALOEYE C4 的出现恰好填补了这个空白,单主机售价 12999 元,搭配定制版高性能缝合主机和视频拼接软件的全套全景拍摄系统售价32599元,在刘天成看来,售价和性能方面他们找到了一个平衡点。
在采访中刘天成的透露,观界科技此前完成了2000万的天使轮融资, Pre-A轮融资正在进行中,基本上是谈定了,只差最后一步。
“虽然市场没有那么景气,但凭借技术和产品,融资还是比较顺利的,不论有钱没钱,钱多钱少,活下去最重要,一定要做好未来三、四年都不怎么赚钱的一个准备。在这个过程中,不仅要活下去,还要踏踏实实把产品做到极致,这样企业才有生存发展的能力,而终有一天这个行业会起来的。”(本文首发钛媒体)
更多精彩内容,关注钛媒体微信号(ID:taimeiti),或者下载钛媒体App