谷歌想借助3D传感技术提高图片搜索能力?
最近有部分消息指出,“Project Tango”项目里面涉及的硬件产品,除了手机外,还有平板。
“Google正在研发一款可捕捉、识别3D物体,并生成3D图像的平板电脑。这款平板电脑有两个后置摄像头、配备红外深度传感器以及先进的成像技术。”有消息指出,该平板首批会生产4000台,有望在六月底的Google I/O大会上推出。
上星期笔者拜访了一家深圳硬件创业公司,他们在研发一款3D传感技术领域有多年积累。在交谈的过程中,创始人黄总提及到了Google的“Project Tango”项目。“他们应该用的是Movidius芯片和部分技术,这款手机可以扫描周围的环境并生成相应的3D模型。”
结合虚拟技术和3D传感技术,“Project Tango”手机能够做很多东西,比如绘制复杂的室内3D地图,增强网上购物体验(衣服是否合适、家具是否跟原有的装修匹配)。如果这种设备数量达到一定规模的话,还可以借助特定的软件(比如Paracosm),以众包的形式推动3D地图的采样和构造。
但是短期内,像“Project Tango”里面的硬件项目到底能为Google做些什么?黄总跟笔者描述了一些个人的推测。
现有的搜索基本上都是基于文字,比如你打关键字“Google”就会收到一些列相关的内容。而在图片搜索里面,基本上也是基于这个关键字技术进行改进。现在的确可以把图片拖到搜索框里面进行搜索,但是效果并不让人感到满意。其中一个原因是现在的图片都是经过计算处理把3D“压缩”成2D,对象和背景混在了一起,里面能够的可处理信息非常有限。
而借助于3D传感技术,图片里面加入了“纵轴信息”,使得物体的尺寸、形状等信息都能够被加载到图片里面,成为新式的“关键字”,从而提高成功匹配的效率。
其实很多家搜索巨头都在做“以图搜图”的功能,而Google借助3D传感技术也许能够在这个领域率先突破难关。但是新的搜索体验也有一个大前提:以前的图片数据大部分已经被压缩成2D,图库需要重新搜集。
如果未来的手机都配备3D传感技术的话,就可以慢慢通过众包的形式来累积图库。也许这是Google在努力推动“Project Tango”项目的原因之一。