Neurence 的云计算平台给可穿戴设备带来视觉和听觉

TechCrunch  •  扫码分享
我是创始人李岩:很抱歉!给自己产品做个广告,点击进来看看。  

英国创业公司 Neurence 此前发布了两款概念应用,展示了名为 Taggar 和 TagMe 的现实增强技术。目前,该公司启动了长期平台战略,发布了一款能实现对象识别的机器学习云计算平台。Neurence 希望,随着可穿戴计算设备和物联网的兴起,计算设备在我们的现实世界中越来越普及,该公司能满足下一代的搜索需求。

Neurence 将这一平台称作 Sense ,而感兴趣的开发者可以通过软件开发包(SDK)免费访问这一平台,该公司希望通过这种方式提高平台的普及率和用户数量。Sense 平台需要用户,因为平台的发展本身就包含了众包的元素。Neurence 鼓励个人用户向 Sense 数据库添加对象,帮助数据库的发展,使其更有用、相关性更好。

在推出之初,这一数据库包含了“数十万个”已识别的对象。不过,根据 Neurence 投资人 迈克·林奇(Mike Lynch)博士 的说法,Sense 系统能够识别多达 500 万种对象。林奇通过个人的 Invoke Capital 技术投资基金对该公司进行了投资。某些类型的对象,例如图书,可以通过挖掘在线数据集批量添加。不过,为了实现该公司希望中的普及率,这一平台还需要人工为其添加大量数据。

维基百科通过众包的方式打造了在线百科全书,而 Neurence 希望,有足够多的用户帮助该公司标记并增强数百万种现实世界的对象。通过这种方式,在未来 5 年左右的时间里,该公司可以在物联网世界里提供与环境相关的信息。

“在这里,重要的一点在于,现实世界中的设备,包括可穿戴计算设备,能获得完整的信息。因为通过 Sense,这些设备将具备视觉和听觉。”林奇在接受 TechCrunch 采访时表示,“任何人都可以向这一系统输入新信息。我们需要去做的并不是编程,而是在看到某一物体时,以类似维基百科的方式将该物体及其属性的描述上传至云计算平台。随后,这些信息就会向所有人开放。”

“你可以创作,也可以使用。这些信息面向系统中的所有人开放。”他指出。

由于对不同人物、不同团体、不同社区和不同文化,某些对象可以有着非常不同的含义,因此 Neurence 开发一款平台,让用户去描述某一对象的信息是非常合理的。用户可以 通过 Sense 网站 向平台上传图片、音频文件和算法,将数字信息赋予在现实世界中遇到的对象。

Sense 平台可以分析,一台互联设备通过摄像头和麦克风能看到什么、听到什么(这一平台也可以仅仅利用摄像头或麦克风之一的输入信息),随后将感知的数据转化为林奇所说的“概率矢量”,并将这些数据发送给云计算平台进行处理。因此,这一工具并不会将真实的视觉和听觉数据传送给云计算平台(因为这样做速度缓慢,同时令人感觉毛骨悚然)。

如果在数据库中找到匹配的模式,那么这一平台即可辨认出现实世界的对象。这一识别将是准实时的(取决于使用的硬件)。Sense 可以识别的对象包括标志、图书和绘画等。

不过,这仅仅只是 Sense 最初的用途。在识别对象之后,Sense 会启动随后的操作。这类似于桌面搜索服务在返回的结果中邀请用户参与一个爬虫网络,以提供额外的信息。通过 Sense,设备使用者可以快速访问附近对象的额外信息和内容。这些内容可以是系统或开发者已经关联至特定对象的信息,也可以是其他用户在看到某一对象后添加的订制信息。

关于不同的服务和用户如何部署及订制 Sense,以符合他们的世界观,林奇表示:“对于曾经开发过与对象有关的应用,或是编写过类似代码的人,他们会说‘我希望这能够被识别,如果你们提供来自这些来源的定义,那么他们会给予更高的优先级’。”

“你可能期望的一点是,不同的亚文化将拥有对对象的不同定义。”他指出。

探寻下一代搜索

该公司联合创始人夏洛蒂·格伦斯基(CharlotteGolunski)表示,如果这些听起来与主流应用有所差距,那么 Sense 希望解决的核心问题很简单。“我们将这些视为下一代搜索。”她表示,“我们使用搜索引擎也是基于同样的原因。”

“关于对象,我们希望找到更多信息。我们希望了解我们可能会喜欢的类似对象,以及关于某些对象的背景。我走在街头时经常会好奇:‘那栋大楼是什么?有着什么样的历史?’而当我身在国外时,我希望了解,我所看到的外国文字究竟是什么意思。随着智能可穿戴设备的发展,这些问题都将得到解决。”

“我常常会对所看到对象的更多信息感到好奇,这是一种获取信息,以及进一步发现其他信息的快捷方式。我不需要拿出手机进行搜索,浏览由一系列链接构成的列表,而是可以立即以对用户友好的方式获得这些信息,这就像是我询问与我一同散步的好友。这就是我们希望解决的问题。”

sense

Sense 的技术可以支持面部识别,不过 Neurence 目前更多地瞄准物体对象,而不是人物。自动化的实时面部识别技术将不可避免地引发严重的隐私保护争议。(以下谈到了 Sense 的隐私保护问题。)

在通过 Sense 成功识别对象之后,用户可以启动一系列可配置的操作,例如通过电商网站购买同样的物品,或是播放一段关联的视频,以及使用电影海报触发可立即观看的电影预告片。这是 Neurence 计划中 Sense 平台未来的商业化模式,例如通过关联链接或推广链接。(不过,在目前的起步阶段,商业化还不是 Sense 考虑的一个问题。)

正如以上所述,这些操作可以由用户订制,从而满足他们不同的需求和嗜好。其中一个例子是,当可穿戴计算设备感知用户来到一个汽车站或火车站时,将实时拉取交通信息,使用户不必再手动打开应用并检查。

开发者也可以自行决定,如何将 Sense 集成至自己的应用和设备,随之而来的应用也将有所不同。格伦斯基表示,开发者最初的兴趣在于购物和房地产等使用场景,例如将房屋照片变为动态旅程。

Neurence 已经开始与谷歌合作,利用 Sense 技术开发一款谷歌眼镜应用。该公司也在与三星合作,在其 GalaxyGear 2 智能手表之上进行开发(这款智能手表配备了摄像头)。这两款应用都还没有发布,但该公司向 TechCrunch 进行了展示。目前,该公司总共与 6 家设备商进行了合作,并表示渴望与更多设备商结为合作关系。

通过 Galaxy Gear 2 上的 Sense 应用,用户可以将设备的摄像头指向某一对象,例如一本书。一旦系统识别出这一对象,那么一个红点将出现在屏幕上方的角上。点击这一红点,你就可以看到这一对象的更多信息,而随后的一系列操作可以帮助用户进一步了解这一对象,或是进行购买。

以下这段视频演示了谷歌眼镜上的 Sense 应用。当用户看向某一物体时,这款应用帮助用户获取该物体的相关信息。随后,他们可以使用额外的语音命令,通过谷歌眼镜与 Sense 互动,并访问关联至这一被识别物体的数字内容。