颠覆传统!普诺飞思如何推动机器视觉革命?
颠覆传统!普诺飞思如何推动机器视觉革命?
糖直销_Orz
· 7月13日
这家公司的传感器,会颠覆你对于计算机视觉的认知。
颠覆传统!普诺飞思如何推动机器视觉革命?
普诺飞思
对于电影胶片感兴趣的读者可能会知道,一秒钟的画面需要有至少要有24帧连续的胶片,才不会导致画面卡顿。而我们的图像传感器也正是基于这个原理进行设计的,基于帧阵列的逻辑,通过预设好的帧率触发,记录下大量的原始数据,以生成连续的画面。
这种设计对于拍摄视频而言,相对比较实用,并且每秒钟记录下的帧数越多,画面的流畅度也就越高。然而,这种采样机制对于现在的某些应用场景却未必是优势。
就拿当下关注最多的辅助驾驶为例,现在都基于传统传统图像传感器研发出来的算法,需要依赖一定程度的高算力才能处理采集的大量原始图像数据。
法国一家名为普诺飞思(Prophesee)的企业提出了一种新解决方案:神经拟态视觉。以人眼为灵感,研发出了「硅视网膜」。
仅「采样」动态帧,算力要求大幅下降
与传统图像传感器有着本质的区别,普诺飞思基于事件的视觉传感器突破了传统机器视觉的局限,从「Frame-based」转变为「Event-based」,补全了传统传感器每帧图像之间的信息空缺。
基于事件采样的原理图
这种传感器的工作原理与传统图像传感器有着本质的区别。通过神经拟态视觉和生物启发算法,传感器每个像素都异步独立,且由信号变化来控制触发,只有在场景信息发生变化时,像素才会作出反应,进而采集图像数据。相对而言,场景中静态信息则不会触发传感器采集。
普诺飞思-传感器
据普诺飞思联合创始人兼CEO 卢卡·维雷(Luca Verre)介绍,从第一代的QVGA到现在的HD高清视觉传感器,普诺飞思的视觉产品开发技术在不断优化和创新。
在传感器制造层面上,普诺飞思选择了与目前市场上规模最大的图像传感器企业索尼合作。通过与索尼的合作,两者共同推出了市面上尺寸最小的高清图像传感器,Luca表示这批传感器马上就能得到大规模量产。
「普诺飞思最新的技术进展,将我们先进的机器视觉技术与索尼的生产制造工艺相结合,共同开发了市面上尺寸最小的视觉传感器,为智能手机、笔记本电脑、机器人等领域提供更易于集成、成本更低的视觉方案。」Luca Verre表示。
普诺飞思的神经拟态传感器技术,具有无限接近人类视觉的场景感知能力。此外,该技术解决了带宽瓶颈及算力不够等问题,较之传统图像传感器,产生的数据量减少近千倍,实现了大于10000fps的帧速率。
相较于传统视觉系统,Luca表示普诺飞思的传感器有三大优势:
减少冗余数据,减少需要处理的数据量
响应速度快,同时加速识别检测的速度
增加动态范围,适应极端的光照条件
普诺飞思还提供了与传感器相配套的软件解决方案MetaVision智能套件,包括六个主要的模块,包括机器学习、3D计算机视觉,还有分析等,可提供95种计算机视觉或者AI的算法、67种代码示例、11个即用型应用程序。
从工业界到医学界,多场景应用已落地
目前普诺飞思的解决方案已经在诸多领域得到了应用: Xperi旗下的子公司DTS开发了全球首个基于神经拟态视觉系统的驾驶员监控解决方案(DMS)。
Xperi与普诺飞思合作打造的驾驶员监控解决方案(DMS)
相较于传统的解决方案,由于普诺飞思的检测是基于事件,因此算力需求更低,从而能做到更快速度的响应,甚至能测算出驾驶者的眨眼频率。通过对驾驶员眼睛、表情的监测,以及计数驾驶员的眨眼频率,从而对其目光注视的情况进行监测,从而达到提醒驾驶员疲劳驾驶的目的。
在座舱之外,普诺飞思的传感器还能应用在自动驾驶系统中,用来提升自动驾驶汽车和ADAS系统检测环境的速度。
在工业领域,普诺飞思的传感器则可以用于针对机械零件等物体的计数和测量,以超千个零件每秒地吞吐量实时计算,有效提高生产效率,降低成本和设备复杂性。
普诺飞思的传感器还能与传统的相机相结合,用以提升实时画面的清晰度,消除低光照条件下因手抖带来的画面模糊。
「我们的这套算法是与手机上传统RGB传感器协同实现的。这个功能的实现无需占用ISP(图像处理器),可以直接调用SoC的算力。」普诺飞思大中华区商务发展主管Johney Lu解释道。
在医学场景中,普诺飞思也有应用落地:
检测活动的细菌
标准的无菌检测依旧参照几十年前的微生物学的方法,通常需要7-14天来完成,这大大延迟了有关细胞治疗的发展。
普诺飞思和Cambridge Consultants共同开发的通过细胞实时无菌检测方式实现的下一代细胞疗法,能在几毫秒内进行反馈。
C轮融资超千万美金,技术市场广阔
据悉,此前普诺飞思已完成由欧洲投资银行、雷诺集团、英特尔资本等机构投资的多轮融资,今年7月份普诺飞思宣布拿到了C轮融资,由创新工场领投、小米及上海韦豪创芯跟投,数家老股东加码。
目前普诺飞思的技术已经在工业场景、汽车(自动驾驶汽车)、AR/VR、物联网等领域落地,而这一笔融资将会被继续应用在下一代软硬件解决方案的研发和公司的运营上。
「得益于本轮融资,普诺飞思将进一步在神经拟态机器视觉,以及人工智能相关领域树立领导地位。我们将扩大在全球,尤其是中国市场的客户规模,并推广普诺飞思革命性的基于事件的视觉传感方案。」Luca表示。
随着自动驾驶和人工智能大规模应用,未来各类设备对于算力的要求也会进一步地扩大。普诺飞思的解决方案对于算力的要求相较于传统的解决方案更低,并且还能实现传统图像传感器无法实现的功能。一旦得到广泛的应用,将推动多个行业进一步地发展。(本文首发钛媒体APP,作者/唐植潇)
520篇资讯
615关注
糖直销_Orz 认证作者
关注硬件和前沿技术,约稿爆料请联系 zhixiaotang@tmtpost.com
最近资讯
- 特斯拉FSD BETA V9.0开始内测!
- 颠覆传统!普诺飞思如何推动机器视觉革命?
- ROG魔霸5R评测:外有炫彩灯,内有「3A芯」丨钛极客
想和千万钛媒体用户分享你的新奇观点和发现,点击这里投稿 。创业或融资寻求报道,点击这里。
敬原创,有钛度,得赞赏
-
钛粉30083 赞赏了
夫妻店,做汽车配件批发,能不能上云?
约2天以前 -
钛粉13874 赞赏了
“深喉”发声,复盘社区团购死亡之路
约6天以前 -
钛粉91954 赞赏了
“深喉”发声,复盘社区团购死亡之路
约6天以前 -
hYrSeb 赞赏了
谁说电脑已死?
2021-07-01 18:18 -
subey 赞赏了
90后女程序员:身在大厂,心系创业
2021-06-11 13:24 -
钛粉27544 赞赏了
鸿蒙成败,在于生态
2021-06-08 17:41 -
钛粉22420 赞赏了
涿州楼盘停工下,被“不交房”拖住的生活 | 钛媒体...
2021-05-11 21:08 -
钛粉71674 赞赏了
台积电南京扩产惹争议:28纳米芯片制造“黄金线”之...
2021-05-11 16:16 -
钛粉25859 赞赏了
360被曝入局造车,周鸿祎看重了智能汽车哪块蛋糕?
2021-04-28 13:32 -
钛粉15018 赞赏了
新消费品牌如何“爆款中国”?
2021-04-26 12:08 -
钛粉46336 赞赏了
万字深扒“极端女拳”组织,谁在互联网上“引战”?
2021-04-26 01:00 -
钛粉65387 赞赏了
马云投资和自产的媒体,究竟在阿里生态中扮演着何种角...
2021-04-23 20:57 -
钛粉46198 赞赏了
万字深扒“极端女拳”组织,谁在互联网上“引战”?
2021-04-22 17:36 -
钛粉46653 赞赏了
万字深扒“极端女拳”组织,谁在互联网上“引战”?
2021-04-22 09:16 -
乔邦主 赞赏了
“异常流量”是互联网广告行业顽疾?秒针认为智能技术...
2021-04-16 21:10 -
钛粉54090 赞赏了
涨价拯救腾讯视频?
2021-04-11 20:53 -
钛粉38514 赞赏了
k12公司学霸君被传“倒闭”,创始人回应:在继续努...
2021-04-03 15:51 -
钛粉80481 赞赏了
女仆桌游馆:兼职半年,她陪伴过300多个孤独的人 ...
2021-04-03 07:49 -
钛粉38730 赞赏了
教育创业还有什么机会?
2021-03-29 14:21 -
钛粉38440 赞赏了
“超级App工厂”:教育赛道探索,进度如何?
2021-03-29 14:19 -
钛粉38714 赞赏了
k12公司学霸君被传“倒闭”,创始人回应:在继续努...
2021-03-29 14:17 -
hSmXxU 赞赏了
如果格局决定了人生,那到底什么决定了格局?
2021-03-26 12:02 -
钛粉03456 赞赏了
荣耀何时可以铸就属于自己的荣耀?
2021-03-26 10:25 -
钛粉92228 赞赏了
房产行业巨变后走向何方?居理买房网认为“深度导购”...
2021-03-18 16:58 -
钛粉36095 赞赏了
日均工作20小时、放弃未婚夫,那些逆流创业的女人们
2021-03-08 11:58 -
钛粉74059 赞赏了
孤独陈睿,放弃仪式抵抗
2021-02-25 00:16 -
钛粉35141 赞赏了
马云和他的三个“赌王”朋友
2021-02-22 13:09 -
钛粉12618 赞赏了
中国认知智能行业报告
2021-02-19 14:10 -
钛粉05059 赞赏了
陆奇万字演讲:中国经济形态与东南亚相似,创业创新易...
2021-02-09 11:08 -
钛粉69389 赞赏了
视频号是微信小游戏弯道超车的大好机会
2021-02-07 13:58 -
钛粉67426 赞赏了
我在抖音生产主播,投入一个亿,只挣两百万
2021-02-07 03:18 -
钛粉45533 赞赏了
在虚拟影院边看电影边社交是种怎样的体验?
2021-02-04 12:44 -
钛粉80055 赞赏了
能睡眠遮噪还能听音乐,1MORE ComfoBud...
2021-01-30 02:56 -
钛aB1IyM 赞赏了
“俗”人李子柒
2021-01-27 22:21 -
钛粉65171 赞赏了
敬“墨茶”一篮草莓,希望他在远方没有病痛和穷苦
2021-01-24 10:14 -
钛粉38610 赞赏了
网络平台涉黄屡禁不止,网络环境何时迎来健康未来?
2021-01-22 08:44 -
钛粉91023 赞赏了
巨头下注,播客虚火
2021-01-19 13:26 -
钛粉25879 赞赏了
中国下一个 “巨无霸”交易平台是什么?
2021-01-18 16:09 -
钛粉50426 赞赏了
谁会是中国小电厨电第一个千亿之王?
2021-01-13 16:45 -
钛a2I9ui 赞赏了
特斯拉降价,苦了自主新能源车
2021-01-11 23:04 -
蒙MYH 赞赏了
“喝”出万亿大市场:0糖更快乐,植物基出圈
2021-01-11 14:39 -
hU8dfb 赞赏了
中国电商的下一个绝佳机会
2021-01-05 15:37 -
钛粉76789 赞赏了
一个“傻瓜式”的SaaS开店工具,如何赚得千亿美金...
2021-01-04 14:16 -
钛粉68961 赞赏了
挑战海拉尔零下30度,体验一汽丰田双擎混动技术 |...
2021-01-03 16:31 -
钛粉18683 赞赏了
2020年最后一天,社交平台Uki被Soul前员工...
2020-12-31 10:30 -
钛粉17696 赞赏了
2020年最后一天,社交平台Uki被Soul前员工...
2020-12-31 10:23 -
h2WkpG 赞赏了
2020年最后一天,社交平台Uki被Soul前员工...
2020-12-31 10:17 -
hwDjnH 赞赏了
2020年最后一天,社交平台Uki被Soul前员工...
2020-12-31 10:10 -
钛粉40181 赞赏了
石家庄,工厂子弟,和“万青”失去的十年
2020-12-25 14:33 -
钛粉89488 赞赏了
中高端MPV竞争,微妙平衡中寻找取胜之道
2020-12-18 16:41 - 查看精彩文章,打开钛媒体客户端
挺钛度,加点码!
- ¥ 5
- ¥ 10
- ¥ 20
- ¥ 50
- ¥ 100
支付方式
支付
支付金额:¥6
赞赏金额:¥ 6
赞赏时间:2020.02.11 17:32
账户【未登录】提示!
个人中心将无法记录并同步您的赞赏记录,
是否进行登录
分享文章
猜你喜欢
Oh! no
您是否确认要删除该条评论吗?
分享文章