芯端云协同，华为云HiLens赋能AI开发应用的闭环逻辑

雷锋网 • 4年前扫码分享

我是创始人李岩：很抱歉！给自己产品做个广告，点击进来看看。

“视觉AI成熟了。”

这是视觉AI在2019年被推上风口浪尖后，不少业内人士的观感。

这样的观感，在消费侧也并不少见。

“宝妈”是一个难以放在职场金字塔顶端的身份，究其原因主要在于“宝宝”占去了正值职业上升黄金期的女性大部分精力。不少科技公司费尽心思想要为这一庞大用户群做一款硬件产品，其中，家庭摄像头就是这类硬件产品之一。

那些被贴上（视觉）AI标签的硬件，真是爆品吗

阿呆（化名）是我认识的朋友中第一个把家庭摄像头当作“神器”的宝妈。

去年年底，朋友送了一台家庭摄像头给我，把玩无趣，也难以想象这样一台家庭摄像头在我北京租住的不足四十平的出租屋中该安放何处，也是看到这一摄像头有些许针对儿童看护的功能，就转赠给了阿呆。

再次接到阿呆电话，是在一周后，当时我清楚地记得她在电话那头兴奋地说着一周以来，这一家庭摄像头为她带来的便利：随时可以看到家中孩子的状态、可以设定记录孩子的日常生活，甚至可以识别孩子的哭声。“太神奇了！”

当看到阿呆从之前时不时满腹牢骚和我诉说“看娃”的痛苦，到现在因能够随时“看娃”而扫却焦虑的状态，才明白了这样一款产品此前一直在宣扬的技术卖点转化而来的实际价值。

或许消费者对“视觉AI”这个技术名词是无感的，但是这一技术带来的功能确实支撑起了类似家庭摄像头这样的智能硬件核心卖点。当然，用户体验给到的正向反馈使得这一硬件产品自然而然成长为爆款产品。

据Strategy Analytics最新发布的《2019年智能家居监控摄像头市场预测和分析》研究报告显示：

2019年全球智能家居摄像头（包括可视门铃）总销量将在2019年突破5600万；到2023年，全球消费级摄像头销量将激增至超过1.11亿台，年复合增长率为19.8％，是2019年总量的近三倍。

芯端云协同，华为云HiLens赋能AI开发应用的闭环逻辑

这一产品销量具体到单一企业而言，带来的商业价值也十分可观。据华为云官方公开数据显示，2018年12月，华为与海雀科技携手推出的海雀AI全景摄像头在短短1个月内全渠道出货量达到10万台。

除去家庭摄像头外，城市摄像头、AR/VR、工业质检等当下各领域最热的几个概念和产品，也均与“视觉AI”相关，这使得“视觉AI”成为互联网厂商的又一集体聚焦的赛道。

华为云同样也盯上了视觉AI这一赛道。

AI芯片大战“一触即发”

2018年10月的华为全联接大会上，华为正式宣布全栈全场景AI战略。

华为轮值董事长徐直军同时宣布，“外界一直在传华为在开发AI芯片，我要告诉大家，这是事实，今天我们发布两颗AI芯片：昇腾910、昇腾310。”

在此前后，业内可见：

2018年7月，百度发布首颗云端全功能AI芯片「昆仑」，并在今年7月再次发布语音语音交互芯片「鸿鹄」；

2018年9月，阿里成立平头哥（半导体有限公司），并在今年7月发布首颗芯片（玄铁910），9月发布AI推理芯片含光800。

除了BAH三巨头集体加入到了这场AI芯片大战中，也可见依图、云从等厂商布局AI芯片。

至于在2018华为全联接大会上发布的昇腾310芯片，华为给出的官方介绍是：专为图像识别、视频处理、推理计算及机器学习等领域设计的高性能、低功耗AI芯片。芯片内置2个AI core，可支持128位宽的LPDDR4X，可实现最大16TOPS（INT8）的计算能力。

搭建端云协同AI开发应用平台

自研AI芯片的能力，成为华为全栈全场景AI战略的重要一环，作为云服务厂商，华为云更多技术能力仍是潜藏在其搭建的云上AI平台中。

2019年，华为云依托领先的“AI + IoT”和工程化能力，面向开发者、企业以及设备生产厂商，正式推出了端云协同AI开发应用平台——HiLens，提供“端”、“云”、“芯”为一体的多种开发方式和视觉设备的端云协同管理服务，进一步降低开发门槛，帮助实现覆盖商超、园区、家庭、车联网、安平、工地、广告媒体等多种领域、不同场景下的视觉AI应用开发。

芯端云协同，华为云HiLens赋能AI开发应用的闭环逻辑

作为与云端HiLens平台无缝对接的端侧载体，此次正式商用的HiLens Kit多模态AI开发套件，为NPU+CPU架构，搭载了华为Ascend 310 AI处理器和Hi3559A。相比目前业界厂商推出的AI开发套件算力多为2 TOPS-4 TOPS，Ascend 310可以输出16TOPS@Int8的性能，为用户带来业界领先的端侧及边缘侧AI算力。强大的算力支持下，HiLens Kit可以实现16路1080P视频分析，目前已在工业级、行业级视频业务实现8路复杂AI算法实时推理。

同时，HiLens Kit内置轻量级容器，具备资源占用少、降低网络带宽、下载启动时间快等特性。

HiLens Kit极大地简化了应用开发流程，实现了免搭建开发环境，开箱即用。硬件预置开发框架，封装多媒体库、算子库、模型管理库，提供音视频管理、外部接口管理、数据自动采集等能力；预适配ROS系统，更便捷开发自动控制类应用；兼容TensorFlow、Caffe等主流深度学习框架；支持Python和C++主流语言，可快速应用开发。

HiLens Kit可以无缝集成华为云ModelArts 一站式AI开发与管理平台，随时调用华为云AI能力。通过ModelArts开发的AI模型可自动转换，无缝应用到任何昇腾310硬件设备，实现云端开发，端侧部署。

华为云HiLens Kit适合各类小型厂商、门店、工业质检等的快捷智能化改造。比如一台摄像头就可以带动全店的智能化升级，在技能市场上可以随时根据需求来调整识别目标和识别能力，不用换设备就能实现技能更新和升级。

前文提到的家庭AI摄像头正是通过这样的端云协同能力实现的诸多功能。例如，海雀摄像头中通过二次云侧识别功能，通过端云协同实现了识别性能的最优化。

在家庭应用场景中，当摄像头捕捉到一张人脸，假如我们将置信度设定在0.93，如果端侧计算的结果超过0.93即为识别，但如果端侧识别的结果为0.89，尽管相似度较高，但又不确定时，此时就用到了云侧二次识别。

当然，这在用户使用过程中是无法感知到的，服务厂商所追求的也正是用户对技术的“流畅”体验，或者说是“无感”体验。

据雷锋网 (公众号：雷锋网) 了解，目前，华为云HiLens主要助力开发者、ISV、软硬件厂商针对家庭、园区、企业进行AI开发应用，其典型应用场景中的能力部署如下：

家庭智能监控： 人形检测、陌生人脸识别、摔倒检测、哭声检测、词汇识别、人脸属性检测、时光相册；

园区智能监控： 人脸识别闸机、车牌/车型识别、安全帽检测、轨迹还原、轨迹还原、异常声音检测、入侵检测；

商超智能监控： 客流量统计、VIP识别、新老顾客数统计、人流热力图。

针对以上场景，华为云也分别与海雀科技、大拿科技、和昌未来、NTT Data合作，落地了相应产品和解决方案。

其中，基于HiLens，华为云与和昌未来联手，针对城市车辆管理打造了“智易停”AI停车管理系统。

目前，智易停的刁钻角度车牌识别率，已经由50%提升到了90% ，自动入库率达到70%。在华为云HiLens提供的端云协同车牌识别技术基础上，还大大降低了人工运营维护成本，人工审核降低50%，投诉率降低30%。