高通发布手机芯片应用,微美全息(WIMI.US)5G云平台提供ARSDK服务
近期,高通推出了一个可用于机器人和无人机的5G系统——RB5。随后又发布又一款手机芯片骁龙690。
RB5系统是一套集硬件、软件和开放工具于一体的平台套件,可以为制造商创造出下一代高性能、低功耗机器人和无人机。
这次推出的平台是基于骁龙865SoC的RB5平台,是基于骁龙845的SoC的RB3的更新。正如刚才所说,主要分为三个部分,分别是硬件、软件和开发工具。在硬件方面,将使用公司的QRB5615处理器,基于骁龙865的Kryo585CPU和Adreno650GPU。
该处理器能够在严苛的能耗条件下,通过全新张量加速器在边缘端进行推理运算,从而提供卓越的机器学习能力。它还搭载了可支持七个并行摄像头的强大ISP和专门面向增强视频分析的计算机视觉引擎。
RB5平台能够每秒执行15Tera运算的AI性能,以运行复杂的AI和深度学习任务。平台的设计主要包含有「载板」和「系统模块板」两种形式。
SOM包含实际的SoC以及核心元件,如RAM、NAND存储芯片、为SoC供电的PMIC和电路板元件,以及Wi-Fi/蓝牙模块,该模块位于载板上。RB5载板具有大量的连接性,支持4xHDMI输出、通过SDIO的SD卡插槽、USB3.1集线器、USB-C连接器、千兆以太网、用于连接显示器和摄像头的DSI和CSI连接器,以及各种其他通用I/O。RB5可通过配套模组实现对4G和5G的支持,为5G在机器人和智能系统领域的广泛应用奠定基础。
软件方面,它带有用于神经处理、机器视觉、定位、特征识别和障碍物检测的SDK。
高通将为Ubuntu和YoctoLinux提供操作系统支持。该公司将维护自己下游的嵌入式变体操作系统,同时提供上游的开源版本。QRB5165将迎来稳定的软件支持,并延伸到Linux。
而为了有利于开发人员使用,开发工具包括一个主摄像头、以及跟踪、深度、飞行时间和其他摄像头。它还配备了磁性、压力、温度、超声波和许多其他传感器。高通还承诺提供“类似保险库”的安全性,以确保设备不受损害。
此外,还有各种其他附加组件来扩展“核心套件”,如额外的夹层板。高通将提供视觉、传感器、电机控制、工业和通信夹层板,用于扩展系统功能。该技术可与玩具,机器人吸尘器或割草机等消费类技术配合使用,但也可用于 商业 和工业应用。
随着5G的到来,随着中国新基建的建设,将给移动通信行业,特别是中国企业带来非常好的机会。随着中国5G(获得)政府支持,运营商很快会在中国建成全球最大的5G网络,使得很多创新得以实现。这样可以引领全球5G的创新和人工智能的应用场景。因为中国的市场大、人口多、应用数据多,这也使人工智能在中国的发展具有很多其他国家没有的先天性优势。
高通非常看好5G+AI的发展趋势,更看好中国企业的创新在全球市场起到的带头作用。2020年是5G的扩展年,在工业 互联网 和各垂直市场的应用也会给中国企业带来很多技术创新的空间。在制造业、交通、建筑、能源等领域,都会看到中国企业在5G+人工智应用方面引领全球的创新。
这次疫情也让高通公司愈发感到全球化对行业的重要性,我们所处的世界已经不可割裂,全球的供应链、产业链都是一体的。移动通信产业的发展本身就具有全球化的特征,整个产业链上下游各个公司之间有非常多的交集,我们所处的半导体行业也是分工高度的国际化,需要全球的产业链紧密协作的产业。
在中国,高通公司开展业务已经超过20年,与运营商合作,跟产业链上下游合作伙伴一起推动技术标准的制定,推动技术升级,已经完全参与到产业链中融为一体,密不可分。高通深知只有支持合作伙伴的成功才有我们的成功,因此非常努力地在推动产业和合作的全球化。
后疫情时代全球化的发展和对这个行业发展还是充满着信心,特别是5G+AI,会彻底地改变很多生活、工作和各个垂直市场的业务模式和技术支持,全球化仍会继续。
在过去20年的全球化进程中,电子制造和半导体行业是实现全球化最完善的行业。而中国的电子制造行业也与全球供应链、价值链充分融合,不论是进口产品,还是出口市场的依存度,都远超其他任何行业。举例来讲,在印度的智能手机市场,中国企业已经是最大的厂商集群。随着全球化的发展,中国很多的企业现在都会走出去,参与到全球化的过程中。
随着5G全息通讯网络带宽条件变化,5G全息应用市场将迎来爆发,全息互动娱乐、全息会议、全息发布会等高端应用逐步向全息 社交 、全息通讯、全息导航、全息家庭应用等方向普及。微美全息(WIMI.US)计划基于全息AI人脸识别技术和全息AI人脸换脸技术为核心技术,用多个技术创新的系统支持全息云平台服务和5G通讯全息应用。
微美全息专注于计算机视觉全息云服务。据介绍,微美全息覆盖从全息计算机视觉AI合成、全息视觉呈现、全息互动软件开发、全息AR线上及线下广告投放、全息ARSDK支付、5G全息通讯软件开发、全息人脸识别开发、全息AI换脸开发等全息AR技术的多个环节,是一家全息云综合技术方案提供商。其商业应用场景主要聚集在家用娱乐、光场影院、演艺系统、商业发布系统及广告展示系统等五大专业领域。微美全息已集全息AI云移动软件开发商、处事商、运营商身份于一身,也成为海内领先的全息AI领域整合平台之一。
微美开发了高级数据分析功能,以便从产品和第三方来源收集的大量数据中获取可操作的见解。目前已经渗透了大约3.5亿的可靠终端用户群,可以从中收集原始数据。微美的处理能力使其能够管理大量数据并大规模提供实时分析,从而继续改进和创新产品和服务。数据挖掘和用户行为数据分析技术使微美能够构建和分割上下文丰富的用户配置文件,并在众多应用程序中应用此类分析。例如,微美通过分析通过全息AR广告服务收集的用户数据创建了2,000多个用户标签。
通过微美专有的图像和视频识别技术,微美的软件使用户能够在像素级别分析底层视频片段,以识别可由3D对象增强的广告空间。广告商及其代理商通过与微美的系统集成的应用程序编程接口或API购买这些广告空间,指定其目标受众和预算,并通常提供嵌入视频中的3D模型。当检测到广告空间并生成3D对象时,3D对象将根据微美软件确定的批处理自动嵌入到基础流视频中。
在三大全息AR产品中,微美全息目前提供的产品和解决方案主要针对的是基于2D屏幕的全息AR和基于3D空间的全息AR。值得注意的是,与智能手机相似,全息AR领域也有一条庞大的产业链。
细分来看,AR产业链主要包括四大部分,硬件、软件、应用和内容、以及服务。硬件包括零部件和设备,软件分为信息处理和操作平台,应用和内容则针对不同的行业进行研发和制作,服务则是通过分发平台将应用内容进行渠道分发。
微美全息的全息AR广告软件可让客户在视频片段中插入真实或动画的三维对象,将对象与视频中的场景片段无缝集成,而广告则主要插播于影视节目中。与传统的数字广告相比,全息AR技术广告更具互动性,且成本效益和灵活性更为明显,其可识别适用于多个品牌广告的重复广告空间,节省相应成本。
微美基于成像检测和识别技术、模板匹配和检测技术、视频处理和识别技术、成像识别中的全息3D层替换技术和成像跟踪中的动态融合处理技术,将全息AR广告嵌入到在线视频中。并希望这些技术将应用于公司未来的战略蓝图,例如全息3D面部识别技术和全息面部变化技术的开发和应用。
全息云业务将与5G深度结合,在5G的高速率与低延时的协作下,远程通讯与数据传输,从系统终端到业务服务器传输时延平均6ms左右,远低于4G网络传输时延,保障了全息AR的远程通讯与数据传输中的无卡顿、低时延,以及多终端异地协同,时交互的丰富性和多样性。使得端+云协同的协同更加高效。增强型移动宽带(eMBB)和物联网(IoT)应用,使得微美全息云的全息AR广告业务与全息AR娱乐业务,以及全息互动娱乐、全息会议、全息社交、全息通讯、全息家庭全息等,都将基于5G+AI人脸识别技术和全息AI人脸换脸技术的核心技术获得有效增长。
另外借助5G和国家政策驱动视频产业快速发展的东风,超高清视频应用价值正不断提升,例如在远程医疗领域,可以用4K/8K摄像头来采集患者高清视频,利用5G高速网络传输后,通过智能显示器和其他计算机硬件对视频进行实时解码渲染,从而方便另一端的医学专家进行远程诊疗。在娱乐影音领域,超高清视频结合AI和计算机技术等,可实现联网互通以及多效互动等应用场景,给人们带来极致的视听体验,推动了AR/ VR 、3D、智能监控、大屏TV等行业的转型升级。
其实5G+应用在其他的领域和场景还有很多的助力,满足多种需求,5G技术的应用不断向外延伸,与 经济 发展相结合,未来创造更好的行业生态。