AI虚拟人全息直播引领远程通信社交，微美全息5G全息会议将成标配应用场景

10月19-20日,由工业和信息化部和江西省人民政府联合主办的“2020世界 VR 产业大会”在南昌隆重开幕,本次大会主题为“VR让世界更精彩——育新机 开新局”。大会吸引了来自十八个国家和地区的VR/AR行业龙头企业、权威组织机构、知名学者等共同参加,携手探索VR/AR、人工智能等前沿技术的未来“新可能”。大会不仅聚集了全球VR领域的顶尖专家学者,各项行业最新技术比如AR特效、5G+云、VR直播、全息投影等也在会议中争相亮相,共同带给了与会者“超越时空”的神奇感受。

其中最引人瞩目的,就是此次会议首次将全息影像技术应用在了开幕式虚拟主持人和嘉宾演讲的环节,观众可以通过全息投影,身临其境地感受由机器算法叠加的“超越时空”的世界。据悉,虚拟主持人是运用行业领先的人工智能技术数字化克隆。通过虚拟人形象AI合成技术,对真人的检索与提取,精确重构面部模型,经过唇形对齐与表情迁移,让真人的一颦一笑都能在虚拟世界中高度还原。作为此次云峰会的硬核技术之一,AI虚拟主持人“钟石”与大会现场主持人进行实时互动,虚拟与现实无缝切换,演示了一场未来智媒全息直播的场景。

虚拟主持人是模拟现实中真实的主持人的形象表现,只需少量采集真人视频样本,通过深度学习算法,即可快速高效合成多模拟人物模型,包含面部表情、肢体动作、口型对齐等。可以呈现出最逼近真人的真实效果。不但如此,灵活的多模态交互框架下,除了能充分实现虚拟主人的单向播报的基本要求外,还能实现从“能说”到“会说”的技术飞跃。

全息投影技术(front-projected holographic display)也称虚拟成像技术,是利用干涉和衍射原理记录并再现物体真实的三维图像的技术。其第一步是利用干涉原理记录物体光波信息,此即拍摄过程:被摄物体在激光辐照下形成漫射式的物光束;另一部分激光作为参考光束射到全息底片上,和物光束叠加产生干涉,把物体光波上各点的位相和振幅转换成在空间上变化的强度,从而利用干涉条纹间的反差和间隔将物体光波的全部信息记录下来。记录着干涉条纹的底片经过显影、定影等处理程序后,便成为一张全息图,或称全息照片;其第二步是利用衍射原理再现物体光波信息,这是成象过程:全息图犹如一个复杂的光栅,在相干激光照射下,一张线性记录的正弦型全息图的衍射光波一般可给出两个象,即原始象(又称初始象)和共轭象。再现的图像立体感强,具有真实的视觉效应。全息图的每一部分都记录了物体上各点的光信息,故原则上它的每一部分都能再现原物的整个图像,通过多次曝光还可以在同一张底片上记录多个不同的图像,而且能互不干扰地分别显示出来。也就是说,无论会议的嘉宾身在全球任何一个角落,通过这项技术,都可以将演讲嘉宾的影像清晰地展现在舞台之上,一颦一笑宛如真人亲临现场。

全息投影技术早在电视电影中惊艳亮相,“星球大战”系列电影中,角色们通过全息影像实现实时语音通讯的一幕给观众们留下了深刻的印象。如今,随着 科技 的发展,全息影像技术开始进入日常生活的各个领域。

当欧洲科学院院士、奥地利国家科学院院士维尔纳.普卡特霍夫教授 Prof.Dr.Werner Purgathofer等未能到场的重磅嘉宾以1∶1全息投影出现在会场时,超越时空的黑科技演绎立马引起现场观众的注意,现场嘉宾面露惊喜,纷纷表示全息投影既科幻又真实,仿佛置身于科幻大片之中。

不单单本次2020世界VR大会使用了全息呈现真人的方式,受新冠肺炎疫情影响,今年WAIC也首次以“云会展”的形式开展,在形式上也包含真人全息投影、实时3D云嘉宾体验等。其中,阿里巴巴创始人 马云 和特斯拉联合创始人兼CEO马斯克以全息投影的方式视频连线会议。

全息“虚拟人”简单来说就是通过AR全息科技,让观众可裸眼观看全息人物或场景在现实中的真实还原,用户体验可以用叹为观止来形容这种将全息技术与娱乐模式相结合,观影者能够成为电影/舞台中的角色,介入影片/舞台事先设置的环境与剧情,让观影者身临其境般感受到自己就是电影/舞台里的一份子,观影者就是影片里的主角或是其中一员,并持续与影片/舞台内容产生交互作用。

作为全息视觉领域的领军企业,微美全息(WIMI.US)专注于计算机视觉全息云服务。微美全息覆盖从全息计算机视觉AI合成、全息视觉呈现、全息互动软件开发、全息AR线上及线下广告投放、全息ARSDK支付、5G全息通讯软件开发、全息人脸识别开发、全息AI换脸开发等全息AR技术的多个环节,是一家全息云综合技术方案提供商。其 商业 应用场景主要聚集在家用娱乐、光场影院、演艺系统、商业发布系统及广告展示系统等五大专业领域。

随着5G全息通讯网络带宽条件变化,5G全息应用市场将迎来爆发,全息互动娱乐、全息会议、全息发布会等高端应用逐步向全息 社交 、全息通讯、全息导航、全息家庭应用等方向普及。微美全息云计划基于全息AI人脸识别技术和全息AI人脸换脸技术为核心技术,用多个技术创新的系统支持全息云平台服务和5G通讯全息应用。

微美通过构建多角度拍摄实时建模系统:对采集对象进行全维度的影像扫描,实时合成为立体模型。六度矩阵式光场系统:多光源综合运用,构建全息虚拟影像的成像场。双眼视差智能增强系统:采集过程中动态跟踪对象轨迹并调整光线,保持双眼差的均衡值。多图像动态融合系统:狭窄空间中的多维图像广角采集技术,应用于云视小型化全息栈仓。全息图像高速处理算法:对图像信息进行极速处理,并保证渲染效果,处理速率达10GB/秒。隐身聚酯光学显像膜:全息成像关键构件,让全息影像完美成像显示。全息虚拟人物画音重建技术:运用人骨骼动态捕捉,图像实时渲染,语音识别技术,声音模拟技术呈现虚拟人。

全息云平台:覆盖全国的影像采集和还原,具有数据存储、影像还原、全息社交属性的交互平台。微美全息通过以上系统组合构建起完整的5G全息通讯应用平台,以支持各种线上终端和个人设备应用,同时拓展全息社交通讯、全息家庭互动、全息明星互动、全息在线教育、全息在线会议等各种主流5G全息应用。

微美全息云业务将与5G深度结合,在5G的高速率与低延时的协作下,远程通讯与数据传输,从系统终端到业务服务器传输时延平均6ms左右,远低于4G网络传输时延,保障了全息AR的远程通讯与数据传输中的无卡顿、低时延,以及多终端异地协同,时交互的丰富性和多样性。使得端+云协同的协同更加高效。增强型移动宽带(eMBB)和物联网(IoT)应用,使得微美全息云的全息AR广告业务与全息AR娱乐业务,以及全息互动娱乐、全息会议、全息社交、全息通讯、全息家庭全息等,都将基于5G+AI人脸识别技术和全息AI人脸换脸技术的核心技术获得有效增长。

根据IDC数据,2021年全球独立AR及VR硬件出货量将分别达到2700万件、7200万件。而赛迪顾问数据显示,截止2021年,我国AR/VR市场规模将达到544.5亿元,同比增长95.2%,AR/VR有望成为5G最受益终端。

随着VR/AR硬件设备的升级、5G技术的成熟、应用内容的丰富,开启了VR/AR产业发展的新一轮热潮,将推动VR/AR的应用范围从直播、 游戏 等消费娱乐领域,加速向工业、医疗、教育等垂直领域渗透,实现规模化发展。全球及中国VR/AR产业在5G商用加速、终端硬件升级、消费者娱乐社交需求提升全方位驱动下有望迎来快速发展。