腾讯云音视频AI技术助力世界杯:更低码率实现更高清晰度
雷锋网按: 世界杯火热直播的背后,云计算厂商的参与度可以说十分的高,各家云计算厂商都不同程度的提供了硬件设备或软件算法,其中央视网世界杯极速高清直播背后的腾讯云AI音视频技术声名却不显,不过少有球迷知道,所有的视频流都是经过腾讯云处理之后再分发的。
“对于视频企业来说,带宽支出占很大一部分运营成本,如果想为用户提供高清的视频体验,就必须增加视频流的码率,相应的带宽的总成本也会进一步提高。而极速高清正解决了该问题,可以以更低的码率给用户提供更高清的视频。”腾讯云高级产品经理李海琦表示。
雷锋网 (公众号:雷锋网) 了解到,本届世界杯央视决定分销的时间点大概是在五月底,并希望在世界杯期间引入提升比赛清晰度的技术,各云服务厂商都提供了自己的解决方案。在分辨率同为1024*576、帧率为25的情况下,腾讯云极速高清技术实现了更低的码率,为887kbps,其余两家云服务厂商码率为963kbps和941kbps。VMAF模型用来评估视频质量,腾讯云得到了更高的98.28分,其余两家分别为98.21和76.5。
普通转码目前存在转码失真、分辨率模糊、镜头抖动、噪声大和锯齿块等问题。腾讯云极速高清技术,又叫“智能动态编码技术”,主要利用机器深度学习,通过视频场景智能分类、编码参数匹配、前置处理、编码动态优化、码率智能控制、detail reduce、ROI处理等技术和流程,对直播或者点播视频流进行智能处理,以匹配最优编码参数,从而以更低的带宽成本给用户提供更高清的视频直播流。
在视频场景智能分类方面,通过深度学习的方法,形成十几个主流大类及几十个小类场景模型库。极速高清技术服务期间,可实时对直播流进行检测分析,并匹配对应场景模型。匹配率方面,较明显的场景如游戏、足球、篮球、动漫等CNN网络模型,匹配准确率在98%以上;在电视剧、户外运动、美食、旅游等画面特征分散,帧间运动变化较大的场景下,通过CNN+RNN+LSTM做时域及空间域的分析,可保证匹配准确率在85%以上;
编码参数匹配方面,腾讯云极速高清技术,会根据场景分类实时识别结果,结合视频源码率、帧率、分辨率、纹理和运动变化幅度等情况,以及综合机器负载和画质效果等维度,选择最优编码参数;
在前置处理方面,根据不同场景分类、客户对视频画质的不同要求,以及结合视频源画面纹理和实时运动检测结果进行锐化、软模糊、反交错、去块、降噪、色阶补偿、降帧等前置处理;
腾讯云极速高清技术还支持编码动态优化,可针对不同视频类别,同一个视频内不同视频段,应用完全不一样的编码参数,且支持编码参数按帧实时更新生效。
此外,极速高清技术的码率智能控制,可将主观观看得分VMAF值提高3-5分;detail reduce技术,能够以极低的CPU消耗对噪声宏块进行优化,同时保留清晰宏块的完整性;ROI处理技术,通过SIFT+差分图像+运动目标图像检测的联动,可对POI区域的宏块编码进行强化、锐化、色阶补偿等处理。
世界杯期间,央视网选择接入腾讯云极速高清服务。“世界杯开幕赛期间,在各家直播问题频出的同时,正是凭借腾讯云极速高清技术支持的央视影音,一举实现了口碑的逆袭。”腾讯云高级工程师卢林表示。
为了避免云厂商出现偏袒的情况,央视希望从源头上控制公平性,这就要求私有化部署。腾讯云在时间并不充裕的情况下拿出了全新的私有化方案,在央视网搭一整套腾讯云极速高清转码集群,支持央视网世界杯期间CCTV5频道直播,RTMP/FLV推拉源流,转码处理后支持央视RTMP/FLV/HLS拉流。
实际效果证明,腾讯云方案出流效果超出预期,播出效果对比其他平台优势明显。
据《2017中国网络表演(直播)发展报告》,2017年我国网络直播市场整体营收规模达到304.5亿元,比2016年的218.5亿元增长39%,但针对音视频的技术还有待进一步发展。腾讯云此前发布了全新的音视频AI产品解决方案—腾讯明眸,将极速高清技术纳入,同时在视频业务安全方面加入了人工智能,通过腾讯高效的图像识别及关键词过滤等 AI 技术,腾讯明眸可提供视频涉黄、暴恐识别、涉政监控、关键词过滤等智能服务。
雷锋网了解到,截至目前,腾讯视频云已经服务了超过80%的头部直播平台。腾讯音视频AI产品解决方案能为在线视频、泛娱乐直播、短视频等行业有效节省带宽资源,提升观看体验,帮助企业节省成本,保障业务安全。
。