科技猎百度研究院的AI“剪辑师”上岗了
图片来源@Unsplash
近日，百度研究院推出了一个“黑科技”平台VidPress，可以用AI一键完成短视频剪辑。这是百度研究院孵化的业内首个支撑通用型、能够大规模生产的智能视频合成平台。
据悉，用户仅需一键输入新闻的图文内容链接，其余工作可由VidPress平台自动完成。自动化完成的步骤包括智能化的聚合视频素材、生成解说词、进行语音合成和音视频对齐等工序。包括渲染导出在内，整套制作流程能够在9分钟以内完成，从发现热点到最终生成视频完成自动化。
该技术已经在百度旗下短视频平台好看视频上获得大量应用。根据好看视频使用数据, 目前生成一个清晰度为720p、时长2分钟左右的视频，所需时长的中位数为2.5分钟。平台每天可以生产500到1000条视频。
百度AI合成短视频示意图（来源：百度）
百度研究院数据显示，VidPress所生成的视频播放完成率比好看视频的大盘高出15%，其中一些热门视频已经有了85万的播放量。
AI“剪刀手”如何诞生？
在具体的操作上，第一个环节是素材的收集整理。用户输入图文内容后, 例如输入某条新闻事件的链接，平台将基于NLP模型进行语义理解, 并通过主体模型聚合相关新闻素材，以及从同一主题相关新闻里抽取更多的素材及其语义表征，以此保证素材内容相关且丰富。
第二个环节，是语音生成解说词，以及进行素材的深度挖掘与整理。
一方面，平台基于多种语言模型对原文进行处理，自动生成一篇字数符合要求且适合视频呈现的解说词，并通过百度文字转音频服务(TTS)合成解说词语音。
与此同时, 平台会根据对原文的理解, 通过自有视频库和百度全网搜索，对最新最适合呈现的内容进行聚合。利用人脸识别、物体识别、视频内容理解等计算机视觉服务技术进行解析，完成视频素材的剪切组合。
上述两个步骤完成后，平台将基于解说词的音轨时间轴和所聚合的媒体片段，进入音视频对齐剪辑过程。
此处应用的时间轴对齐算法，能够选取出文本中的兴趣点, 再将媒体片段与兴趣点进行相关度打分，将优质媒体片段优先放入时间轴，希望以此引发用户的兴趣。在时间轴生成完毕后，数据将转交给渲染器生成完整视频，整合过程耗时可以保证在9分钟以内。
“一键式“操作行不行？
对于AI剪视频功能，钛媒体也在第一时间进行了体验。
如图，用户需要输入文章链接，链接目前仅支持百家号文章，建议是娱乐类内容。用户可以自行选择发音类型和视频时长。
图文生成视频界面
钛媒体以《谁来保卫我们的白衣天使？》一文为例进行了体验。以下为百度AI生成的视频新闻：
如视频所示，视频解说词由AI自动生成，虽然内容上有些不连贯，但基本选取了文章中的关键内容，能够看出文章的大体脉络。
在使用体验上，该产品更多针对的是新媒体小白用户，可以实现“傻瓜式”操作，相对比较友好。新闻体裁上，该产品更适合快讯型视频新闻，可以一定程度上减少人力和时间成本。
但另一方面，由于强调AI全自动剪辑，全部视频内容均由AI自动组合，用户无法对内容进行修改和编辑，因此也存在很大的局限性。如果在视频生成前，VidPress可以给用户权限进行修改和编辑，那在剪辑产品中可能会更有竞争力。
除此以外，素材的版权问题也存在隐忧。该平台抓取的素材来源于百度自有视频库和百度搜索引擎，而搜索引擎里的内容百度并非都有版权。特别是在用户提供的链接内容信息量不够时，AI就会更依赖外部抓取，其中不仅有素材，还有成品。
在钛媒体体验过程中，也出现了AI自动抓取到一些视频自媒体原创作品的情况。显然，想要做全自动化的AI视频剪辑，版权问题也不可小觑。
当前，VidPress仍然是个基础版。百度方面表示，AI新闻视频还存在很多可能性。例如，可以针对不同垂直分类或投放渠道进行定制合成，又或者是针对用户特点进行视频定制等等。
（本文首发钛媒体，作者/芦依，编辑/宇航，钛媒体编辑Yitao对本文亦有贡献）
敬原创，有钛度，得赞赏
110人赞赏钛媒体文章
-
钛粉37723 赞赏了
为什么高性价比会成为新品牌的噩梦？
约4天以前 -
钛粉86386 赞赏了
Feature Story：Wuhan Comes...
约6天以前 -
钛a71C64 赞赏了
字节跳动只剩下小米这一个朋友了
约6天以前 -
钛粉13418 赞赏了
疫情的危与机下，Zoom的下一步是什么？
上周 -
赚赚 赞赏了
避重就轻的美团：高额抽佣将由谁来埋单?
2020-04-14 11:50 -
钛粉12864 赞赏了
这位UP主吃了100颗以上米其林星星，我们和他聊了...
2020-04-13 12:33 -
钛粉33078 赞赏了
卫龙：一根辣条的逆袭与隐忧
2020-04-13 10:21 -
钛粉41305 赞赏了
狂奔与乱象齐飞，在线教育还值得资本宠爱吗？
2020-04-13 07:19 -
钛九 赞赏了
报复性涨价之后，餐饮行业更难了
2020-04-11 09:53 -
钛粉54038 赞赏了
放开“摊贩经济”刻不容缓
2020-04-11 08:19 -
hM5FcG 赞赏了
华为余承东：品牌高端化不能仅靠比拼硬件参数，客户满...
2020-04-10 21:17 -
钛粉51925 赞赏了
【产业互联网周报】Zoom曝重大安全漏洞，深陷信任...
2020-04-10 20:57 -
钛ijzF5J 赞赏了
谁来保卫我们的白衣天使？| 钛媒体深度
2020-04-10 19:44 -
金木心 赞赏了
瑞幸为何自曝？
2020-04-10 18:45 -
钛粉94386 赞赏了
WTO预测全球贸易缩水可达32%；中俄陆路边境口岸...
2020-04-09 20:13 -
钛粉77786 赞赏了
做电商难，做C2M电商更难
2020-04-09 10:21 -
钛哥儿 赞赏了
瑞幸之后，好未来也自曝财务造假，中概股或面临做空潮
2020-04-08 15:19 -
蒙MYH 赞赏了
半个互联网都在直播带货，但真的都能带得动吗？
2020-04-07 14:39 -
钛粉72866 赞赏了
瑞幸继承了贾跃亭的衣钵
2020-04-04 09:59 -
钛粉06838 赞赏了
直播带货，罗永浩、抖音、快手都输不起
2020-04-02 21:32 -
百灵鸟 赞赏了
有了这件神器，赶走家里的搅屎棍｜钛空好物推荐
2020-04-01 15:25 -
钛粉63994 赞赏了
华裔教授AI解码脑电波，上演现实版“读脑术”
2020-04-01 10:01 -
钛粉63039 赞赏了
华裔教授AI解码脑电波，上演现实版“读脑术”
2020-04-01 10:01 -
钛粉90660 赞赏了
京东数科并购金融IT服务商，填补固收版图
2020-03-31 21:33 -
钛粉74150 赞赏了
韩国总统宣布向七成家庭发钱；全球新冠肺炎死亡病例超...
2020-03-30 20:51 -
钛粉03414 赞赏了
韩国总统宣布向七成家庭发钱；全球新冠肺炎死亡病例超...
2020-03-30 19:27 -
钛粉37732 赞赏了
年初悬疑剧再集结，IP宇宙试水、女性向、题材创新成...
2020-03-30 15:42 -
钛粉47422 赞赏了
马斯克卫星事业最强对手倒下：上周六还在发卫星，这周...
2020-03-29 21:04 -
百灵鸟 赞赏了
当人造肉上了中国餐桌 | 消研所盘点
2020-03-28 11:28 -
钛粉58360 赞赏了
当人造肉上了中国餐桌 | 消研所盘点
2020-03-28 11:26 -
钛粉39859 赞赏了
56年前，奥运如何“挽救”了日本国运？
2020-03-27 21:34 -
钛粉58105 赞赏了
用户变现能力弱，金山办公未来要去哪里寻增长？
2020-03-27 21:32 -
钛粉39889 赞赏了
56年前，奥运如何“挽救”了日本国运？
2020-03-27 21:30 -
钛粉39577 赞赏了
56年前，奥运如何“挽救”了日本国运？
2020-03-27 21:26 -
钛粉58180 赞赏了
武汉封城的第61—63天 |《非常日记》漫画连载
2020-03-27 21:11 -
钛粉58379 赞赏了
武汉封城的第61—63天 |《非常日记》漫画连载
2020-03-27 21:10 -
钛粉58569 赞赏了
武汉封城的第61—63天 |《非常日记》漫画连载
2020-03-27 21:10 -
钛粉63726 赞赏了
武汉封城的第61—63天 |《非常日记》漫画连载
2020-03-27 21:06 -
钛粉63154 赞赏了
武汉封城的第61—63天 |《非常日记》漫画连载
2020-03-27 21:05 -
百灵鸟 赞赏了
国际证监会组织发布稳定币报告，最强监管要来了？| ...
2020-03-27 20:12 -
百灵鸟 赞赏了
国际证监会组织发布稳定币报告，最强监管要来了？| ...
2020-03-27 20:12 -
百灵鸟 赞赏了
国际证监会组织发布稳定币报告，最强监管要来了？| ...
2020-03-27 20:12 -
钛粉58989 赞赏了
从地底到太空，超级高铁的前世与今生
2020-03-27 20:10 -
钛粉58929 赞赏了
从地底到太空，超级高铁的前世与今生
2020-03-27 20:10 -
百灵鸟 赞赏了
书店带货诞生“李佳琦”只是黄粱一梦
2020-03-27 20:08 -
百灵鸟 赞赏了
书店带货诞生“李佳琦”只是黄粱一梦
2020-03-27 20:08 -
百灵鸟 赞赏了
书店带货诞生“李佳琦”只是黄粱一梦
2020-03-27 20:08 -
钛粉38227 赞赏了
书店带货诞生“李佳琦”只是黄粱一梦
2020-03-27 20:08 -
百灵鸟 赞赏了
从地底到太空，超级高铁的前世与今生
2020-03-27 20:06 -
百灵鸟 赞赏了
从地底到太空，超级高铁的前世与今生
2020-03-27 20:06 - 查看精彩文章，打开钛媒体客户端
挺钛度，加点码！
- ¥ 5
- ¥ 10
- ¥ 20
- ¥ 50
- ¥ 100
支付方式
支付
支付金额：¥6
赞赏金额：¥ 6
赞赏时间：2020.02.11 17:32
账户【未登录】提示！
个人中心将无法记录并同步您的赞赏记录，
是否进行登录
更多精彩内容，关注钛媒体微信号（ID：taimeiti），或者下载钛媒体App
