百度研究院又出黑科技,AI新闻视频凭实力定义“剪辑大神”
2020-04-20 16:49:07爱云资讯阅读量:923
下面这个视频更是“萌”出新高度,百度研究院推出黑科技,AI竟然自己剪视频报道自己学会了做视频这个新闻。
(图片来源:视频截取,AI剪辑视频报道自己)
依托强大人工智能技术和海量数据资源优势,百度研究院孵化出业界首个支撑通用型、大规模生产的智能视频合成平台VidPress,用户仅需一键输入新闻图文内容链接,其余全部工作则交由平台自动化完成,视频素材智能化聚合、解说词生成、语音合成、音视频对齐和渲染导出整套制作流程在9分钟以内能够高效实施,生产效率和质量得到大幅提升,完美解决视频生产过程中人力成本、技术难度、素材有限、无法大规模生产等诸多难题,助力5G时代数字内容生产创作及视频化升级,实现信息更加普惠。
智能视频合成平台VidPress的高效率和高质量得到了实际验证,早已在各视频平台“遍地开花”。百度研发了分布式视频生成系统和对外服务的REST API,为好看视频大规模生产提供服务。根据好看视频使用数据, 目前生成一个时长2分钟左右的720p视频, 所需时长的中位数仅为2.5分钟;平台每天可以生产500到1000条视频,整个过程从热点发现到最终的视频生成完全无人化、自动化;此外,VidPress所生成的视频播放完成率比好看视频的大盘高出15个百分点,一些热门视频已经有了85万的播放量,足见AI新闻视频深受观众喜爱。
一键输入即可躺赢式完成新闻视频生产,剪辑界的“黑魔法”是如何实现的呢?
用户输入图文内容后, 例如输入某条新闻事件的链接,平台将基于NLP模型进行语义理解, 并通过主体模型聚合相关新闻素材,以及从同一主题相关新闻里抽取更多的素材及其语义表征,充分保障素材内容的丰富度和相关性。
紧接着,解说词语音生成和素材深度挖掘同步启动。一方面,平台基于多种语言模型对原文进行处理,自动生成一篇字数符合要求且适合视频呈现的解说词,并通过百度文字转音频服务(TTS)合成解说词语音,效果媲美播音员;与此同时, 平台会根据对原文的理解, 通过自有视频库和百度搜索引擎搜索,智能化聚合最新最适合呈现的内容,并基于人脸识别、物体识别、视频内容理解等计算机视觉服务进一步解析和理解,自动剪切和精选视频素材。
上述两个步骤完成后,平台将基于解说词音轨时间轴和所聚合的媒体片段,进入音视频对齐剪辑过程。百度升级后的第二代时间轴对齐算法,其关键在于选取出文本中的兴趣点, 再将媒体片段与兴趣点进行相关度打分,将优质媒体片段优先放入时间轴,以此保证视频的整体观感和用户兴趣的持续激发。当时间轴生成完毕之后,数据转交给渲染器,从而生成一个完成的视频,整合过程耗时可以保证在9分钟以内,极其高效。
AI新闻视频仍在探索更多的可能性,例如针对不同垂直分类或投放渠道的定制合成、针对用户特点定制化视频生成以满足个性化需求等等。如有相关短视频合作需求,可联系邮箱: vidpress.support@baidu.com。不仅如此,百度并不满足于提供内容生产平台,还希望依托自身丰富的数据资源,对某一个热门新闻进行多角度观察和报道,让受众能够更客观的了解一个事件,在推动互联网内容的信息中立化中发挥更大作用。
目前,VidPress平台可以申请试用,无门槛化身“剪刀手”大神的机会你怎能错过,快来体验吧:https://ai.baidu.com/creation/external/labprojectlist。
相关文章
- 百度文心智能体技术获2024世界互联网大会领先科技奖
- 百度世界大会2024亮相两大新技术,微美全息紧跟AI浪潮引领5G产业应用
- 人工智能智库网络在京启动,百度、快手、华为、蚂蚁、腾讯、阿里等发起
- 百度世界大会2024圆满结束 Anker安克携旗舰新品Anker Prime参会
- 百度世界2024召开 文心快码升级至3.0 率先进入智能体时代
- 百度世界大会后首日:公司类智能体成热门,582家企业新增合作
- 2024财富游学团再度起航,百度爱采购与联想官网企业购全力支持中小企业数智化发展
- 直击进博会现场,百度吴华分享文心大模型最新应用成果
- “百度智能云千帆AI加速器暨北大科技园先锋加速计划”顺利举办
- 百度国际MediaGo荣获Global Tech Awards全球科技奖
- 百度英伟达合办的AI大赛初赛结果出炉:最小选手9岁最大51岁
- 百度领跑国内AI,9月最受欢迎AI产品前5占3席
- 百度ARM云全栈自研方案全新升级,普惠智算助力行业数智化转型
- 百度云智大会开幕 三星携手百度共探AI新机遇
- 值得买科技CTO王云峰出席2024百度云智大会:共促大模型生态优势互补,助力AI创新协同发展
- 首个视频模型!Vidu API正式接入百度智能云千帆大模型平台