百度研究院又出黑科技,AI全自动合成短视频,片子也能“躺着剪”
AI 剪辑师初体验
“剪片子”总共分三步
VidPress 是百度研究院孵化出的业界首个支撑通用型、大规模生产的智能视频合成平台,用户仅需一键输入新闻图文内容的链接,其余全部工作交由平台自动化完成,视频素材智能化聚合、解说词生成、语音合成、音视频对齐和渲染导出整套制作流程9分钟就能完成
听起来很棒,用起来怎么样呢?下面一起来看一段 AI“剪片子”的实录:
P.S. 为了完整展示 AI 剪辑的过程,本视频采用一镜到底的形式,视频生成的等待时间没有剪掉,大家可以适当快进哦
简单来说,用 VidPress “剪片子”总共分三步:
申请测试后进入“VidPress”页面,点击“Create first video”跳转页面。
复制想要进行视频转换的新闻内容链接,并粘贴至 VidPress,选择旁白音色、视频时长、清晰度后,点击生成。
检查旁白及字幕,根据需要编辑文案,一键修改,剪完收工!
AI 剪辑师的作品已提交,请验收
其实,智能视频合成平台 VidPress 的高效率和高质量早已得到了实际验证,在各视频平台“遍地开花”。百度研发了分布式视频生成系统和对外服务的 REST API,为好看视频大规模生产提供服务。
根据好看视频使用数据, 目前生成一个时长2分钟左右的 720p 视频, 所需时长的中位数仅为2.5分钟;平台每天可以生产500到1000条视频,整个过程从热点发现到最终的视频生成完全无人化、自动化;此外,VidPress 所生成的视频播放完成率比好看视频的大盘高出15个百分点,一些热门视频已经有了85万的播放量,足见 AI 新闻视频深受观众喜爱。
这里还有 AI 剪辑师的其他高播放作品哦
《公开宣战?蒋大为嘲讽朱之文不配当艺术家,网友怒批:真是弟弟》
播放:85w+
https://haokan.baidu.com/v?vid=3930734772195503091
《孙红雷<新世界>大结局提前泄露,铁证已出,3点再无反转》
播放:14W+
https://haokan.baidu.com/v?vid=11194109174936612170
新闻视频生产躺赢式完成
剪辑界的“黑魔法”刨根问底
用户输入图文内容后, 例如输入某条新闻事件的链接,平台将基于 NLP 模型进行语义理解,并通过主体模型聚合相关新闻素材,以及从同一主题相关新闻里抽取更多的素材及其语义表征,充分保障素材内容的丰富度和相关性。
紧接着,解说词语音生成和素材深度挖掘同步启动:
一方面,平台基于多种语言模型对原文进行处理,自动生成一篇字数符合要求且适合视频呈现的解说词,并通过百度文字转音频服务(TTS)合成解说词语音,效果媲美播音员;
与此同时, 平台会根据对原文的理解, 通过自有视频库和百度搜索引擎搜索,智能化聚合最新最适合呈现的内容,并基于人脸识别、物体识别、视频内容理解等计算机视觉服务进一步解析和理解,自动剪切和精选视频素材。
上述两个步骤完成后,平台将基于解说词音轨时间轴和所聚合的媒体片段,进入音视频对齐剪辑过程。百度升级后的第二代时间轴对齐算法,其关键在于选取出文本中的兴趣点, 再将媒体片段与兴趣点进行相关度打分,将优质媒体片段优先放入时间轴,以此保证视频的整体观感和用户兴趣的持续激发。
当时间轴生成完毕之后,数据转交给渲染器,从而生成一个完整的视频,整合过程耗时可以保证在9分钟以内,极其高效
AI 新闻视频仍在探索更多的可能性,例如针对不同垂直分类或投放渠道的定制合成、针对用户特点定制化视频生成以满足个性化需求等等。同时,百度并不满足于提供内容生产平台,还希望依托自身丰富的数据资源,对某一个热门新闻进行多角度观察和报道,让受众能够更客观的了解一个事件,在推动互联网内容的信息中立化中发挥更大作用。
目前,VidPress 平台可以申请试用,无门槛化身“剪刀手”大神的机会你怎能错过,快快登录链接抢先体验吧!如有相关短视频合作需求,欢迎邮箱联系我们
体验链接
https://ai.baidu.com/creation/external/labprojectlist
联系邮箱
vidpress.support@baidu.com