AI正成为娱乐行业的“水电煤”,将如何拓展视频行业新空间?
本文为东西流媒体研究组根据此前采访和自身研究梳理。
关键词:视听产业 |人工智能 |爱奇艺 |Netflix
撰文
EW RM| 王雪 Shelley Wang
随着中国视频产业发展至今,内容的丰富度已经显著提升,“技术”发展带来的新空间备受期待。
在近期举行的第六届中国网络视听大会上,在官方话语层面对技术创新的鼓励与关注下,企业层面对内容生产升级与技术革新驱动的增量空间探索,亦在影视行业阶段性“遇冷”的当下形成行业共识。
大会期间发布的《2018中国网络视听发展研究报告》进一步指出,未来AI和算法可能会最先渗透进入内容审核、分发营销与IP评估。AI和算法嵌入视听产品制播流程,网络视听内容机制将持续优化,网络视听行业因科技升级。
从全球范围来看,AI已经成为娱乐产业的驱动力之一,在营销与广告、个性化服务、搜索与分类、体验创新等四大主要方面体现得最为显著。而包括IBM、谷歌和英特尔等在内的科技巨头在这些领域的前瞻布局和众多AI领域的创新公司的协同推进,让AI对娱乐产业的改进已经在事实上发生。其中亦不乏来自中国的今日头条、爱奇艺等公司的探索。
在此基础上,我们梳理了作为娱乐产业重要分支的视频产业的AI应用。希望能从海外对标、技术框架完善等角度,给到国内视听产业技术创新路径探索一定的启发和参考。
爱奇艺最新研发的AI手语主播
❶
全球娱乐行业的AI应用趋势
从全球范围来看,随着互联网等新兴技术对于全球的娱乐与媒体行业的重塑,基于内容和分销这两个维度的竞争和差异化已经不足以构建充分的壁垒,而必须更加专注于第三个方面:用户体验,而AI则是有望为这一努力做出积极贡献的领先新兴技术之一。
综合国内外的AI趋势来看,我们梳理发现,目前AI在娱乐和媒体(E&M)行业的应用主要在如下四个方面:
1.市场营销和广告
该领域包括视觉设计、电影推广和广告。利用文本、视频片段等数据进行训练的机器学习算法,可以从训练资源中提取语言、对象和概念,提出营销和广告解决方案,提高效率。这样的系统可以作为一个助手,甚至是一个内容创建者。
IBM用他们的AI系统Watson帮助20世纪福克斯制作的恐怖电影《摩根》的预告片,是将AI技术运用于电影预告片开发的首次尝试。研究小组对AI系统进行了训练,对来自100部恐怖电影的视觉、听觉等构成元素的输入“瞬间”(input “moments”)进行分析和分类,以了解在标准的恐怖电影预告片中应该出现什么样的“瞬间”。Watson只用了24小时就制作出了一个六分钟的电影预告片,而如果由人类专业人士来做,可能要花上数周的时间。
国内的视频平台爱奇艺用AI技术智能识别明星、剧情、行为、动作、情感、台词等多种类别海量场景,让广告自动契合视频内容,实现广告投放效果和用户体验的双重提升。一个被爱奇艺创始人、CEO龚宇经常引用的例子是,在影视镜头出现亲吻镜头的时候,旁边可以挂一个钻戒广告,“这种机器识别的效果,是人力难以达到的。显然,靠AI,靠深度算法来达到,这是增加货币化能力。”
2.个性化的服务
随着娱乐行业越来越关注用户体验的个性化,众多公司都在利用AI为数十亿用户创造个性化服务。例如,当用户浏览视频网站或在线购物时,推荐适合用户个人口味的内容。
IRIS.TV就是这样一家由机器学习驱动的、提供B2B服务的公司。该公司开发的一个基于云计算的个性化视频编程系统,允许发布者和内容所有者生成更多的视频窗口(video view),并在所有设备上与用户互动。其媒体客户包括赫斯特数字媒体(Hearst Digital Media)、哥伦比亚广播公司(CBS)和《好莱坞报道》(The Hollywood Reporter)等。
而目前估值已达到750亿美元的国内科技独角兽今日头条,早在2016年便成立了AI实验室,专注于AI领域的前沿技术研究,几乎将AI贯穿到了内容创作、分发、筛选等各个环节。其中,个性化的推荐算法是今日头条的特色,即基于用户的喜好去智能分发内容。也正是基于这样的核心算法,今日头条才能在短期内累计数亿用户。
3.搜索和分类
随着互联网上的媒体作品越来越多,人们越来越难以在网上找到他们真正想要的东西。AI正在帮助优化搜索结果的准确性。与此同时,计算机视觉技术也使内容制作者能够更好地管理视觉内容,加快媒体制作过程。
谷歌利用机器学习技术的进步,以多种方式提升自己的搜索引擎。其中一个应用是图像搜索,即用户不需要输入关键字来搜索图像,而是可以上传一个示例图片到谷歌图像(Google Image),后者使用图像识别技术识别图像特征,搜索相似的图像。另一个应用是选择性的链接构建,即谷歌利用AI进行恰当地广告投放,例如,猫粮广告出现在与宠物相关的网站上,而培根芝士汉堡广告不会出现在素食者的网站上。
4.体验创新
在过去,报纸和书籍是文字和图像的主要媒介,电影和电视的出现把我们带入了一个动态的新世界。现在,AI正预示着一个视觉内容的沉浸式体验的新时代的到来。这种技术包括虚拟现实(VR)和增强现实(AR)。借助机器学习算法和计算机视觉技术,开发人员可以在一副眼镜内构建复杂的全息场景,这开辟了一个全新的市场。
英特尔正在进入沉浸式体验行业。随着深度学习和计算机视觉技术的应用,英特尔已经成为一家注重虚拟现实内容的视觉内容提供商。在AI算法的支持下,Intel True VR技术可以实现三维像素场景的每一个片段。通过这项技术,球迷还可以在全息视图中观看体育比赛。英特尔(Intel)在2018年美国橄榄球联盟(NFL)超级碗(Super Bowl) 及2018年冬季奥运会的直播和转播中都使用了这一技术。
❷
海外“AI+视频”:
Netflix对AI技术的关键应用
而在细分的视频领域,以拥有全球最大用户群的流媒体平台Netflix为例,今年高达80亿美元的内容支出、《怪奇物语》《王冠》等节目的大火、全球范围内的1.37亿用户(截至2018年第三季度),这些成绩与AI驱动的个性化的关注是不可分的。
据Netflix估计,公司通过AI技术的算法增强了用户粘性,每年可以节省超过10亿美元。
早在2013年,Netflix就宣称“有3300万个不同版本的Netflix应用”(当时该公司拥有3300万用户)。正如Netflix首席内容官Ted Sarandos所说,“没有所谓的‘Netflix节目’。我们的品牌是个性化的。”
在算法上,Netflix根据每个用户的需求调整整个用户体验,包括主页、标题、每部电影的视觉效果、其他电影的推荐等等。Netflix把这种个性化的过程定义为“消费者科学”(consumer science)。
以内容推荐为例,预测哪些节目会吸引用户的兴趣是Netflix模式的关键组成部分。Netflix的高级数据科学家Mohammad Sabah在2014年曾表示,“75%的用户根据公司的推荐选择电影,Netflix希望这个数字能更高。”
2016年5月,Netflix曾推出了一个智能工作流管理和调度应用程序Meson,这个AI系统自动管理提供视频推荐的各种机器学习管道。此后,Netflix的内容推荐得到了很大提升。根据Netflix 2016年年报,全球有9300万用户每天在该平台上观看超过1.25亿小时的电视剧和电影。
具体来说,Netflix的内容推荐是由基于相似的浏览模式代表相似的用户品味这一假设的算法提供的。同品味用户群在这些推荐算法中起着重要作用。(相关链接:Netflix内容决策“新方法论”:同品味用户群)
除了在用户划分上,Netflix与传统媒体公司有所差别外,还有一个关键特征是,Netflix会用图像(image)而非文字去推荐每部电影或电视剧,也就是Netflix自己所称的艺术品(artworks)。Netflix的目标是,为每个节目推荐所配的艺术品(artworks)要能突出与每个会员相关的特定视觉线索。
在艺术品(artworks)的创作过程中,机器学习起着至关重要的作用。具体来说,这种计算机视觉算法可以扫描节目,并从中挑选出不同的图片随机分配给不同的用户,所以就会有数以亿计的个性化图片不断在其用户群中接受测试。
此外,Netflix还采用情境标准(contextual criterias),为每个用户在每个时刻找到最完美的推荐。Netflix 认为,“我们有数据表明,不同的一天,不同的时间,不同的设备,甚至有时不同的地点,人们的观看行为都是不同的。”
大多数互联网公司使用批次处理(batch processing)的方式实现个性化的目标(如个性化推荐),但Netflix意识到这对于时间敏感的场景(如新内容的发布活动或非常受欢迎的内容)来说不够快。他们转向了接近实时(NRT)的推荐过程,以加速学习过程并推出测试结果。
除了个性化的服务外,Netflix也将AI技术应用于优化视频的流畅性和清晰度。对于发展中国家的流媒体服务和移动设备用户来说,互联网连接速度缓慢和带宽限制可能是一个问题。Netflix与南加州大学和法国南特大学开发了一种新的机器学习方法称为DynamicOptimizer,可以压缩视频而不损坏画质,确保用户无论在印度还是日本,都可以享受到流畅、高质的流媒体体验。
❸
国内AI+视频应用探索
回到国内市场来看,近几年,随着内容日渐丰富,三大视频平台纷纷强调创新技术的作用并希望以此构建差异化的能力,而其中最早强调科技创新作用的便是爱奇艺。
事实上,从最早提出“科技驱动”的概念,背靠百度的爱奇艺,事实上,已经在过去的四五年间开始将AI应用得更加广泛。爱奇艺创始人、CEO龚宇坚信,AI将在未来5到10年显著改变媒体和娱乐行业。
龚宇在此次的第六届中国网络视听大会上再次指出,网络视听行业有两条腿,一个是内容,另一方面,它本身就是科技创新的产物。从现在到未来,除了互联网技术,AI、AI技术也是巨大的驱动力,相信这种技术创新为我们的产业带来更大的发展空间。
龚宇
在之后的“AI改变视频未来”智能视频高峰论坛上,从爱奇艺副总裁谢丹铭的现场介绍中,可以发现,爱奇艺已将AI技术应用在智能创作、智能生产、智能标注、智能分发、智能播放、智能货币化与智能客服等各个娱乐生态环节中。
据介绍,爱奇艺通过AI深度神经网络算法增强的HCDN技术、AI ABS自适应码流、ZoomAI视频增强技术、以及只看TA 3.0和智能播放-蒙版弹幕功能来提升用户体验。此外,爱奇艺还将AI技术带来的个性化体验通过HomeAI解决方案带到了家庭场景中。目前,HomeAI已在奇巴布,电视果,奇遇VR和虚拟主播等产品落地应用。
例如,爱奇艺发起的经典电影修复计划就是由ZoomAI视频增强技术实现的。这是一套爱奇艺自主开发的视频增强解决方案。通过这项技术,能够实现了在移动端实时放大540P标清视频到1080P高清视频的超分辨播放功能,可以提高画质并降低视频传输的带宽。
除了提升用户体验,AI技术在内容的生产与创作环节正在发挥越来越重要的作用,从娱乐生态系统的源头深度挖掘内容价值。
其实,今年9月爱奇艺宣布关闭显示前台播放量的背后,也有爱奇艺AI技术的助力。爱奇艺利用AI技术将大剧与电影播放前流量预测准确率提升至88%和81%,电视剧开播后流量准确率提升至93%,并借助大数据+深度学习技术,综合了观看、互动、分享等多维度,推出了热度值,力图为用户、片方以及商业合作伙伴有更好的消费体验和内容价值判断提供依据。(相关链接:四个关键词看爱奇艺“关闭显示前台播放量”:公共价值、内容、用户、规则)
其次,为有效挖掘高价值IP、实现IP价值最大化,爱奇艺推出了IP价值评估系统,利用大数据分析以及自然语言处理技术对爱奇艺旗下、行业IP题材分布、走势进行全局性分析,目前这一系统已经投入使用。
爱奇艺还首创了利用AI技术进行大型综艺后期制作的爱创媒资系统,将AI技术应用在《中国新说唱》、《中国音乐公告牌》、《国风美少年》与即将播出的《偶像练习生第二季》等热门综艺节目的后期制作中,大大提升了娱乐生态系统效率。
此外,利用AI算法更精准地匹配选角方与演员需求的艺汇选角系统,则大大提升了自制内容的选角效率。例如,艺汇选角系统为自制剧《泡沫之夏》选出女主演张雪迎,为《最好的我们》选出了刘昊然,均获得了市场好评,目前艺汇选角系统正被广泛应用于爱奇艺自制剧的选角过程。
在增强货币化能力方面,爱奇艺首创的创可贴广告利用具有强大算法的VIDEO IN广告技术,能基于全网最大的智能明星库,识别出明星、剧情、行为等多种类别海量场景,让广告与内容实现自动契合。在爱奇艺近期热播的硬核网剧《悍城》中,蘑菇街、天津一汽、雷霆游戏等品牌都选择了创可贴广告的形式以扩大品牌影响力。
谢丹铭
此次在论坛现场,爱奇艺最新研发的AI手语主播首次亮相,可见爱奇艺不断打破常规,让技术与娱乐实现创新融合的尝试。
而持续的在以AI为核心的创新技术上着力,最终还是基于深度理解用户与内容,把二者进行高效连接的目标导向。不难发现,这事实上也与全球流媒体巨头Netflix技术框架的主旨相一致。
可以说,依托“科技+娱乐”的双重基因,爱奇艺以AI为核心的科技创新,正成为爱奇艺深度理解用户、合作伙伴、进一步提升内容的生产制作效率及用户观影体验的重要驱动力,而其本身在娱乐生态体系中的落地和应用,还在不断迭代发展中。
▲
前期阅读
(点击链接或图片阅读)