《中国新说唱》口碑炸裂背后,AI 如何撑起一档爆款综艺

《中国新说唱》口碑炸裂背后,AI 如何撑起一档爆款综艺

与其他综艺不同,今年的《中国新说唱》自启动开始,就自带「科技」基因。

播出近一个月的《中国新说唱》继续创造了新的流行词,登上了无数次热搜,再度成为了暑期里最具话题性的综艺节目。

与其他综艺不同,今年的《中国新说唱》自启动开始,就自带「科技」基因。

几个月之前,爱奇艺官宣通过 AI 选角模型,综合明星的人气、热度、专业程度、音乐类型、粉丝画像等数据,为潘玮柏选出了匹配度高达 90% 的明星邓紫棋作为搭档,消息一出网络上却是一片质疑声。

但从节目上线之后,# 紫棋说得对 # # 我帮你唱 HOOK# 刷屏社交网络,到新近在制作人公演中,与潘玮柏成功挑战高难曲目《死了都要爱》,邓紫棋在节目中的人气值一路逆转飙升。

对于邓紫棋的口碑反转,在某种程度上是用户集体对爱奇艺 AI 技术的一次点赞认可。而事实上,对 AI 技术的应用已经贯穿于《中国新说唱》这样一档 S+级超级网综的选角、后期制作、节目分发等多个环节。

要想成为爆款综艺,精准的用户洞察、新鲜的表现手法和超强的执行能力缺一不可。AI 技术的加持,则极大拓宽了超级网综的想象空间。

AI 赋能后期制作

大多数观众对综艺的制作流程了解甚少,这也是部分综艺内容常常引起观众误会甚至一些粉丝会为了某些情节而出离愤怒的原因。

而口碑爆棚的综艺节目中,好的剪辑也往往能给节目锦上添花。例如《向往的生活》,将一季中日常生活的琐碎过程,梳理出年轻演员的心境成长历程,通过适当的场景展示、结构调整让参与者的性格特征更清晰地被观众注意到,成就了节目和参与者的口碑双赢。

这样的例子比比皆是。而这样精彩的「故事线」背后,其实是需要剪辑团队从以 TB 级的素材中去挑选参与者们最华彩的部分、最适当的场景来表达。内容越细致,意味着越繁重的后期制作工作。

正在如火如荼进行的《中国新说唱》这类的大型竞技类综艺这种工作的难度可能还要成倍增加。因为从初选、入围站、1V1 对决,每一次都是有数十人的选手,再加上明星制作人等,拍摄规模和时长都是远超一般综艺节目的。要让节目精彩好看,节目的剪辑团队也备受关注。事实上在去年《中国有嘻哈》收官的时候,「中国有嘻哈 剪辑」甚至一度冲上了微博热搜榜。

今年面对更高涨的期待,极客公园了解到,爱奇艺将 AI 技术也引入到了后期制作中,辅助剪辑师。率先实现突破的环节就在非常费力的字幕听打环节和帮助剪辑的画面查找功能。

传统制作流程中,一期节目录制完毕后,后期人员需要像速记一样一个字一个字手敲出字幕,此外还要反复进行打点、校对的工作,比如在制作人公演中,潘玮柏、邓紫棋与热门选手艾热三人之之间,交流夹杂着中文、英文的小声交流,更会会对听打字幕的工作带来挑战,通常近完成字幕听打就需要数个小时。引入智能扒词功能之后,爱奇艺副总裁叶涛表示,「在听打字幕方面,原来基本上一个小时的节目,制作人员需要 5 到 10 个小时的先听打,然后再花 1.5 到 2 个小时的核对,完成这项工作。现在 AI 可以实现智能听打字幕,目前这项工作只需要人力花 1.5 到 2 小时的核对,效率大幅提升。」据了解,这个智能听打字幕功能正是应用了 ASR(语音识别技术)。

如果说智能听打字幕解决了后期的效率问题,上线的基于 AI 算法的「精彩画面查找功能」则更有力地护航了后期内容的精彩度呈现。

一场竞赛节目,是包括前台竞演、制作人沟通、其他选手观赛、后期单人访谈等多时空维度合成的 一种综合观看体验,不同任务的表演、评价、观众反馈塑造了不同的人物识别度。例如吴亦凡和那吾克热的互选纠结,就搅动了网络上数亿观众的心情。

细致入微地体察表演者的感情转换和推动情节发展,需要大量的素材和精心的编辑。《中国新说唱》的后期团队需要使用 AI 对视频素材中反映观众情感和不同场景中同一反应的视频进行查找。通过人脸识别、表情识别、声纹识别、景别识别与动作识别技术,根据不同的标签组合查找定位视频;也可以通过「只看 TA」功能,根据确定标签仅查看该视频中包含当前标签的视频内容,比如制作人想查找张震岳大笑的频段,可以利用根据关键字「张震岳」、「大笑」的组合,便可以马上找到所有张震岳大笑的频段,然后选出部门片段作为节目的一部分。

爱奇艺副总裁谢丹铭表示,爱奇艺在情感识别方面,在全球比较领先,情感识别也被应用在了《中国新说唱》的后期制作中,可直接解决后期制作在寻找无论是导师还是选手的反应类素材。

效率服务创意

除了以上重点提到的两个 AI 辅助技术的应用,爱奇艺还为自制综艺设计了一整套的 AI 辅助系统的落地,包括新的智能制作系统的设计、新网络部署,新的硬件设施的部署等。更好地实现技术落地需要平台拥有强大的跨界资源整合能力,能够将软件、硬件、第三方服务三者的有效结合,除了基本的辅助以外,团队还需要保证后期制作内容的安全性,在制作阶段不能出现素材外流的情况。

因此,技术团队还需要实现 AI 算法的精准度以及提高系统的稳定性,在后期制作的过程中,技术人员一方面需要让系统能够完成自动的部署,一方面也要进行必要的远程协助。

显然,在 AI 赋能娱乐工业的道路上,爱奇艺并非只局限于单个技术的应用。以成为一家以科技驱动娱乐公司为愿景,爱奇艺早在 2014 年已经开始布局 AI。其 CTO 刘文峰曾对媒体表示,相较于其他场景,娱乐将是 AI 最容易落地的领域,利用技术手段打造出一个新型平台,而这个平台可以让内容更有效地被利用,并更容易转化为「有价值的东西」。

眼下,这种转化正在逐渐发生。对制作团队而言,AI 技术的应用一方面可以减轻很多基础性工种的人员的工作强度,由 AI 将会承担越来越多后期制作中重复、繁重的工作。但另一方面,对于素材处理效率的提升,将为节目创意创作留出更充裕的时间,最终提升的是节目质量和用户体验。

在未来,后期制作智能化的程度将影响大型综艺节目的创意与市场竞争力。

文娱不仅仅是 IP

在今年五月的爱奇艺世界大会上,爱奇艺创始人、CEO 龚宇强调了技术对于爱奇艺的重要性。在他看来,爱奇艺不仅仅是一个单纯的视频网站,丰富内容的同时,爱奇艺还在通过技术寻求自己定位的延伸。

「不同于一般的科技公司,(爱奇艺的)DNA 是一个双螺旋结构,一个是科技铰链,另外就是娱乐创意,总结成一个词就是理性科技+感性创意。」龚宇说道,于是,在那次的爱奇艺世界大会上,AI 成了 IP 以外最重要的关键词。

尼尔逊教授曾对 AI 下了这样一个定义:「人工智能是怎样表示知识以及怎样获得知识并使用知识的科学。」这个概念延伸到 AI 娱乐的话,可以做出这样的解释:AI 娱乐就是一种新的表示娱乐、获得娱乐,以及享受娱乐的方式。它将提升用户的观看体验,提高内容创作者的工作效率,增强在线视频网站的变现能力,最终推动整个娱乐产业的进步。

在 AI 的帮助下, 基于自研的人脸识别技术,爱奇艺建成全网最大的智能明星库,并推出「艺汇」智能选角系统;在自制综艺节目的制作过程中,AI 除了具备强大的视频理解和分析能力,还可以在后期制作环节实现快速合版、过滤废材、有效索引、标签推荐等繁复的工作;AI ABS 自适应码流播放可以根据用户观看视频内容时网速的变化调整分辨率,减少卡顿现象的发生。

AI 正在让「人机共创」成为可能。这家视频起家、刚刚走过八年的公司已经成为了视频这个细分行业里数一数二的核心玩家,借助 AI 技术,爱奇艺也开始迈出行业的边界,一点一点的向更远的地方探索。

*本文作者拉风的极客geek,由新芽NewSeed合作伙伴极客公园授权发布,转载请联系原出处。如内容、图片有任何版权问题,请联系新芽NewSeed处理。