《青春有你》从3000小时素材到2小时成片 超级网综的一场AI试验

来源:群推手网 2019-03-13 11:26:46  

“姚明明的舞台炸了!”

“李汶翰唱歌太酥了~”

“我们家管栎真是可甜可盐(星星眼)”

《青春有你》播出到第7期,粉丝们已经被这一季的Q1DD们迷得七荤八素。为了不让千万粉丝错过青春制作人和训练生们的每一帧微笑,爱奇艺的制作团队没少花费心思。

从光芒四射的舞台被摄像机录制成素材,再到画面精美的播出片,一个节目跨越时间、空间飞入每一个普通人的手机“屏幕”,在被圈内人称为“小煤窑”的机房,一群节目制作人动辄要在一周内把3000小时的素材剪辑为1-2小时,这通常伴随着几个不眠不休的日夜。

后来,现场来了一支团队,不是另一支成熟的内容制作团队,而是一群程序员。程序员们也万万没想到,自己一个学技术、写代码的人,要像一个导演一样,在张艺兴当导师的节目录制现场,架机器、录节目、剪片子,学习如何制作一档节目。

技术人员在后期制作中心调看代码

Part1 后期“黑科技”带来的“曙光”

这群程序员来的第一件事,就是和内容团队“泡”在一起。尤其在节目制作期间,工位上很少出现慧霞的身影。

慧霞是爱奇艺爱创媒资系统的产品经理,和普通互联网公司的产品经理不同,她大部分时间是和后期人员在一起的。“真没想到,有一天会在机房里,跟剪辑师、导演们一起思考如何优化节目制作效率。”

也只有亲身参与过,才知道《青春有你》的素材量有多大:将近100个训练生,6位导师,上百台机器要记录每天的学习生活,每个人都有镜头。最多的一期,设备一天就生产了3000个小时的素材,最终要剪成2个多小时的节目导出传输,而制作时间只有一周左右。

实际上,这也是节目制作行业共同的问题——任务量庞大,制作周期短。这种模式下,后期制作人员在机房熬夜成了家常便饭,吃住在机房也成了理所当然的事。

但有些工作,在技术人员看来,完全可以由机器承担。“刚开始大家很忙,我有时间就会跟制作同学聊天,后来我发现,比如像合版、听唱词这样的事,机器完全可以做,能给他们省好多事。”慧霞提到,在几次尝试后,机器听唱词开始代替人力,逐步渗透至制作过程中,在《青春有你》时已经全面应用。

慧霞在后期制作中心测试产品

“加入技术后,真的加快了我们的工作效率,减轻了工作量”后期制作中心的肖肖坦言。事实证明,一个1小时的视频,以往需要隔天才能返回的唱词素材,现在只需要几分钟。

就连传输素材,很多年都是通过硬盘拷贝人工运送,从录制《青春有你》的廊坊到爱奇艺总部需要开车两三个小时。后来技术团队为节目搭了一条传输专线,16分钟就能将素材传回总部。

Part2 程序员变“导演”,制作人懂技术?

一档节目从拍摄结束到成片,还需要经历拍摄素材整理、转码、合版、剪辑、字幕等一系列流程。由于素材量庞大,在将拍摄素材转码为统一格式的阶段,就会耗费掉1-2天的时间,最后留给制作团队剪辑的时间,通常只剩下几天。

合版是个承上启下的关键环节,它把不同机位拍摄的同一时间段素材对齐,避免音画不对位问题。在《青春有你》之前,合版工作主要依靠人工,像《青春有你》这种大素材量的节目,往往需要接近10个人的团队配合软件来完成。

那么耗时费力的合版工作,为什么不交给机器完成?慧霞在现场提出了这样的问题。在拍摄《国风美少年》时,技术团队采用了声音对齐的方式进行合版。但这种方式后期操作难度较大,成本较高,很难大规模施行。

还有一种则是通过时间做合版,简单来说类似于给摄像机统一一个时间,这样可以在爱创媒的系统里直接跑出合版好的软件,进入下一阶段的剪辑。这种模式几乎完全节省掉了人力,只需要留两个人来盯着机器。

听起来一劳永逸,但实际推进起来却阻力不小。负责艺术创作的内容团队与科技感十足的技术团队,工作方式迥然不同:技术开发通常快速执行,不断试错再优化;但创作团队遵循既有的固定流程化和成熟的制作模式。

对于尝试新技术,内容团队心底多少是打着问号的。节目制作的模式已经运转很多年,行业内也形成了一套比较顺畅的流程,所以尽管辛苦,但并没有人想过要去更改这样的流程。尽管这几年技术、人工智能很火,但万一技术实现不了,耽误节目正常制作怎么办?

而技术团队也逐渐发现现场情况格外复杂。拍摄节目是多个团队共同配合的活动,摄像、灯光、后期每人都要盯好自己这摊事,但顾不上去为其他工种设身处地着想。技术人员发现,大大节省后期时间的方案,对于摄像大哥来说属于可有可无,推动起来并不容易。

最后的解决方法是,技术团队先在旁边单独加了两台机器做测试。直到后期剪出来发现效果很好,又测试了几轮之后才大规模应用于实拍。其实这也并不怪内容团队过于谨慎,这项技术此前在棚拍节目中偶有使用,而爱奇艺首次将其大规模应用在S级节目制作中。

另外细心的观众会感觉,《青春有你》在捕捉训练生表情细节方面,似乎做得更加精准了,比如每期舞台公演训练生的一颦一笑,赛后等待结果的反映举止等。

这是通过AI人脸识别技术来优化的。早期做节目,抓取关键时刻训练生的表情需要依靠场记的整理,或者在海量素材中大海捞针。因为相比哭、笑等明确动作,紧张、忐忑、举足无措等心理反应计算机往往无法识别。

但对《青春有你》的粉丝而言,显然不希望错过任何一个Q1DD在舞台上的精彩表现和日常细节。此次在录制《青春有你》时,技术团队通过观察人工剪辑时的片段,提取出一些代表性的习惯动作,比如皱眉、咬嘴、搓手等微表情。他们希望将这些具象化的场景与紧张、忐忑等情绪对应,机器学习后就会自动识别出相应片段,方便剪辑在系统中直接调取。

训练生等待公布结果

也正是在现场实践的不断磨合中,技术团队与内容团队逐渐找到了最合适的沟通语言。为了筹备《青春有你》,技术团队全面学习了节目从策划到拍摄制作上线的各个流程。项目制作期间,产品经理天天泡在机房跟后期制作团队的同事一起奋战工作。一方面观察剪辑,不忙的时候就多聊天交流;另一方面也努力调试产品,教大家如何使用爱创媒资来节省时间。

Part3 娱乐重体验时代:第一个吃“螃蟹”的爱奇艺

“现在的确有很多难题,两个思维方式完全不同的团队配合默契挺难的,可是我觉得总要

有人迈出第一步,哪怕只是一点点。我觉得我们在做这样一件事,这也让我很激动。”

事实上,经过一段时间的配合,一支内容团队、一支技术团队,他们在《青春有你》的制作中逐渐融为一体,变得越发默契。慧霞将这套沟通机制总结为“快速迭代,小步快跑”:有一些新功能就先更新就先用上,再不断迭代,这样更高效,也能持续根据制作人员的反馈不断调整。

更重要的是,在节目制作不断优化的过程中,双方都体验到传统岗位之外完全不同的工作体验:技术人员要去现场扛摄像机、接线,产品经理70%的时间在机房度过,而内容创作团队遇到问题时,很自然地开始思考如何运用技术解决。

当前,人工智能被看做新一轮产业变革的重要驱动力,但在实际应用层面,每一个细节在具体业务中的落地,都是一次新的突破与尝试。技术对产业的变革,既需要技术能力的不断升级,也需要传统业务人员转变思维,积极拥抱,双方共同探索技术落地应用的道路。

在AI技术应用方面,一直秉承科技+娱乐战略的爱奇艺实际上走得更向前一步。通过影视、综艺等多个项目的试水,如今AI技术服务已经涵盖智能创作、智能生产、智能标注、智能分发、智能播放、智能变现、智能客服等娱乐内容生产的全流程。

《青春有你》则是爱奇艺从网综开始的一场AI试验,摸索出一条技术与内容碰撞融合的道路。它打破了传统节目制作“劳动密集型”的现状,让优质内容制作流程更为高效地运转;对内容团队和技术团队而言,也是一次打破常规的深度融合,为后来的从业者们提供了非常有意义的参考。

得内容者得天下,但好内容已经不再只是匠心制造,而是内容与技术深度融合后的结果。视频网站经历了以海量内容获客的1.0时代,如今正在向全面提升用户体验的2.0时代进阶,谁更懂用户、能够持续生产爆款才是决胜利器。未来,人的创意和机技术算力的完美融合,将成为必然。

不同于其它内容制作公司或科技公司,爱奇艺DNA的双螺旋结构,一个链条是科技,一条是娱乐创意。在把技术和内容融会贯通这件事上,独特的“科技+娱乐”DNA决定了爱奇艺最有底气第一个“吃螃蟹”。

一批最懂技术的编导,以及谈起节目制作和镜头语言头头是道的程序员,正在悄然诞生。爱奇艺也正在这块没有路的空地上,淌出第一条路。

(稿件转载自:娱观六路)