无所不在的AI为影视制作带来新变革
如今,不止于小众技术和投资圈,关于AI和云计算的讨论似乎无处不在。而其中最具传播力和影响力的层级,当数娱乐业务。在娱乐领域,创意和商务从业者都非常关心AI和云会对自己的技能储备带来哪些冲击,但同时也对技术大众化后的无限可能性充满期待。
在最近的圣丹斯电影节上,众多导演、编辑等从业者就AI与云服务对影视制作的影响展开交流。此外,Adobe公司高管也分享了这两股新力量如何让已得到普遍使用的Premiere Pro等创造力工具更上一层楼。
当下是段了不起的动态时期,发展迅速、积极和消极的预测此消彼长,其中又酝酿着重塑影视节目制作方式的重大机遇。也许在诞生后的百年稳态之后,影视内容会迎来一次颠覆性的生产革命。
AI与云计算在影视行业的影响才初露端倪,以Comcast为例,他们刚刚凭借用AI快速生成体育视频而拿下艾美技术奖。
明星和他们的经纪人也注意到,AI技术正在整个影视行业的各个角落发挥作用。
例如,经纪公司CAA与Metaphysic签署了战略合作伙伴关系,由后者提供“De-Aging”工具——能够帮助画面中的演员“返老还童”。在工具的处理下,汤姆·汉克斯和罗宾·赖特两位明星扮演的角色开始从少年起,随年龄增长不断变换外貌特征。
这类技术对于经纪人而言意义非凡:他们的明星客户,突然之间就拥有了跨越时间的表演生命力。
新技术,开创新的可能性
但影视项目的日常工作复杂且繁琐,需要由剪接师、导演等专业人士合作完成。通过与圣丹斯电影节上各位从业者的交流,我们发现他们主要将Premiere Pro视为高速协作平台,借此创造越来越多的可行用途和可能性。
Adobe公司Pro Video产品营销总监Meagan Keane在谈到AI时指出,“展望未来的电影制作,AI将成为开启种种可能性的重要力量。我们认为这将是人人皆可参与的未来。”
在她看来,AI的核心意义在于增加人类的创造力,而非取代既有从业者。AI这类强大工具能帮助从业者轻松运用自己本不具备的技术、技能和资源,在视频等各类媒体中展现出更加引人入胜的体验。即使对于经验丰富的专业创作者,AI也大大削弱了重复性任务的折磨,例如必须前往实地取景,这样就能让剪接师等团队成员更专注于影片整体的谋划设计。
Adobe公司全球创新高级总监Michael Cioni一直是Adobe Frame.io的摄像机云对接技术大师,在其眼中AI简直具有无穷无尽的想象空间。
一切数字资产,都是云资产
他给出的解释并不复杂:“到2031年,一切媒体和娱乐资产都将在云上产生、由云计算生成。这必将成为事实,我愿称之为技术确定性。由设备生成的所有电子资产,都是云资产。”相比之下,本地硬盘、胶片、录像带和存储卡都将被替代。
相信媒体的转换过程大家并不陌生,率先拥抱云和AI的就是文本文档。如今,这类数据主要存放在云服务(例如Google Docs、Apple Pages、微软Word以及Adobe Acrobat等)上以供分享和编辑。而Spotify、Apple Music、Amazon Music和Tidal等服务的出现,也让数亿用户开始在云端收听、创作、合作和销售音乐作品。如今,这波潮流即将席卷我们最复杂的媒介——视频。
Cioni解释道,“我们以电影场景的制作为例。在指定拍摄场景之后,我们可以用自然语言进一步描绘,比如「开始下雨。」这时候雨水就会出现在镜头中,淅沥而下。也可以说「开始下雪」,AI会添加下雪的效果,不需要任何工程技术知识就能实现。这种以往只存在于科幻小说里的桥段,现在已经成为现实。以往这种效果已经能在静态媒体(照片)上实现,我们知道这终将过渡到视频当中。因此,我们必须转换思路,考虑如何在这样的背景下培养自己的创造力。”
这一切,将模糊掉不同职能之间的边界,彻底改变未来的视频创作方式。
很多年轻的电影制作人已经习惯于跨越这些边界,在项目中什么都接触一点,并在数字平台上相互合作。通过摄像机云对接的实现到AI智能,制作者已经可以选定一个场景,然后快速生成粗剪形式的“组合”作为参考,确定目前的场景是否已经足够、或者说还需要再补拍某些镜头。
他们还可以对基础视觉效果、色彩校正甚至是声音设计进行快速的粗略处理,决定使用后再交给专家做微调。因此对于很多电影创作者而言,Premiere已经不再是传统意义上的非线性视频编辑工具。
在人与影像间建立起新的关系
拿下圣丹斯特别评审团创意视觉奖的纪录片《神奇的机器》的联合导演Maximilien Van Aertryck认为,“这是我们最大的热情所在——探索人与摄像机间的关系,以及这一切如何影响整个社会。我们就像是喜欢探索乐趣的人类学家。”
这部纪录片以温和的口吻,呼吁人们以更深思熟虑的方式理解这个由新工具创造的世界。影片另一位联合导演/剪辑Axel Danielson表示,就像经典笑话说的,“你愿意相信谁?我,还是你那靠不住的双眼?”确实,我们确实越来越需要意识到眼见未必为实,即使是影像资料也不可轻信。
Danielson表示,“我们这部影片并没有给出多少答案,只是在提出问题。我们所知晓的唯一答案,就是作为社会集体,人类需要更认真地审视媒体传播的消息。”
这部影片整理了一个多世纪以来的影像资料,有些意义重大、有些讽刺好笑。而更重要的是,在伟大和糟糕的创作者手中,这些内容可能被赋予截然不同的意义和力量。
在《神奇的机器》中,Van Aertryck和Danielson花了几年时间收集关于人类、摄像机以及拍摄影像之间的复杂关系。
Van Aertryck坦言,“我们并不是那种训练有素的剪辑专家,自己上阵是因为确实没人手了。Adobe成了我们完美的工具,因为我们可以把所有素材都丢进去,并轻松相互分享。”
整个拍摄小组只有四个人,有人在波罗的海(瑞典哥德堡),有人在西欧巴利阿里群岛,大家只能用Premiere的云工具交换剪辑和片段。但整个过程非常顺畅,就如同大家围坐在一起。云功能的意义也正在于此:只要需要且愿意,来自天南海北的每位创作者都可以随时随地参与工作。
拿下本届圣丹斯电影节美国短片评审力奖的《Rest Stop》编辑兼导演Crystal Kayiza表示,“线上分享让更多尝试成为了可能。只要愿意,我可以随时回到俄克拉荷马州老家,而且不影响影片的创作。”
去年,Adobe在多款流行摄像机等生产设备上提供新的云直连功能,能够在拍摄视频的同时传输内容。如此一来,剪辑师、制片人、影业高管和其他后期制作专家等,就能在素材拍摄后的几分钟内开始处理镜头。
即使是小制作影片,也能用到这些技术。获得圣丹斯剪辑奖的Daniela T. Quiroz表示,云直连对于影片《进军马里亚奇》的制作、特别是早期制作非常关键。
影片导演Alejandra Vasquez和Sam Osborn在得克萨斯里奥格兰德河谷高中拍摄舞蹈比赛素材时,住在纽约布鲁克林的Quiroz就已经开始着手剪辑了。由于能很快拿到早期拍摄素材,她可以快速处理,并与导演们交流接下来的拍摄重点。
Quiroz表示,“身为剪辑师,我们有幸目睹演员们的首次上镜。你会见证自己喜爱的角色、引发共鸣的音乐。”
当初在拍摄《有时我会思索死亡》时就完全没有这样的条件。影片拍摄地在地处偏远的俄勒冈州海岸线上,因为没有能立即观看的数字样片,所以每天拍好的镜头都得存到硬盘上再连夜发送给新奥尔良那边的数字处理机构。剪辑师Ryan Kendrick表示,新技术的出现的确是从业者们的福音。
前所未有的协作方式
现在,Kendrick已经能在纳什维尔的家中,跟导演和其他身在他地的同事远程协作。
Kendrick感叹道,“我在家里就能跟伙伴们一起工作,彼此还相隔那么远,简直太酷了。”这也改变了导演、摄影师、剪辑师等制作人员之间的交互方式。
过去,“剪辑师总觉得自己跟片场相距很远。现在,这种联系感更紧密了,你不会感觉自己跟这一切有所割裂。现在剪辑室成了试错的地方,我可以在这里做各种尝试,哪怕与预期的效果完全相反也无所谓。我总会说,「谁知道呢,咱们试试呗。」”
在《有时我会思索死亡》中,Kendrick、Lambert和摄影指导Dustin Lane在实际开拍前,就保持着每周一次的讨论频率,希望提前避免可能出现的问题。
“我们会讨论可能出现的剪辑问题。在拿到剧本时,最难的就是通过想象把情节过渡到下一部分。具体来讲,我们让得角色一直在情境里,而不能是在「电影」里。所以我们讨论了很多,想办法让影像始终保持住这份情感重量。”
Kendrick表示,摄像机云对接(Camera-to-Cloud)技术加快了拍摄周期,所以在商业广告和音乐视频等项目中也能发挥重要作用。
“商业广告中的很多元素正在迅猛转变。”正是有了云架构的支撑,项目素材才能在Premiere Pro、Frame.io和After Effects等之间顺畅传递。
“这是过去五年来,影视从业者消除的最大一块导致生产流程延迟的顽疾。”
建立更好的技术指导原则
Keane表示,Adobe公司的技术方法围绕着五大“指导原则”建立而来,包括:工作流程、媒体、协作、生产力和安全性。
“我们会真正将AI融入「生产力」。这不是要取代创造力,而是要取代以往那些复杂繁琐的环节。”
整个好莱坞都在密切关注快速变化的AI领域。有报道称,好莱坞最大工会SAG-AFTRA的董事会计划在下一轮合同谈判中,引入关于肖像权问题的条款——即约束AI技术对工会成员外貌、声音或其他特征的使用。
从目前的草拟意见来看,“合同中任何旨在控制虚拟演员表演权利的形式,「必须与工会提前协议,否则将被视为无效且不得执行」。”
面对这个复杂的新问题,今年春季新一轮合同谈判即将启动。希望延长自己职业生命的老中青演员们可能愿意接受AI技术的某些优势,但如果没有强有力的合同保护,制片方很可能会直接用AI技术来模拟、借此回避向真人演员支付高昂的费用。
Twitch上的某同人项目似乎就昭示着这样的未来。名叫“watchmeforever”的用户就在持续上传由AI生成的、永不完结的《宋飞传》衍生剧集。虽然其图像扭曲糟糕、计算机合成音令人出戏、笑话质量也无法恭维,但随着AI技术的完善,这一切也许都将不再是问题。更重要的是,扮演其中Jerry一角的演员出面维权,导致这出“永不完结”的戏草草收场。
为创造力开启新世界的大门
从更积极的角度来看,Adobe公司的Keane认为AI与云计算将带来更广泛的创意工具,消除图像、声音、视效等元素对大规模服务器农场的依赖,让每个人都具备制作优秀视频内容的算力和安全性基础。
“在云资源的帮助下,每个人都能立足世界各地讲好自己的故事。各个阶段的协作均可跨地区实现,大家可以随时交换意见、碰撞思想火花。”
对电影制作者来说,安全也是个不容忽视的大问题。Keane提到了电影《Plan C》,这是一部关于堕胎的纪录片。创作者需要对受访者的面部和声音做多次模糊处理,同时保证最初采集的原始素材绝不外流。
另外,生成式AI、deep fakes和相关问题的激增,也让影像内容的真实性变得比以往任何时候都更加重要。为此,Adobe公司同《纽约时报》、佳能等多家媒体和科技企业共同加入了“内容真实性倡议”。
但科幻经典《黑客帝国》的男主角基努里维斯对这个问题并不乐观。他在采访中表示,deep fakes这种利用AI恶意生成视频的行为“非常可怕”。里维斯签订的合同往往包含相关条款,禁止制作方以数字方式篡改他的表演。这一条的根源可以追溯到几十年前的一部片子,当时制作方强行用特效在他脸上加了一滴眼泪。
里维斯谈到,“这种令演员失去自主权的情况让人沮丧。我们可以接受自己的表演片段被剪辑,但其中的内容至少是真实的。而一旦到了deep fakes这个阶段,那演员就没有任何自主权可言。这非常可怕,我也期待观察人类会如何应对这类技术。”
改变游戏规则的新技术
即将改变游戏规则的新技术,目前已经在Premiere Pro提供beta版本。这就是基于文本剪辑功能,允许用户借助剪辑AI从视频中提取和转录对话文本,借此实现视频剪辑。AI还能高亮显示重要的声音片段,包括最终版本的粗剪参考,并生成基于关键字的搜索条目以快速前往特定片段或对话。毫无疑问,这将成为一种新的、更强大的项目素材及数据管理方法。
Keane指出,“大家可以使用全部这些数据,为最终呈现出的媒体做润色。”
部分小厂也推出了类似的技术。Descript和Podcastle都提供可创建数字版语音的工具,可以用它读取文本形式的剧本,完全无需额外剪辑。Descript最近还添加了基于文本的视频剪辑功能,可用于制作播客等多种影像内容。
剪辑师Kendrick表示,他已经用Adobe基于文本的剪辑工具帮一位朋友快速剪好了一版迷你纪录片。在他看来,这种基于文本的剪辑功能对专业剪辑师同样意义重大。以往,制片人/剪辑师往往需要花好几天时间梳理镜头,确保要紧迫的时间内快速把素材串连成节目。
有声读物、剧本、社交媒体——AI无处不在
AI正在迈进其他娱乐领域。苹果公司就推出一款能为有声读物生成旁白的AI工具,这就为作者提供了另一种选择,可以为项目创建低成本音频版本。但消息一出,专业的有声读物配音演员和他们的广大粉丝纷纷表示强烈反对。
没错,这些专业的配音演员当然有过人之处,往往能用引人入胜的表演和音色为作品添彩。与他们的成果相比,AI生成旁白还有很长的路要走。
但对于非畅销书来说,有限的收入显然不足以支撑人们享受到这个级别的收听体验。这时候,AI工具就成了既成本低廉、又能在一定程度上保证体验质量的好选择。苹果看中的,正是这个全球估值约15亿美元的小众书籍收听市场。
初创公司Filmustage则尝试使用AI拆分剧本元素,包括演员、道具、服装、车辆、声音、位置等。
至于短视频领域,TikTok、Meta Reels以及Alphabet的YouTube Shorts都依赖于机器学习加AI工具展示用户可能感兴趣的“推荐”视频,努力以更加无缝、更具吸引力的方式将广告与观看体验融合起来。
金融评级机构LightShed Partners分析师Rich Greenberg提到,Facebook当初转向AI驱动型内容推荐时曾付出过极高成本,但“这事实最终证明,AI内容推荐是扎克伯格自创立Facebook之后做出的第二个重大正确决策。”