深圳尤洛视觉
深圳
立即加入

电影制作中的人工智能:新的创意可能性

Abirami Vina

5 分钟阅读

2024 年 11 月 22 日

娱乐行业中的人工智能正在帮助捕捉新的和创造性的故事情节。了解人工智能模型如何协助剧组成员完成编辑和剧本创作等任务。

电影 Here 于几周前上映,是 人工智能 (AI) 如何改变电影制作过程的一个很好的例子。这部由罗伯特·泽米吉斯执导的电影使用了先进的 AI 驱动的减龄技术,展示了演员汤姆·汉克斯和罗宾·怀特在 60 年里的角色形象。与需要数月才能完善的传统 CGI(计算机生成图像)不同,这种方法可以实现即时片场转换,从而节省时间和金钱。人工智能不仅增强了故事讲述能力,还使电影制作更加高效和创新。

事实上,好莱坞现在正在尝试创新技术,如 AI 驱动的面部替换、deepfake 风格的角色增强、自动背景生成和实时虚拟环境。这些创新使视觉效果更加逼真,制作效率更高。报告显示,生成式 AI 在电影行业的应用正在迅速增长,年增长率高达 27.2%。

图 1. 电影行业生成式 AI 概览。

近年来,CGI 已成为许多电影中的标准功能。几乎每部漫威影业的电影都使用减龄技术来带回粉丝最喜欢的角色,从而创造怀旧感并改善电影体验。人工智能现在是电影制作的关键部分,它可以帮助完成从故事讲述和视频编辑到剧本写作的所有工作。让我们来看看电影行业如何使用人工智能来使电影更具吸引力、效率和视觉效果。

电影中由人工智能驱动的故事叙述

从让演员变年轻到创造全新的角色,人工智能帮助电影制作人将他们的创意愿景变为现实。让我们仔细看看这些人工智能应用。

在电影中使用人工智能实现视觉特效

视觉效果和 CGI 多年来一直是电影制作的重要组成部分。它们首次被大量使用是在《西部世界》(1973) 中,该片使用像素化图像来展示机器人的视角。随着时间的推移,这些技术变得更加先进和逼真。 

人工智能的整合进一步提升了这些效果。诸如减龄、面部变形和AI驱动的动作捕捉等技术,现在使数字特效看起来更加自然。例如,在《双子煞星》(2019)中,减龄技术将当时50岁的威尔·史密斯转变成了一个令人信服的23岁版本。这使角色小克栩栩如生。

图 2. 威尔·史密斯从 56 岁“减龄”到 23 岁。

以下是使用人工智能的逆龄技术的工作原理:

  • 面部扫描:使用高分辨率扫描来捕捉演员面部的复杂细节,例如皮肤纹理、毛孔和面部轮廓。
  • AI模型机器学习模型分析存档的镜头或参考图像,以重建面部特征、表情和动作。
  • 性能捕捉:演员的动作和表情通过动作捕捉技术记录下来,以确保自然、逼真的表演。
  • CGI重建: 创建一个数字模型,并与实景拍摄的镜头无缝融合,将演员的表情映射到数字角色上。
  • 光照和纹理调整:精细的渲染技术调整肤色、光照和环境交互,以确保数字角色自然地融入场景。

无论创作年轻版的演员、全新的角色,还是增强复杂的视觉效果,这个过程都能让电影制作人实现惊人的真实感。

视觉 AI 在增强电影视觉效果方面的作用

重要的是要记住,视觉效果和 CGI 中的 AI 是一个广泛的领域,包含各种技术和方法。例如,这些创新背后的一个关键技术是计算机视觉,它是 AI 的一个分支,可以帮助机器分析和理解视觉数据。虽然仅靠计算机视觉无法实现视觉效果,但它在增强视觉效果的真实感和集成方面发挥着至关重要的作用。

考虑目标跟踪——它是一项计算机视觉任务,有助于跟踪场景中物体或角色的运动,确保数字效果与实景素材保持一致。目标跟踪通过分析视频帧来检测物体的位置和运动来实现。此信息用于锚定数字元素(如CGI角色或效果),使其与被跟踪物体自然移动。例如,在动作场景中,它可以跟踪演员的手,以无缝添加CGI武器或发光效果,使其看起来像是物理环境的一部分。

电影中人工智能生成的角色

人工智能生成的角色正在改变电影制作人应对挑战的方式,例如在演员去世后完成表演。在《速度与激情 7》中,人工智能对于让保罗·沃克的角色布莱恩·奥康纳在不幸去世后重返银幕至关重要。电影制作人使用 CGI 和人工智能以数字方式重建了沃克的面部,依靠他的兄弟凯莱布和科迪以及演员约翰·布拉瑟顿担任替身。人工智能分析了沃克之前的表演,以准确地复制他的面部表情和动作,同时使用现有的录音来制作他的对话。人工智能的创新使用使得这部电影得以完成,并有助于向沃克的遗产致敬。

图 3. 将保罗·沃克的脸叠加到科迪·沃克的身体上。

人工智能驱动的剧本创作

生成式人工智能 正在加速电影制作的预制作阶段,协助剧本创作和故事开发等创意任务。人工智能模型能够分析不同电影的剧本和对话,并可以根据给定的提示生成剧本或故事。这些人工智能工具可以识别故事讲述中的模式,提出情节要点,甚至可以创建符合特定类型或语气的对话。这节省了时间,并为电影制作人提供了一个独特的创意过程起点。

人工智能在电影制作中的创造性应用的一个有趣例子是 End Cue 制作的 2016 年短片《Sunspring》。这部 9 分钟科幻电影的独特之处在于它的剧本完全由一个名为 Benjamin 的 AI 机器人 编写。Benjamin 在 1980 年代和 1990 年代电影的数百个剧本、对话和字幕上进行了训练,展示了人工智能如何为故事讲述带来全新的视角。

图 4. Benjamin 生成的脚本。

视频编辑和后期制作中的人工智能

多年来,电影后期制作一直在使用先进技术,但它们通常需要大量的时间和精力。人工智能正在通过简化流程并引入自动化编辑和语音合成等新的创意工具来改变这一点,从而使电影制作更快、更容易、更具创新性。

使用人工智能进行自动视频编辑

剪辑是电影制作中最耗时的过程之一。剪辑师通常需要花费数小时来查看素材、分析镜头、选择最佳镜头并将它们对齐在一起。例如,在电影《飓风营救 3》(2014) 中,利亚姆·尼森(布莱恩·米尔斯)跳过栅栏的 6 秒场景涉及来自多个摄像机的 14 个剪辑。为了制作这个简短的序列,剪辑团队必须仔细查看来自各个摄像机的素材,进行多次调整并最终确定序列。 

为了加快这些流程,我们可以使用AI 驱动的编辑工具来分析来自不同摄像机的素材,并获得连贯的最终输出。计算机视觉在这些工具中发挥着重要作用,它通过场景分类等技术来识别和组织素材的不同部分,例如动作序列、对话场景或过渡。它帮助 AI 工具理解电影的结构,并就使用哪些剪辑以及如何安排它们做出更好的决策。 

图 5. AI 可以加速视频编辑过程。

AI助力电影配乐创作

在电影中,主题音乐和背景配乐在提升场景和连接电影与观众方面起着至关重要的作用。对于作曲家来说,调整音高和音调以匹配场景的强度——无论是为了动作场面而放大,还是为了情感时刻而柔化——一直是一项具有挑战性的任务。 

为了简化这一过程,许多作曲家现在使用 AI 音乐生成 工具。例如,奥斯卡奖、金球奖和格莱美奖得主 Michael Giacchino 使用 AI 工具在 《蝙蝠侠》(2022) 中创作了一些黑暗和充满氛围的曲目。

人工智能在语音合成和配音中的作用

过去,音响工程师过去常常依靠不同的属性来模仿场景中的声音。例如,侏罗纪公园 (1993) 中的霸王龙吼叫声是不同动物声音的混合。这部电影的奥斯卡获奖音响设计师加里·里德斯特罗姆 (Gary Rydstrom) 结合了小象的尖叫声、老虎的咆哮声和鳄鱼的咕噜声,制作出了令人难忘的吼叫声。从不同来源录制这些声音需要时间和先进的录音系统。 

图 6. AI 可以简化声音后期制作。

然而,借助可以生成不同声音的人工智能工具,可以轻松创建它们。 例如,在电影《壮志凌云:独行侠》(2022 年)中,扮演汤姆·卡赞斯基的演员方·基默因喉癌失去了声音。 电影摄制组使用先进的人工智能来重建他的声音

人工智能在电影制作中的伦理考量

虽然人工智能可以提高效率并释放新的创造可能性,但它在行业中日益增长的作用也引发了重要的 伦理 问题,例如:

  • 所有权:AI生成的内容引发了对所有权、原创性和知识产权的担忧。当AI工具被用于创建剧本、角色、音乐或视觉效果时,确定谁应该获得署名和报酬变得具有挑战性。
  • 深度伪造中的虚假信息:人工智能驱动的深度伪造技术可以创建高度逼真的内容。但是,它也可能传播可能产生严重法律后果的虚假信息。
  • 隐私问题: 电影制作中涉及的 AI 训练过程需要大量收集个人数据,例如演员图像、视频和声音。这引起了人们对隐私数据保护的担忧。

AI 的下一个篇章

AI 已经成为电影制作行业中一种具有影响力的工具。从提升视觉效果、简化后期制作到生成创意内容和个性化观众体验,AI 正在改变我们消费和创作电影的方式。 

虽然 AI 的潜在益处是巨大的,但解决与其使用相关的伦理挑战至关重要。通过培养负责任的 AI 开发并优先考虑人类的创造力,我们可以创造一个技术与艺术无缝交织的未来,在尊重艺术价值的同时,增强讲故事的体验。

在我们的 GitHub 存储库上了解更多关于 AI 的信息,并加入我们活跃的 社区。探索 AI 在 制造业自动驾驶等领域的各种应用。

让我们一起构建人工智能的未来!

开启您的机器学习未来之旅

免费开始
链接已复制到剪贴板