视觉 AI

电影制作中的人工智能：新的创作可能性

娱乐业中的人工智能正在帮助捕捉新的创意故事情节。了解人工智能模型如何协助工作人员完成编辑和剧本编写等任务。

ABAbirami Vina5 min readNovember 22, 2024

电影Here (2023)于几周前上映，是人工智能 (AI)如何重塑电影制作流程的一个极佳例证。由罗伯特·泽米吉斯执导，该片采用了先进的 AI 强化的减龄技术，让演员汤姆·汉克斯和罗宾·怀特在 60 年跨度的角色中呈现出不同年龄的面貌。与传统的计算机-生成影像（CGI）可能需要数月时间来完善不同，这种方法使得即时的片场换脸成为可能，从而节省了时间和资金。AI 不仅在增强叙事，还让电影制作变得更加高效和创新。

事实上，好莱坞目前正在试验各种创新技术，例如 AI 驱动的面部替换、换脸风格的角色增强、自动背景生成以及实时虚拟环境。这些创新让视觉效果更加逼真，制作更加高效。报告显示，生成式 AI 在电影行业的应用正在迅速增长，年复合增长率高达 27.2%。

电影中生成式 AI 市场概览

图 1。电影中生成式 AI 市场概览。

近年来，CGI 已成为许多电影的标准配置。几乎每部漫威影业的电影都会使用减龄技术来带回深受粉丝喜爱的角色，创造情怀并提升观影体验。如今，AI 已经是电影制作的关键部分，从叙事、视频剪辑到剧本创作等方方面面都离不开它的协助。让我们一起来看看电影行业如何利用人工智能让电影更具吸引力、更高效、视觉效果更震撼。

电影中的 AI 驱动叙事#

从演员去老化到创造全新的角色，AI 正在帮助电影制作人实现他们的创意愿景。让我们近距离了解一些这些 AI 应用。

在电影中使用 AI 进行视觉特效处理#

视觉效果和 CGI 多年来一直是电影制作的重要组成部分。它们首次大规模应用是在《西部世界》（1973）中，该片运用像素化影像展现了机器人的视角。随着时间的推移，这些技术变得更加先进和逼真。

人工智能的融入进一步提升了它们的效果。诸如减龄、面部变形以及支持 AI 的动作捕捉等技术，让数字特效看起来更加自然。例如，在《双子杀手》（2019）中，减龄技术将当时 50 岁的威尔·史密斯变成了令人信服的 23 岁自己。这让角色小克（Junior）栩栩如生地呈现在观众面前。

使用 AI 技术减龄的威尔·史密斯

图 2。威尔·史密斯通过减龄技术从 50 岁变回了 23 岁。

以下是使用 AI 的去老化技术的工作原理：

面部扫描：利用高分辨率扫描捕捉演员面部的复杂细节，例如皮肤纹理、毛孔和面部轮廓。
AI 模型：机器学习模型会分析历史档案素材或参考图像，以重现面部特征、表情和动作。
表演捕捉：使用动作捕捉技术记录演员的动作和表情，确保表演自然逼真。
CGI 重建：创建一个数字模型并将其与真人实拍素材无缝融合，将演员的表情映射到数字角色身上。
光照与纹理调整：复杂的渲染技术可调整肤色、光照和环境互动，确保数字角色自然地融入场景中。

这一过程使电影制作人能够实现惊人的真实感，无论是创造演员的年轻版本、全新的角色，还是增强复杂的视觉特效。

视觉 AI 在增强电影视觉特效中的作用#

请记住，视觉效果和 CGI 中的 AI 是一个广阔的领域，涵盖了广泛的技术和方法。例如，这些创新背后的核心技术之一是计算机视觉，它是 AI 的一个分支，可帮助机器分析和理解视觉数据。虽然仅靠计算机视觉本身无法实现视觉效果，但它在增强真实感和融合度方面发挥着至关重要的作用。

Consider object tracking - it is a computer vision task that helps follow the movement of objects or actors in a scene, ensuring digital effects stay aligned with live-action footage. Object tracking works by analyzing video frames to detect an object’s position and movement. This information is used to anchor digital elements, like CGI characters or effects, so they move naturally with the tracked object. For instance, in an action scene, it can follow an actor’s hand to seamlessly add a CGI weapon or glowing effect, making it look like part of the physical environment.

电影中由 AI 生成的角色#

AI 生成的角色正在改变电影制作人应对演员去世后如何完成表演等挑战的方式。在《速度与激情 7》中，AI 对于在保罗·沃克不幸离世后让他的角色布莱恩·奥康纳（Brian O’Conner）重返银幕至关重要。电影制作人利用 CGI 和 AI 数字化重现了沃克的面容，并依靠他的兄弟卡莱布（Caleb）和科迪（Cody）以及演员约翰·布罗瑟顿（John Brotherton）担任替身。AI 分析了沃克先前的表演，以精确复制他的面部表情和动作，同时利用现有的录音来合成他的对话。这种对 AI 的创新应用使得电影得以杀青，并有助于向沃克的传奇致敬。

将保罗·沃克的脸叠加到科迪·沃克的身体上

图 3。将保罗·沃克的脸叠加到科迪·沃克的身体上。

AI 驱动的剧本写作#

生成式 AI 通过协助剧本创作和故事开发等创意任务，正在加速电影制作的预制阶段。AI 模型能够分析来自不同电影的剧本和对话，并能够根据给定的提示词生成剧本或故事。这些 AI 工具可以识别叙事模式、建议情节走向，甚至创作出符合特定流派或基调的对话。这不仅节省了时间，还为电影制作人的创作过程提供了一个独特的起点。

AI 在电影制作中创意应用的一个有趣例子是 2016 年由 End Cue 制作的短片《Sunspring》。这部 9 分钟的科幻短片之所以独特，是因为它的剧本完全由一个名为本杰明（Benjamin）的 AI 机器人编写。通过对 20 世纪 80 年代和 90 年代电影的数百个剧本、对话和字幕进行训练，本杰明展示了 AI 如何为讲故事带来全新视角。

由 AI 机器人本杰明生成的剧本

图 4。由本杰明生成的剧本。

AI 在视频剪辑和后期制作中的应用#

先进技术在电影后期制作中已使用多年，但往往需要投入大量时间和精力。AI 正在通过简化流程并引入自动化剪辑和语音合成等新的创意工具来改变这一现状，使电影制作变得更快、更容易且更具创新性。

使用 AI 进行自动化视频剪辑#

剪辑是电影制作中最耗时的过程之一。剪辑师通常要花上几个小时来审查素材、分析镜头、挑选最佳镜头并将它们对齐。例如，在电影《飓风营救 3》（2014）中，连姆·尼森（饰演布莱恩·米尔斯）跳过栅栏的 6 秒钟场景包含了来自多个摄像机的 14 个镜头切换。为了制作这短短的镜头序列，剪辑团队必须仔细审查来自不同摄像机的素材，进行多次调整并敲定最终序列。

为了加快这些流程，我们可以使用由 AI 驱动的剪辑工具来分析来自不同摄像机的素材并获得连贯的最终输出。计算机视觉通过场景分类等技术在这些工具中发挥着重要作用，可识别并组织素材的不同部分，例如动作戏、对话场景或转场。它帮助 AI 工具理解电影的结构，并就使用哪些剪辑以及如何安排它们做出更好的决策。

AI 可以加速视频剪辑过程

图 5。AI 可以加快视频剪辑过程。

AI 在配乐作曲中的应用#

在电影中，主题音乐和背景音乐在提升场景感和连接电影与观众方面发挥着至关重要的作用。匹配场景强度来完善音高和音调——无论是增强动作序列的冲击力还是柔化情感时刻的氛围——对于作曲家来说一直是一项具有挑战性的任务。

为了简化这一过程，许多作曲家现在开始使用AI 音乐生成工具。例如，曾获奥斯卡奖、金球奖和格莱美奖的迈克尔·贾基诺就使用 AI 工具创作了《新蝙蝠侠》（2022）中的一些黑暗且富有氛围感的配乐。

AI 在语音合成和配音中的作用#

过去，音效工程师依赖于不同的属性来模拟场景中的声音。例如，《侏罗纪公园》(1993) 中的霸王龙咆哮声，实际上是多种动物声音的混合。该片荣获奥斯卡奖的音效设计师加里·瑞德斯托姆，通过结合小象的尖叫声、老虎的嘶吼声和短吻鳄的咕噜声，制作出了那段令人难忘的咆哮声。从不同来源录制这些声音需要大量时间和先进的录音系统。

AI 可以简化声音后期制作

图 6。AI 可以简化声音后期制作。

然而，借助能够生成不同声音的 AI 工具，这些声音可以轻松创建。例如，在电影《壮志凌云：独行侠》（2022）中，饰演汤姆·卡赞斯基的演员方·基默因喉癌失去了声音。摄制组使用先进的 AI 来重现他的声音。

电影制作中 AI 的道德考量#

虽然 AI 可以提高效率并释放新的创意可能，但其在行业中日益增长的角色也引发了重要的伦理问题，例如：

所有权：AI 生成的内容引发了关于所有权、原创性和知识产权的担忧。当 AI 工具被用于创作剧本、角色、音乐或视觉特效时，确定谁应该获得署名权和报酬变得十分具有挑战性。
换脸技术中的虚假信息**：AI 驱动的换脸技术可以创作出高度逼真的内容。然而，它也可能传播会带来严重法律后果的虚假信息。
隐私担忧：电影制作中涉及的 AI 训练过程需要收集大量个人数据，例如演员的图像、视频和声音。这引发了人们对隐私和数据保护的担忧。