映像制作における人工知能：新たな創造の可能性

映画 Here (2023) は数週間前に公開され、人工知能 (AI) が映画制作のプロセスをどのように変革しているかを示す好例となっています。Robert Zemeckisが監督したこの映画では、高度なAI搭載の若返り技術を使用し、俳優のTom HanksとRobin Wrightが60年にわたってそれぞれの役柄を演じる姿を表現しました。完成までに数か月かかることもある従来のCGI（コンピューター-生成画像）とは異なり、このアプローチでは撮影現場で即座に変化を確認できるため、時間とコストを削減できます。AIはストーリーテリングを強化するだけでなく、映画制作をより効率的かつ革新的にしています。

実際、Hollywoodでは現在、AIによる顔の置き換え、ディープフェイク風のキャラクター強化、自動背景生成、リアルタイムのバーチャル環境など、革新的な手法が試されています。これらのイノベーションにより、視覚効果はよりリアルになり、制作はより効率的になっています。映画業界における生成AIの導入は急速に拡大しており、年間成長率は27.2%という目覚ましい水準に達していると報告されています。

図1。映画における生成AI市場の概要。

近年、CGIは多くの映画で標準的に使われる要素となっています。Marvel Studiosのほぼすべての映画では、若返り技術を使用してファンに人気のキャラクターを復活させ、ノスタルジーを生み出すとともに映画体験を向上させています。現在、AIは映画制作の重要な要素となっており、ストーリーテリングや動画編集から脚本執筆まで、幅広く活用されています。映画業界が人工知能をどのように活用して、映画をより魅力的で効率的かつ映像的に印象深いものにしているのかを見ていきましょう。

映画におけるAI搭載ストーリーテリング#

俳優の若返りからまったく新しいキャラクターの作成まで、AIは映画制作者が創造的なビジョンを実現するのを支援します。ここでは、AIの応用例を詳しく見ていきます。

映画の視覚効果におけるAIの活用#

視覚効果とCGIは、長年にわたって映画制作の重要な要素となっています。最初に大きく活用されたのはWestworld (1973)で、ピクセル化された映像によってロボットの視点を表現しました。時が経つにつれて、これらの技術はより高度でリアルなものになっています。

人工知能の統合により、これらの技術はさらに進化しました。若返り、顔のモーフィング、AI対応のモーションキャプチャなどの技術により、デジタル効果をより自然に見せられるようになりました。たとえば、Gemini Man (2019)では、若返り技術によって当時50歳だったWill Smithが、説得力のある23歳の姿に変えられました。これにより、キャラクターのJuniorに命が吹き込まれました。

図2。 Will Smithは50歳から23歳の姿に若返らせられました。

AIを使用した若返り技術の仕組みは次のとおりです。

• 顔のスキャン：高解像度スキャンを使用して、肌の質感、毛穴、顔の輪郭など、俳優の顔の細部を捉えます。
• AIモデル：機械学習モデルがアーカイブ映像や参照画像を分析し、顔の特徴、表情、動きを再現します。
• パフォーマンス キャプチャ：自然でリアルな演技を確保するため、モーションキャプチャ技術を使用して俳優の動きや表情を記録します。
• CGI 再構成：デジタルモデルを作成して実写映像とシームレスに合成し、俳優の表情をデジタルキャラクターにマッピングします。
• ライティング とテクスチャの調整：高度なレンダリング技術によって肌の色、照明、環境との相互作用を調整し、デジタルキャラクターがシーンに自然に溶け込むようにします。

このプロセスにより、俳優の若い姿やまったく新しいキャラクターを作成する場合でも、複雑な視覚効果を強化する場合でも、映画制作者は驚くほどリアルな表現を実現できます。

映画の視覚効果を強化するVision AIの役割#

視覚効果やCGIにおけるAIは、幅広い技術やアプローチを含む広範な分野であることを念頭に置くことが重要です。たとえば、こうしたイノベーションを支える主要技術の1つがコンピュータービジョンです。これは、機械による視覚データの分析と理解を支援するAIの一分野です。コンピュータービジョンだけで視覚効果を実現できるわけではありませんが、視覚効果のリアリティと統合を高めるうえで重要な役割を果たします。

物体追跡について考えてみましょう。これは、シーン内の物体や俳優の動きを追跡し、デジタル効果を実写映像に正確に合わせるのに役立つコンピュータービジョンタスクです。物体追跡では、動画フレームを分析して物体の位置と動きを検出します。この情報を使用して、CGIキャラクターやエフェクトなどのデジタル要素を固定し、追跡対象の物体とともに自然に動かします。たとえばアクションシーンでは、俳優の手を追跡してCGIの武器や発光エフェクトをシームレスに追加し、物理的な環境の一部であるかのように見せることができます。

映画におけるAI生成キャラクター#

AI生成キャラクターは、俳優の死後に演技を完成させるといった課題に映画制作者が取り組む方法を変えています。『Furious 7』では、Paul WalkerのキャラクターであるBrian O’Connerを、突然の死後に再び登場させるうえでAIが不可欠でした。映画制作者は、Walkerの兄弟であるCalebとCody、さらに俳優のJohn Brothertonを代役として起用し、CGIとAIを使ってWalkerの顔をデジタルで再現しました。AIはWalkerの過去の演技を分析して、表情や動きを正確に再現し、既存の音声録音を使ってセリフを作成しました。AIの革新的な活用により、映画を完成させることができ、Walkerの功績をたたえることにもつながりました。

図3。 Cody Walkerの身体にPaul Walkerの顔を重ね合わせる。

AIによる脚本執筆#

生成AIは、脚本執筆やストーリー開発などの創造的なタスクを支援することで、映画制作のプリプロダクション段階を加速させています。AIモデルはさまざまな映画の脚本やセリフを分析し、与えられたプロンプトに基づいて脚本やストーリーを生成できます。これらのAIツールは、ストーリーテリングのパターンを特定し、プロットの展開を提案し、特定のジャンルやトーンに合ったセリフを作成することもできます。これにより時間を節約でき、映画制作者は創作プロセスの独自の出発点を得られます。

映画制作におけるAIの創造的な活用例として興味深いのが、End Cueが制作した2016年の短編映画Sunspringです。この9分間のSF映画がユニークなのは、脚本がBenjaminというAIボットによって完全に執筆された点です。1980年代と1990年代の映画の何百本もの脚本、セリフ、字幕で訓練されたBenjaminは、AIがストーリーテリングに新鮮な視点をもたらせることを示しました。

図4。 Benjaminが生成した脚本。

動画編集とポストプロダクションにおけるAI#

高度な技術は長年にわたって映画のポストプロダクションで使用されてきましたが、多くの場合、多大な時間と労力を要します。AIは、プロセスを簡素化し、自動編集や音声合成などの新しいクリエイティブツールを導入することで、この状況を変え、映画制作をより速く、容易で革新的なものにしています。

自動動画編集におけるAIの活用#

編集は映画制作で最も時間のかかるプロセスの1つです。編集者は通常、映像を確認し、ショットを分析し、最適なテイクを選び、それらをつなぎ合わせる作業に何時間も費やします。たとえば、映画『Taken 3 (2014)』では、Liam Neeson（Bryan Mills）がフェンスを飛び越える6秒間のシーンに、複数のカメラによる14回のカットが含まれています。この短いシーケンスを制作するため、編集チームはさまざまなカメラの映像を詳細に確認し、何度も調整して、シーケンスを仕上げる必要がありました。

こうしたプロセスを迅速化するため、AI搭載の編集ツールを使用して、異なるカメラからの映像を分析し、一貫性のある最終出力を得ることができます。コンピュータービジョンは、シーンの分類などの技術を通じて、アクションシーケンス、会話シーン、トランジションなど、映像のさまざまな部分を特定・整理し、こうしたツールで重要な役割を果たします。これによりAIツールは映画の構成を理解し、使用するクリップやその配置について、より適切な判断を下せるようになります。

図5。AIによって動画編集プロセスを高速化できます。

サウンドトラック作曲のためのAI#

映画では、テーマ音楽やバックグラウンドスコアが、シーンを盛り上げ、作品と観客を結び付けるうえで重要な役割を果たします。アクションシーンでは強調し、感情的な場面では穏やかにするなど、シーンの強度に合わせて音程や音色を完璧に調整することは、作曲家にとって常に困難な作業でした。

このプロセスを簡素化するため、現在では多くの作曲家がAI音楽生成ツールを使用しています。たとえば、Oscar賞、Golden Globe賞、Grammy賞を受賞したMichael Giacchinoは、The Batman (2022)の一部のダークで雰囲気のある楽曲の作成にAIツールを使用しました。

音声合成と吹き替えにおけるAIの役割#

以前は、サウンドエンジニアがシーンの音を再現するために、さまざまな音の特性に頼っていました。たとえば、『Jurassic Park (1993)』のTyrannosaurus rexの咆哮は、さまざまな動物の音を組み合わせたものです。この映画でOscar賞を受賞したサウンドデザイナーのGary Rydstromは、子象の鳴き声、トラの唸り声、ワニの喉音を組み合わせて、忘れられない咆哮を作り上げました。異なる音源からこれらの音を録音するには、時間と高度な録音システムが必要です。

図6。AIによってサウンドのポストプロダクションを簡素化できます。

しかし、さまざまな音を生成できるAIツールを使えば、簡単に音を作成できます。たとえば映画『Top Gun: Maverick (2022)』では、Tom Kazanskyを演じる俳優のVal Kilmerが、喉頭がんによって声を失いました。映画制作チームは高度なAIを使用して、彼の声を再現しました。

映画制作におけるAIの倫理的考慮事項#

AIは効率を高め、新たな創造の可能性を切り開く一方で、業界における役割の拡大は、次のような重要な倫理的問題も提起しています。

• 所有権：AI生成コンテンツは、所有権、独創性、知的財産権に関する懸念を引き起こします。AIツールを使用して脚本、キャラクター、音楽、視覚効果を作成する場合、誰にクレジットを付与し、報酬を支払うべきかを判断することが難しくなります。
• 誤情報 とディープフェイク：AI搭載のディープフェイク技術は、非常にリアルなコンテンツを作成できます。しかし、重大な法的結果を招く可能性のある虚偽情報を拡散することもあります。
• プライバシーに関する懸念：映画制作におけるAIの訓練プロセスでは、俳優の画像、動画、音声など、膨大な個人データの収集が必要になります。これにより、プライバシーとデータ保護に関する懸念が生じます。

AIと歩む次の章#

AIは映画制作業界に大きな影響を与えるツールとして登場しました。視覚効果の強化やポストプロダクションの効率化から、クリエイティブコンテンツの生成や視聴者体験のパーソナライズまで、AIは映画の消費と制作のあり方を変えています。

AIがもたらす潜在的なメリットは非常に大きい一方で、その利用に伴う倫理的課題に取り組むことが不可欠です。責任あるAI開発を促進し、人間の創造性を優先することで、芸術的価値を尊重しながらテクノロジーと芸術がシームレスに融合し、ストーリーテリング体験を高める未来を実現できます。

AIについて詳しくは、当社のGitHubリポジトリをご覧いただき、活発なコミュニティにご参加ください。製造や自動運転など、さまざまな分野におけるAIの応用例もご覧いただけます。