映画制作における人工知能：新しい創造の可能性

数週間前に公開された映画『Here (2023)』は、人工知能 (AI)がいかにして映画製作のプロセスを変革しているかを示す素晴らしい例です。ロバート・ゼメキス監督によるこの映画では、高度なAIを活用したアンチエイジング（若返り）技術が使用され、俳優のトム・ハンクスとロビン・ライトが演じるキャラクターの60年間にわたる姿を表現しました。完成までに数ヶ月かかることもある従来のCGI（コンピューター生成画像）とは異なり、この手法では撮影現場で即座に変身を確認することが可能となり、時間とコストを削減できました。AIはストーリーテリングを強化するだけでなく、映画制作をより効率的かつ革新的なものにしています。

実際、ハリウッドでは現在、AI駆動の顔の置き換え、ディープフェイク風のキャラクター強化、自動背景生成、リアルタイム仮想環境といった革新的な技術が実験されています。これらのイノベーションにより、視覚効果はよりリアルになり、制作はより効率化しています。報告によると、映画業界における生成AIの採用は急速に拡大しており、年平均成長率は27.2%という驚異的な数値を記録しています。

図1 映画市場における生成AIの概要。

近年、CGIは多くの映画において標準的な機能となっています。マーベル・スタジオのほぼすべての映画で、ファンに愛されるキャラクターを復活させるために若返り技術が使用されており、ノスタルジーを喚起し映画体験を向上させています。AIは今や映画制作の重要な要素であり、ストーリーテリングやビデオ編集から脚本執筆に至るまで、あらゆる面を支援しています。映画業界がどのように人工知能を活用して映画をより魅力的、効率的、そして視覚的に素晴らしいものにしているかを見ていきましょう。

Link to this section映画におけるAI駆動のストーリーテリング#

俳優の若返りから全く新しいキャラクターの作成まで、AIは映画監督が創造的なビジョンを実現する手助けをしています。これらのAIアプリケーションの一部を詳しく見ていきましょう。

Link to this section映画における視覚効果のためのAI活用#

視覚効果とCGIは、長年にわたり映画制作の重要な要素となっています。その最初の重要な使用例は『ウエストワールド』（1973年）であり、画素化された映像を用いてロボットの視点を表現しました。時を経て、これらの技術はより高度でリアルなものになりました。

人工知能の統合によって、それらはさらに改善されました。若返り技術、フェイシャルモーフィング、AI対応のモーションキャプチャなどの技術により、デジタルエフェクトはより自然に見えるようになっています。例えば、『ジェミニマン』（2019年）では、若返り技術を使用して当時50歳のウィル・スミスを説得力のある23歳の姿に変身させました。これにより、ジュニアというキャラクターに命が吹き込まれました。

図2 ウィル・スミスが50歳から23歳に若返りました。

AIを使用した若返り技術の仕組みは以下の通りです：

• 顔スキャン：高解像度スキャンを使用して、肌の質感、毛穴、顔の輪郭など、俳優の顔の複雑な詳細を捉えます。
• AIモデル：機械学習モデルがアーカイブ映像や参照画像を分析し、顔の特徴、表情、動きを再現します。
• パフォーマンスキャプチャ：俳優の動きと表情をモーションキャプチャ技術で記録し、自然でリアルなパフォーマンスを確実にします。
• CGI再構築：デジタルモデルを作成し、ライブアクション映像とシームレスに合成します。俳優の表情をデジタルキャラクターにマッピングします。
• ライティングと質感の調整：高度なレンダリング技術により、肌の色調、ライティング、環境との相互作用を調整し、デジタルキャラクターがシーンに自然に溶け込むようにします。

このプロセスにより、映画製作者は、俳優の若いバージョンを作成する場合でも、完全に新しいキャラクターを作成する場合でも、あるいは複雑な視覚効果を強化する場合でも、驚くべきリアリズムを達成できます。

Link to this section映画における視覚効果を強化するVision AIの役割#

視覚効果やCGIにおけるAIは、幅広い技術やアプローチを包含する広大な分野であることを心に留めておくことが重要です。例えば、これらのイノベーションの背後にある主要な技術の一つがコンピュータビジョンです。これはAIの一分野であり、機械が視覚データを分析して理解するのを助けます。コンピュータビジョン単体で視覚効果が可能になるわけではありませんが、そのリアリズムと統合を強化する上で重要な役割を果たします。

オブジェクトトラッキングを検討してみましょう。これは、シーン内の物体や俳優の動きを追跡し、デジタルエフェクトがライブアクション映像と一致するように保つためのコンピュータビジョンのタスクです。オブジェクトトラッキングは、ビデオフレームを分析して物体の位置と動きを検出することで機能します。この情報は、CGIキャラクターやエフェクトなどのデジタル要素を固定するために使用され、トラッキングされた物体と共に自然に動くようにします。例えば、アクションシーンでは、俳優の手を追跡してCGIの武器や輝くエフェクトをシームレスに追加し、それが物理環境の一部であるかのように見せることができます。

Link to this section映画におけるAI生成キャラクター#

AIによって生成されたキャラクターは、俳優の他界後にパフォーマンスを完成させるような課題に映画製作者が取り組む方法を変えています。『ワイルド・スピード SKY MISSION』では、ポール・ウォーカーの予期せぬ死の後、彼のキャラクターであるブライアン・オコナーを蘇らせるためにAIが不可欠でした。映画製作者たちはCGIとAIを駆使してウォーカーの顔をデジタル的に再構築し、彼の兄弟であるケイレブとコーディ、そして俳優のジョン・ブラザートンを代役として活用しました。AIはウォーカーの過去のパフォーマンスを分析して表情や動きを正確に再現し、既存の音声録音を使用して彼のセリフが作成されました。この革新的なAIの活用により、映画は完成に至り、ウォーカーの遺産に敬意を表すことができました。

図3 コーディ・ウォーカーの体にポール・ウォーカーの顔を合成。

Link to this sectionAI駆動の脚本執筆#

生成AIは、脚本執筆やストーリー開発といった創造的なタスクを支援することで、映画制作のプリプロダクション段階を加速させています。AIモデルはさまざまな映画の脚本やダイアログを分析し、与えられたプロンプトに基づいて脚本やストーリーを生成できます。これらのAIツールはストーリーテリングのパターンを特定し、プロットポイントを提案し、特定のジャンルやトーンに沿ったダイアログを作成することさえ可能です。これにより時間を節約し、映画製作者に創造的なプロセスのためのユニークな出発点を提供します。

映画制作におけるAIの創造的な活用の興味深い例として、End Cueが制作した2016年の短編映画『Sunspring』があります。この9分間のSF映画がユニークなのは、その脚本がベンジャミンというAIボットによって完全に書かれたという点です。1980年代と1990年代の映画の何百もの脚本、ダイアログ、字幕でトレーニングされたベンジャミンは、AIがストーリーテリングに新たな視点をもたらす方法を示しました。

図4 ベンジャミンによって生成された脚本。

Link to this sectionビデオ編集とポストプロダクションにおけるAI#

高度な技術は長年にわたり映画のポストプロダクションで使用されてきましたが、多くの場合、多大な時間と労力を要します。AIはそのプロセスを簡素化し、自動編集や音声合成といった新しい創造的なツールを導入することで、映画制作をより速く、より簡単に、そしてより革新的なものに変えています。

Link to this section自動ビデオ編集のためのAIの活用#

編集は映画制作において最も時間のかかるプロセスの一つです。編集者は通常、映像を確認し、ショットを分析し、ベストテイクを選択し、それらを整列させるために何時間も費やします。例えば、『96時間／レクイエム』（2014年）では、リーアム・ニーソン（ブライアン・ミルズ）がフェンスを飛び越える6秒間のシーンに、複数のカメラからの14のカットが含まれています。この短いシーケンスを作成するために、編集チームはさまざまなカメラからの映像を精査し、いくつかの調整を行い、シーケンスを確定させる必要がありました。

これらのプロセスをスピードアップするために、AI駆動の編集ツールを使用して異なるカメラからの映像を分析し、一貫した最終出力を得ることができます。コンピュータビジョンは、シーンの分類といった技術を通じて、アクションシーケンス、ダイアログシーン、トランジションといった映像のさまざまな部分を特定・整理し、これらのツールにおいて重要な役割を果たします。これにより、AIツールは映画の構造を理解し、どのクリップを使用し、どのように配置すべきかについてより良い判断を下せるようになります。

図5 AIはビデオ編集プロセスを加速できる。

Link to this sectionサウンドトラック作曲のためのAI#

映画において、テーマ曲やバックグラウンドスコアはシーンを盛り上げ、映画と観客をつなぐ重要な役割を果たします。シーンの激しさに合わせてピッチとトーンを完璧に調整することは、アクションシーンを増幅させる場合でも感情的な瞬間に合わせて和らげる場合でも、作曲家にとって常に困難な課題でした。

このプロセスを簡素化するために、多くの作曲家は現在、AI音楽生成ツールを使用しています。例えば、アカデミー賞、ゴールデングローブ賞、グラミー賞を受賞したマイケル・ジアッキーノは、AIツールを使用して『THE BATMAN－ザ・バットマン－』（2022年）のダークで雰囲気のあるトラックのいくつかを制作しました。

Link to this section音声合成と吹き替えにおけるAIの役割#

かつて、音響エンジニアはシーン内の音を模倣するためにさまざまな特性に頼っていました。例えば、『ジュラシック・パーク』（1993年）のティラノサウルスの咆哮は、さまざまな動物の音をブレンドしたものです。同作でアカデミー賞を受賞したサウンドデザイナーのゲイリー・ライドストロムは、赤ちゃんの象の鳴き声、虎のうなり声、ワニのうがい音を組み合わせて、忘れられない咆哮を作り上げました。これらの音をさまざまなソースから録音するには、時間と高度な録音システムが必要です。

図6 AIは音のポストプロダクションを簡素化できる。

しかし、さまざまな音を生成できるAIツールがあれば、それらを簡単に作成できます。例えば、映画『トップガン マーヴェリック』（2022年）では、トム・カザンスキー役の俳優ヴァル・キルマーが喉頭がんにより声を失いました。映画スタッフは高度なAIを使用して彼の声を再現しました。

Link to this section映画制作におけるAIの倫理的考察#

AIは効率を向上させ、新たな創造の可能性を切り開くことができますが、業界における役割の拡大は、以下のような重要な倫理的課題も提起しています。

• 所有権：AI生成コンテンツは、所有権、独自性、知的財産権に関する懸念を引き起こします。AIツールが脚本、キャラクター、音楽、または視覚効果の作成に使用される場合、誰がクレジットされ、報酬を得るべきかを判断することが困難になります。
• ディープフェイクにおける誤情報：AI駆動のディープフェイク技術は、非常にリアルなコンテンツを作成できます。しかし、重大な法的結果を招く可能性のある誤情報を拡散する恐れもあります。
• プライバシーの懸念：映画制作に関わるAIトレーニングプロセスには、俳優の画像、ビデオ、声など、膨大な個人データの収集が必要です。これはプライバシーとデータ保護に関する懸念を引き起こします。

Link to this sectionAIとの次なる章#

AIは映画業界において影響力のあるツールとして台頭しています。視覚効果の向上やポストプロダクションの合理化から、創造的なコンテンツの生成や視聴体験のパーソナライズまで、AIは私たちが映画を消費し制作する方法を変えています。

AIの潜在的な利点は計り知れませんが、その使用に関連する倫理的な課題に対処することが重要です。責任あるAI開発を促進し、人間の創造性を優先することで、テクノロジーと芸術がシームレスに融合し、芸術的価値を尊重しながらストーリーテリングの体験を向上させる未来を築くことができます。

AIについての詳細は、当社のGitHubリポジトリで確認し、活発なコミュニティにご参加ください。製造業や自動運転などの分野におけるさまざまなAIアプリケーションを探索してみてください。