Film yapımında yapay zeka: Yeni yaratıcı olanaklar

Here (2023) filmi birkaç hafta önce vizyona girdi ve yapay zekanın (AI) film yapım sürecini nasıl dönüştürdüğüne dair harika bir örnek. Robert Zemeckis'in yönettiği film, oyuncular Tom Hanks ve Robin Wright'ı 60 yıl boyunca kendi karakterleri olarak göstermek için gelişmiş yapay zeka destekli yaşlandırma teknolojisini kullandı. Mükemmelleşmesi aylar sürebilen geleneksel CGI'ın (Bilgisayar Oluşturumlu Görüntüleme) aksine, bu yaklaşım anında set üzerinde dönüşümler görmeyi mümkün kıldı ve zamandan ile paradan tasarruf sağladı. Yapay zeka, hikaye anlatımını geliştirmekle kalmıyor, aynı zamanda film yapımını daha verimli ve yenilikçi hale getiriyor.

Aslına bakarsan Hollywood artık yapay zeka destekli yüz değiştirme, deepfake tarzı karakter iyileştirmeleri, otomatik arka plan oluşturma ve gerçek zamanlı sanal ortamlar gibi yenilikçi tekniklerle deneyler yapıyor. Bu yenilikler görsel efektleri daha gerçekçi ve yapımı daha verimli hale getiriyor. Raporlar, film endüstrisinde üretken yapay zekanın benimsenmesinin %27,2'lik etkileyici bir yıllık büyüme oranıyla hızla arttığını gösteriyor.

Şekil 1. Filmlerde Üretken Yapay Zeka Pazarına Genel Bakış.

Son yıllarda CGI birçok filmde standart bir özellik haline geldi. Neredeyse her Marvel Studios filmi, hayranların favorisi karakterleri geri getirmek, nostalji yaratmak ve sinematik deneyimi geliştirmek için yaşlandırma teknolojisini kullanıyor. Yapay zeka artık hikaye anlatımı ve video düzenlemeden senaryo yazımına kadar her konuda yardımcı olan, film yapımının kilit bir parçası. Film endüstrisinin, filmleri daha ilgi çekici, verimli ve görsel olarak çarpıcı hale getirmek için yapay zekayı nasıl kullandığına bir göz atalım.

Filmlerde yapay zeka destekli hikaye anlatımı#

Oyuncuları gençleştirmekten tamamen yeni karakterler yaratmaya kadar yapay zeka, film yapımcılarının yaratıcı vizyonlarını hayata geçirmelerine yardımcı oluyor. Bu yapay zeka uygulamalarından bazılarına daha yakından bakalım.

Filmde görsel efektler için yapay zeka kullanımı#

Görsel efektler ve CGI, uzun yıllardır film yapımının önemli bir parçası olmuştur. Bunların ilk önemli kullanımı, bir robotun perspektifini göstermek için pikselli görüntüler kullanan Westworld (1973) filmindeydi. Zamanla bu teknolojiler daha gelişmiş ve gerçekçi hale geldi.

Yapay zekanın entegrasyonu bunları daha da geliştirdi. Yaşlandırma, yüz morf etme ve yapay zeka destekli hareket yakalama gibi teknikler artık dijital efektlerin daha doğal görünmesini sağlıyor. Örneğin, Gemini Man (2019) filminde yaşlandırma teknolojisi, o sırada 50 yaşında olan Will Smith'i kendisinin ikna edici 23 yaşındaki bir versiyonuna dönüştürdü. Bu, Junior karakterini hayata geçirdi.

Şekil 2. Will Smith'in yaşı 50'den 23'e düşürüldü.

İşte yapay zeka kullanan gençleştirme teknolojisinin çalışma prensibi:

• Yüz taraması: Cilt dokusu, gözenekler ve yüz hatları gibi bir oyuncunun yüzünün karmaşık detaylarını yakalamak için yüksek çözünürlüklü taramalar kullanılır.
• Yapay zeka modelleri: Makine öğrenimi modelleri, yüz özelliklerini, ifadelerini ve hareketlerini yeniden oluşturmak için arşiv görüntülerini veya referans görüntüleri analiz eder.
• Performans yakalama: Doğal ve gerçekçi performanslar sağlamak için oyuncuların hareketleri ve ifadeleri hareket yakalama teknolojisi kullanılarak kaydedilir.
• CGI yeniden oluşturma: Dijital bir model oluşturulur ve oyuncunun ifadelerini dijital karaktere aktararak canlı çekim görüntülerle sorunsuz bir şekilde harmanlanır.
• Aydınlatma ve Doku Ayarlamaları: Gelişmiş işleme teknikleri, dijital karakterin sahneye doğal bir şekilde uyum sağlamasını sağlamak için cilt tonunu, aydınlatmayı ve çevresel etkileşimleri ayarlar.

Bu süreç, film yapımcılarının ister oyuncuların daha genç versiyonlarını, ister tamamen yeni karakterler yaratırken, isterse karmaşık görsel efektleri geliştirirken çarpıcı bir gerçekçilik elde etmelerini sağlar.

Vision AI'nin filmdeki görsel efektleri iyileştirmedeki rolü#

Görsel efektler ve CGI'daki yapay zekanın çok çeşitli teknikleri ve yaklaşımları kapsayan geniş bir alan olduğunu akılda tutmak önemlidir. Örneğin, bu yeniliklerin arkasındaki kilit teknoloji, makinelerin görsel verileri analiz etmesine ve anlamasına yardımcı olan bir yapay zeka dalı olan bilgisayarlı görüdür. Tek başına bilgisayarlı görü görsel efektleri mümkün kılmasa da, bunların gerçekçiliğini ve entegrasyonunu geliştirmede çok önemli bir rol oynar.

Nesne takibini ele alalım; bu, dijital efektlerin canlı çekim görüntülerle hizalı kalmasını sağlayarak bir sahnedeki nesnelerin veya oyuncuların hareketini takip etmeye yardımcı olan bir bilgisayarlı görü görevidir. Nesne takibi, bir nesnenin konumunu ve hareketini tespit etmek için video karelerini analiz ederek çalışır. Bu bilgi, CGI karakterleri veya efektleri gibi dijital öğeleri sabitlemek için kullanılır, böylece takip edilen nesneyle birlikte doğal bir şekilde hareket ederler. Örneğin, bir aksiyon sahnesinde, kusursuz bir şekilde bir CGI silahı veya parlayan bir efekt eklemek için bir oyuncunun elini takip edebilir ve bunun fiziksel ortamın bir parçası gibi görünmesini sağlayabilir.

Filmlerde yapay zeka tarafından oluşturulan karakterler#

Yapay zeka tarafından üretilen karakterler, film yapımcılarının bir oyuncunun vefatından sonra performansları tamamlama gibi zorlukların üstesinden gelme biçimini değiştiriyor. Furious 7 filminde yapay zeka, Paul Walker'ın zamansız ölümünden sonra Brian O'Conner karakterini hayata döndürmekte çok önemliydi. Film yapımcıları Walker'ın yüzünü dijital olarak yeniden oluşturmak için CGI ve yapay zeka kullandı ve yedek oyuncu olarak kardeşleri Caleb ile Cody'nin yanı sıra oyuncu John Brotherton'a güvendi. Yapay zeka Walker'ın yüz ifadelerini ve hareketlerini doğru bir şekilde kopyalamak için önceki performanslarını analiz ederken, diyalogunu oluşturmak için mevcut ses kayıtları kullanıldı. Yapay zekanın bu yenilikçi kullanımı filmin tamamlanmasını sağladı ve Walker'ın mirasına saygı duruşunda bulunulmasına yardımcı oldu.

Şekil 3. Paul Walker'ın yüzünün Cody Walker'ın bedenine yerleştirilmesi.

Yapay zeka destekli senaryo yazımı#

Üretken yapay zeka, senaryo yazımı ve hikaye geliştirme gibi yaratıcı görevlere yardımcı olarak film yapımının ön prodüksiyon aşamasını hızlandırıyor. Yapay zeka modelleri, farklı filmlerin senaryolarını ve diyaloglarını analiz edebilir ve verilen yönlendirici komutlara dayalı olarak senaryolar veya hikayeler üretebilir. Bu yapay zeka araçları hikaye anlatımındaki kalıpları belirleyebilir, olay örgüsü noktaları önerebilir ve hatta belirli türler veya tonlarla uyumlu diyaloglar oluşturabilir. Bu, zamandan tasarruf sağlar ve film yapımcılarına yaratıcı süreçleri için benzersiz bir başlangıç noktası sunar.

Yapay zekanın film yapımındaki yaratıcı kullanımına dair ilginç bir örnek, End Cue tarafından üretilen 2016 yapımı kısa film Sunspring'dir. Bu 9 dakikalık bilim kurgu filmini benzersiz kılan şey, senaryosunun tamamen Benjamin adlı bir yapay zeka botu tarafından yazılmış olmasıdır. 1980'ler ve 1990'lar filmlerinden yüzlerce senaryo, diyalog ve altyazı üzerinde eğitilen Benjamin, yapay zekanın hikaye anlatımına nasıl taze bir bakış açısı getirebileceğini gösterdi.

Şekil 4. Benjamin tarafından oluşturulan bir senaryo.

Video düzenleme ve post-prodüksiyonda yapay zeka#

Gelişmiş teknolojiler yıllardır film post-prodüksiyonunda kullanılmaktadır, ancak bunlar genellikle çok fazla zaman ve çaba gerektirir. Yapay zeka, süreci basitleştirerek ve otomatik düzenleme ve ses sentezi gibi yeni yaratıcı araçlar getirerek bunu değiştiriyor; böylece film yapımını daha hızlı, daha kolay ve daha yenilikçi hale getiriyor.

Otomatik video düzenleme için yapay zeka kullanımı#

Kurgu, film yapımındaki en çok zaman alan süreçlerden biridir. Kurgucular genellikle saatlerini çekimleri inceleyerek, sahneleri analiz ederek, en iyi çekimleri seçerek ve bunları birbirleriyle hizalayarak harcarlar. Örneğin, Taken 3 (2014) filminde Liam Neeson'ın (Bryan Mills) bir çitin üzerinden atladığı 6 saniyelik bir sahne, birden fazla kameradan 14 kesme içerir. Bu kısa sekansı üretebilmek için kurgu ekibi çeşitli kameralardan gelen görüntüleri yakından incelemek, birkaç ayar yapmak ve sekansı sonlandırmak zorunda kaldı.

Bu süreçleri hızlandırmak için, farklı kameralardan gelen görüntüleri analiz etmek ve tutarlı bir nihai çıktı elde etmek amacıyla yapay zeka destekli kurgu araçlarını kullanabiliriz. Bilgisayarlı görü, çekimlerin farklı bölümlerini (aksiyon sekansları, diyalog sahneleri veya geçişler gibi) tanımlamak ve organize etmek için sahne sınıflandırması gibi teknikler aracılığıyla bu araçlarda önemli bir rol oynar. Yapay zeka araçlarının bir filmin yapısını anlamasına ve hangi kliplerin kullanılacağı ve bunların nasıl düzenleneceği konusunda daha iyi kararlar vermesine yardımcı olur.

Şekil 5. Yapay zeka video düzenleme sürecini hızlandırabilir.

Film müziği besteleme için yapay zeka#

Bir filmde tema müziği ve arka plan müzikleri, sahneleri yükseltmek ve filmi izleyiciyle buluşturmakta çok önemli bir rol oynar. Perdeyi ve tonu bir sahnenin yoğunluğuna uyacak şekilde mükemmelleştirmek - aksiyon sahneleri için yükseltmek veya duygusal anlar için yumuşatmak - besteciler için her zaman zorlu bir görev olmuştur.

Bu süreci basitleştirmek için birçok besteci artık yapay zeka müzik üretimi araçlarını kullanıyor. Örneğin, Oscar, Altın Küre ve Grammy Ödülü sahibi Michael Giacchino, The Batman (2022) filmindeki karanlık ve atmosferik parçalardan bazılarını oluşturmak için yapay zeka araçlarını kullandı.

Yapay zekanın ses sentezi ve dublajdaki rolü#

Geçmişte ses mühendisleri, bir sahnedeki sesleri taklit etmek için farklı özelliklere güvenirlerdi. Örneğin, Jurassic Park (1993) filmindeki Tyrannosaurus rex kükremesi, farklı hayvan seslerinin bir karışımıdır. Filmin Oscar ödüllü ses tasarımcısı Gary Rydstrom, unutulmaz kükremeyi oluşturmak için bebek fil çığlığı, kaplan hırıltısı ve timsah gurultusundan gelen seslerin bir kombinasyonunu kullandı. Bu sesleri farklı kaynaklardan kaydetmek zaman ve gelişmiş kayıt sistemleri gerektirir.

Şekil 6. Yapay zeka ses post-prodüksiyonunu basitleştirebilir.

Ancak farklı sesler üretebilen yapay zeka araçları sayesinde bunlar kolaylıkla oluşturulabilir. Örneğin, Top Gun: Maverick (2022) filminde Tom Kazansky'yi oynayan oyuncu Val Kilmer gırtlak kanseri nedeniyle sesini kaybetmişti. Film ekibi sesini yeniden oluşturmak için gelişmiş yapay zeka kullandı.

Film yapımında yapay zekanın etik hususları#

Yapay zeka verimliliği artırıp yeni yaratıcı olasılıkların kilidini açabilirken, sektördeki büyüyen rolü aynı zamanda aşağıdakiler gibi önemli etik soruları da gündeme getiriyor:

• Sahiplik: Yapay zeka tarafından oluşturulan içerik; sahiplik, özgünlük ve fikri mülkiyet hakları konusunda endişeler uyandırıyor. Senaryolar, karakterler, müzik veya görsel efektler oluşturmak için yapay zeka araçları kullanıldığında, kime kredi verileceğini ve tazminat ödeneceğini belirlemek zorlaşıyor.
• Deepfake'lerde yanlış bilgi: Yapay zeka destekli deepfake teknolojisi son derece gerçekçi içerikler üretebilir. Ancak aynı zamanda ciddi yasal sonuçları olabilecek yanlış bilgileri de yayabilir.
• Gizlilik endişeleri: Film yapımında yer alan yapay zeka eğitimi süreci, oyuncu görüntüleri, videoları ve sesleri gibi büyük miktarda kişisel verinin toplanmasını gerektirir. Bu durum gizlilik ve veri koruma konusunda endişelere yol açmaktadır.

Yapay zeka ile bir sonraki bölüm#

Yapay zeka, film endüstrisinde etkili bir araç olarak ortaya çıktı. Görsel efektleri güçlendirmekten post-prodüksiyonu kolaylaştırmaya, yaratıcı içerik üretmekten izleyici deneyimlerini kişiselleştirmeye kadar yapay zeka, film tüketme ve oluşturma şeklimizi değiştiriyor.

Yapay zekanın potansiyel faydaları muazzam olsa da, kullanımıyla ilişkili etik zorlukları ele almak çok önemlidir. Sorumlu yapay zeka gelişimini teşvik ederek ve insan yaratıcılığına öncelik vererek, teknolojinin ve sanatın sorunsuz bir şekilde iç içe geçtiği, sanatsal değerlere saygı duyarken hikaye anlatımı deneyimini geliştiren bir gelecek yaratabiliriz.

GitHub depomuzda yapay zeka hakkında daha fazla bilgi edinin ve aktif topluluğumuza katılın. Üretim ve otonom sürüş gibi sektörlerdeki çeşitli yapay zeka uygulamalarını keşfedin.