Film yapımında yapay zeka: Yeni yaratıcı olanaklar

Here (2023) filmi birkaç hafta önce vizyona girdi ve yapay zekanın (YZ) film yapım sürecini nasıl dönüştürdüğüne dair harika bir örnek oluşturuyor. Robert Zemeckis tarafından yönetilen film, Tom Hanks ve Robin Wright'ı 60 yıl boyunca kendi karakterlerinin gençlik halleriyle göstermek için gelişmiş YZ destekli yaşlandırma teknolojisini kullandı. Mükemmelleştirilmesi aylar sürebilen geleneksel CGI'ın (Bilgisayar Üretimli Görüntüleme) aksine, bu yaklaşım çekim setinde anlık dönüşümleri görmeyi mümkün kılarak zamandan ve maliyetten tasarruf sağladı. YZ, sadece hikaye anlatımını geliştirmekle kalmıyor, aynı zamanda film prodüksiyonunu daha verimli ve yenilikçi hale getiriyor.

Aslında Hollywood, yapay zeka destekli yüz değiştirme, deepfake tarzı karakter iyileştirmeleri, otomatik arka plan oluşturma ve gerçek zamanlı sanal ortamlar gibi yenilikçi tekniklerle deneyler yapıyor. Bu yenilikler görsel efektleri daha gerçekçi ve prodüksiyonu daha verimli kılıyor. Raporlar, film endüstrisinde üretken yapay zekanın benimsenmesinin %27,2'lik etkileyici bir yıllık büyüme oranıyla hızla arttığını gösteriyor.

Şekil 1. Filmlerde Üretken Yapay Zeka Pazarına Genel Bakış.

Son yıllarda CGI birçok filmde standart bir özellik haline geldi. Neredeyse her Marvel Studios filmi, hayranların favori karakterlerini geri getirmek, nostalji yaratmak ve sinematik deneyimi geliştirmek için gençleştirme teknolojisinden yararlanıyor. Yapay zeka artık hikaye anlatımından video düzenlemeye ve senaryo yazımına kadar her konuda yardımcı olarak film yapımcılığının önemli bir parçası. Film endüstrisinin, filmleri daha ilgi çekici, verimli ve görsel olarak çarpıcı hale getirmek için yapay zekayı nasıl kullandığına bir göz atalım.

Link to this sectionFilmlerde yapay zeka destekli hikaye anlatımı#

Oyuncuları gençleştirmekten tamamen yeni karakterler yaratmaya kadar yapay zeka, film yapımcılarının yaratıcı vizyonlarını hayata geçirmelerine yardımcı oluyor. Bu yapay zeka uygulamalarından bazılarına daha yakından bakalım.

Link to this sectionFilmde görsel efektler için yapay zeka kullanımı#

Görsel efektler ve CGI uzun yıllardır film yapımcılığının önemli bir parçası olmuştur. İlk önemli kullanımları, bir robotun bakış açısını göstermek için pikselli görüntüler kullanan Westworld (1973) filmindeydi. Zamanla bu teknolojiler daha gelişmiş ve gerçekçi hale geldi.

Yapay zekanın entegrasyonu bunları daha da geliştirdi. Gençleştirme, yüz morfolojisi ve yapay zeka destekli hareket yakalama gibi teknikler artık dijital efektlerin daha doğal görünmesini sağlıyor. Örneğin, Gemini Man (2019) filminde gençleştirme teknolojisi, o dönem 50 yaşında olan Will Smith'i kendisinin ikna edici 23 yaşındaki haline dönüştürdü. Bu, Junior karakterini hayata geçirdi.

Şekil 2. Will Smith 50 yaşından 23 yaşına gençleştirildi.

İşte yapay zeka kullanan gençleştirme teknolojisinin çalışma prensibi:

• Yüz tarama: Cilt dokusu, gözenekler ve yüz hatları gibi bir oyuncunun yüzünün karmaşık ayrıntılarını yakalamak için yüksek çözünürlüklü taramalar kullanılır.
• Yapay zeka modelleri: Makine öğrenimi modelleri, yüz özelliklerini, ifadeleri ve hareketleri yeniden oluşturmak için arşiv görüntülerini veya referans görsellerini analiz eder.
• Performans yakalama: Doğal ve gerçekçi performanslar sağlamak için oyuncuların hareketleri ve ifadeleri hareket yakalama teknolojisi kullanılarak kaydedilir.
• CGI yeniden yapılandırma: Dijital bir model oluşturulur ve oyuncunun ifadeleri dijital karakter üzerine haritalanarak canlı çekim görüntüleriyle sorunsuz bir şekilde harmanlanır.
• Işıklandırma ve Doku Ayarlamaları: Gelişmiş render teknikleri, dijital karakterin sahneye doğal bir şekilde uyum sağlamasını sağlamak için cilt tonunu, ışıklandırmayı ve çevresel etkileşimleri ayarlar.

Bu süreç, film yapımcılarının ister oyuncuların daha genç versiyonlarını, ister tamamen yeni karakterler yaratırken, isterse karmaşık görsel efektleri geliştirirken çarpıcı bir gerçekçilik elde etmelerini sağlar.

Link to this sectionVision AI'nin filmdeki görsel efektleri iyileştirmedeki rolü#

It’s important to keep in mind that AI in visual effects and CGI is a broad field that encompasses a wide range of techniques and approaches. For example, one key technology behind these innovations is computer vision, a branch of AI that helps machines analyze and understand visual data. While computer vision alone can’t make visual effects possible, it plays a crucial role in enhancing their realism and integration.

Nesne takibini düşünün; bu, dijital efektlerin canlı çekimlerle uyumlu kalmasını sağlayarak bir sahnedeki nesnelerin veya oyuncuların hareketlerini izlemeye yardımcı olan bir bilgisayarlı görü görevidir. Nesne takibi, bir nesnenin konumunu ve hareketini tespit etmek için video karelerini analiz ederek çalışır. Bu bilgi, CGI karakterleri veya efektleri gibi dijital öğeleri sabitlemek için kullanılır, böylece takip edilen nesneyle doğal bir şekilde hareket ederler. Örneğin bir aksiyon sahnesinde, fiziksel ortamın bir parçası gibi görünmesi için CGI bir silahı veya parlayan bir efekti sorunsuz bir şekilde eklemek amacıyla oyuncunun elini takip edebilir.

Link to this sectionFilmlerde yapay zeka tarafından oluşturulan karakterler#

Yapay zeka tarafından oluşturulan karakterler, film yapımcılarının bir oyuncunun vefatından sonra performansları tamamlama gibi zorlukların üstesinden gelme biçimini değiştiriyor. Hızlı ve Öfkeli 7 filminde yapay zeka, Paul Walker'ın karakteri Brian O'Conner'ı zamansız ölümünden sonra hayata döndürmek için gerekliydi. Film yapımcıları, Walker'ın yüzünü dijital olarak yeniden yaratmak için CGI ve yapay zeka kullandılar ve dublör olarak kardeşleri Caleb ve Cody ile oyuncu John Brotherton'a güvendiler. Yapay zeka, Walker'ın yüz ifadelerini ve hareketlerini doğrulukla kopyalamak için önceki performanslarını analiz ederken, mevcut ses kayıtları da diyaloglarını oluşturmak için kullanıldı. Yapay zekanın bu yenilikçi kullanımı, filmin tamamlanmasına olanak sağladı ve Walker'ın mirasına saygı duruşunda bulunulmasına yardımcı oldu.

Şekil 3. Paul Walker'ın yüzünün Cody Walker'ın vücuduna yerleştirilmesi.

Link to this sectionYapay zeka destekli senaryo yazımı#

Üretken Yapay Zeka, senaryo yazımı ve hikaye geliştirme gibi yaratıcı görevlere yardımcı olarak film yapımının prodüksiyon öncesi aşamasını hızlandırıyor. Yapay zeka modelleri, farklı filmlerden senaryoları ve diyalogları analiz edebilir ve verilen istemlere dayalı olarak senaryolar veya hikayeler oluşturabilir. Bu yapay zeka araçları hikaye anlatımındaki kalıpları tanımlayabilir, olay örgüsü noktaları önerebilir ve hatta belirli türlere veya tonlara uygun diyaloglar oluşturabilir. Bu, zamandan tasarruf sağlar ve film yapımcılarına yaratıcı süreçleri için benzersiz bir başlangıç noktası sunar.

Film yapımında yapay zekanın yaratıcı kullanımına dair ilginç bir örnek, End Cue tarafından üretilen 2016 yapımı kısa film Sunspring'dir. Bu 9 dakikalık bilim kurgu filmini benzersiz kılan şey, senaryosunun tamamen Benjamin adındaki bir yapay zeka botu tarafından yazılmış olmasıdır. 1980'ler ve 1990'lar filmlerinden yüzlerce senaryo, diyalog ve altyazı ile eğitilen Benjamin, yapay zekanın hikaye anlatımına nasıl taze bir bakış açısı getirebileceğini gösterdi.

Şekil 4. Benjamin tarafından oluşturulan bir senaryo.

Link to this sectionVideo düzenleme ve post-prodüksiyonda yapay zeka#

Gelişmiş teknolojiler yıllardır film post-prodüksiyonunda kullanılmaktadır, ancak bunlar genellikle çok fazla zaman ve çaba gerektirir. Yapay zeka, süreci basitleştirerek ve otomatik düzenleme ve ses sentezi gibi yeni yaratıcı araçlar getirerek bunu değiştiriyor; böylece film yapımını daha hızlı, daha kolay ve daha yenilikçi hale getiriyor.

Link to this sectionOtomatik video düzenleme için yapay zeka kullanımı#

Düzenleme, film yapımındaki en zaman alıcı süreçlerden biridir. Editörler genellikle görüntüleri gözden geçirmek, çekimleri analiz etmek, en iyi çekimleri seçmek ve bunları bir araya getirmek için saatler harcarlar. Örneğin, Liam Neeson'ın (Bryan Mills) bir çitin üzerinden atladığı 6 saniyelik bir sahnenin yer aldığı Taken 3 (2014) filminde, birden fazla kameradan 14 kesim bulunmaktadır. Bu kısa sekansı üretmek için düzenleme ekibi çeşitli kameralardan gelen görüntüleri yakından incelemek, birkaç ayarlama yapmak ve sekansı nihai hale getirmek zorundaydı.

To pace up these processes, we can use AI-powered editing tools to analyze the footage from different cameras and get a cohesive final output. Computer vision plays an important role in these tools through techniques like scene classification to identify and organize different parts of the footage, such as action sequences, dialog scenes, or transitions. It helps AI tools understand the structure of a film and make better decisions about which clips to use and how to arrange them.

Şekil 5. Yapay zeka video düzenleme sürecini hızlandırabilir.

Link to this sectionFilm müziği besteleme için yapay zeka#

Bir filmde tema müziği ve arka plan müzikleri, sahneleri yükseltmek ve filmi izleyiciyle buluşturmakta çok önemli bir rol oynar. Perdeyi ve tonu bir sahnenin yoğunluğuna uyacak şekilde mükemmelleştirmek - aksiyon sahneleri için yükseltmek veya duygusal anlar için yumuşatmak - besteciler için her zaman zorlu bir görev olmuştur.

Bu süreci basitleştirmek için birçok besteci artık yapay zeka müzik oluşturma araçlarını kullanıyor. Örneğin, Oscar, Altın Küre ve Grammy Ödülü sahibi Michael Giacchino, The Batman (2022) filmindeki bazı karanlık ve atmosferik parçaları oluşturmak için yapay zeka araçlarını kullandı.

Link to this sectionYapay zekanın ses sentezi ve dublajdaki rolü#

Geçmişte ses mühendisleri, bir sahnedeki sesleri taklit etmek için farklı özelliklere güvenirlerdi. Örneğin, Jurassic Park (1993) filmindeki Tyrannosaurus rex kükremesi, farklı hayvan seslerinin bir karışımıdır. Filmin Oscar ödüllü ses tasarımcısı Gary Rydstrom, unutulmaz kükremeyi oluşturmak için bebek fil çığlığı, kaplan hırıltısı ve timsah gurultusundan gelen seslerin bir kombinasyonunu kullandı. Bu sesleri farklı kaynaklardan kaydetmek zaman ve gelişmiş kayıt sistemleri gerektirir.

Şekil 6. Yapay zeka ses post-prodüksiyonunu basitleştirebilir.

Bununla birlikte, farklı sesler oluşturabilen yapay zeka araçlarıyla, bu sesler kolaylıkla oluşturulabilir. Örneğin, Top Gun: Maverick (2022) filminde Tom Kazansky karakterini canlandıran oyuncu Val Kilmer, gırtlak kanseri nedeniyle sesini kaybetmişti. Film ekibi, sesini yeniden yaratmak için gelişmiş yapay zeka kullandı.

Link to this sectionFilm yapımında yapay zekanın etik hususları#

Yapay zeka verimliliği artırıp yeni yaratıcı olanaklar sunabilirken, endüstrideki artan rolü, aşağıdakiler gibi önemli etik soruları da beraberinde getiriyor:

• Sahiplik: Yapay zeka tarafından oluşturulan içerik; sahiplik, özgünlük ve fikri mülkiyet hakları konusunda endişeler uyandırıyor. Senaryolar, karakterler, müzik veya görsel efektler oluşturmak için yapay zeka araçları kullanıldığında, kime kredi verileceğini ve tazminat ödeneceğini belirlemek zorlaşıyor.
• Deepfake'lerde yanıltıcı bilgi: Yapay zeka destekli deepfake teknolojisi son derece gerçekçi içerikler oluşturabilir. Ancak aynı zamanda ciddi yasal sonuçları olabilecek yanlış bilgiler de yayabilir.
• Gizlilik endişeleri: Film yapımında yer alan yapay zeka eğitim süreci, oyuncu görüntüleri, videoları ve sesleri gibi geniş bir kişisel veri koleksiyonu gerektirir. Bu durum, gizlilik ve veri koruma konusunda endişelere yol açmaktadır.

Link to this sectionYapay zeka ile bir sonraki bölüm#

Yapay zeka, film endüstrisinde etkili bir araç olarak ortaya çıktı. Görsel efektleri güçlendirmekten post-prodüksiyonu kolaylaştırmaya, yaratıcı içerik üretmekten izleyici deneyimlerini kişiselleştirmeye kadar yapay zeka, film tüketme ve oluşturma şeklimizi değiştiriyor.

Yapay zekanın potansiyel faydaları muazzam olsa da, kullanımıyla ilişkili etik zorlukları ele almak çok önemlidir. Sorumlu yapay zeka gelişimini teşvik ederek ve insan yaratıcılığına öncelik vererek, teknolojinin ve sanatın sorunsuz bir şekilde iç içe geçtiği, sanatsal değerlere saygı duyarken hikaye anlatımı deneyimini geliştiren bir gelecek yaratabiliriz.

GitHub depomuzda yapay zeka hakkında daha fazla bilgi edinin ve aktif topluluğumuza katılın. Üretim ve otonom sürüş gibi sektörlerdeki çeşitli yapay zeka uygulamalarını keşfedin.