Çok Araçlı Bir AI Video Hattı Buna Değer mi?

Sinematik bir hattın yapması gerekenler

Araç adlarını çıkarırsanız her sinematik AI video aynı aşamalardan geçer: bir senaryo, bir görünüm, tasarlanmış insanlar ve mekânlar, bir plan listesi, işlenmiş planlar, ses ve müzik ve bir son rötuş — kurgu, renk derecelendirme, çözünürlük. "Profesyonel hat" genellikle her aşamayı ayrı bir programda yapıp dosyaları aralarında taşımak demektir. r/generativeAI'da bir yaratıcı, şehir yıkımı sekansı için tipik bir zinciri anlattı: kendi sokak fotoğraflarının üzerine yerleştirilip aydınlatılan indirilmiş bir 3D model, kompozisyonu yapılan kareler, görselden videoya modelle canlandırılan kareler, yükseltilen klipler ve sonunda bir kompozisyon programında geri eklenen renk ve efektler.

Sonuç, o konuda uzun ve çoğunlukla cömert bir tartışma doğurdu. Zincirin size nereye mal olduğunu da gösterdi.

Araç zincirinin sızdırdığı yerler

Her aktarım, bir önceki aracın bildiği bir şeyin kaybolduğu bir yerdir. Görüntü aracı 3D sahnenin kamerasının ne olduğunu bilmez; video modeli önceki klibin neyle bittiğini bilmez; yükseltici hangi ayrıntıların önemli olduğunu bilmez. Yaratıcı, dikişleri elle yamamaktan açıkça söz etti:

Tutarsızlığı gizlemek için merceğe kir, lens flare gibi şeyler kullanmaya çalışıyorum.

İzleyiciler yine de fark etti. Bir yanıt, bir sekansı ele veren ayrıntıları sıraladı:

ölçek ve konum tutarlılığı gibi küçük şeyler tüm projenin gerçekçiliğini öldürebilir.

Planlar arası tutarlılık toplulukta başlı başına bir tema — 1,500 gönderi bununla etiketli — ve bu soruların çoğu tam da bu durumdan gelir: her araç kendi adımını iyi yaptı, ama adımlar birbiriyle uyuşmuyor.

Tutarlılık bir hafıza sorunudur

Konudaki en keskin yorum herhangi bir araçla ilgili değildi:

En çok gözden kaçan sorun hâlâ tutarlılık.

Ardından somut bir istek geldi:

Birden çok açıdan kusursuz 30 saniyelik bir sahne yap.

Tek bir sahnenin birden çok açısı, tek planlık araçlardan oluşan bir zincirin tam da zorlandığı şeydir, çünkü hiçbir şey odayı hatırlamaz. SceneMixer her sahne için otomatik bir AI 3D modeli kurar — mekân, önemli mobilyalar, herkesin durduğu yer — ve o sahnenin her planını bu modele göre üretir; böylece geniş plan, yakın planlar ve karşı plan birbiriyle uyuşur. Karakterler her biri için tek bir sayfadan gelir; sonraki segment, önceki bittiği yerde açılır. Bunların hiçbiri kurulum gerektirmez; üretim sırasında kendiliğinden olur.

Tek bir projenin yaptıkları ve yapmadıkları

Tek bir SceneMixer projesinde aşamalar birbirine bağlıdır: senaryo karakterlere, mekânlara ve nesnelere okunur; her bölüm saniyeleriyle numaralı planlara dönüşür; segmentler diyalog ve sesle aynı üretimde işlenir; bölüm altına bir müzikle birleştirilir. Bir plan yanlış geldiğinde metnini düzenlersiniz — ücretsiz — ve yalnızca o segmenti yeniden üretirsiniz. Görüntünün daha keskin olması gerekirse Enhance, bitmiş bir klibi bir çözünürlük basamağı yükseltir. Video, işlenen saniye başına faturalanır; varsayılan katmanda saniyesi 10 kredidir.

Yapmadığı şey, zincirin uzmanlık ucudur. Kompozisyon aracı yok: kendi 3D modelinizi getiremez ya da çektiğiniz görüntülerin üzerine üretilmiş efektler koyamazsınız. Renk derecelendirme paketi ya da kare düzeyinde boyama da yok. Bu adımlar işin asıl konusuysa yine başka programlarda yapılır — hikâye, oyuncular ve açılar oturduktan sonra.

Uzun zincirin değdiği durumlar

Zincir, bir adım hiçbir tek aracın sunmadığı bir kontrol gerektirdiğinde maliyetini çıkarır: belirli bir 3D varlık, gerçek görüntü üzerinde efektler, bir müşterinin tam istediği derecelendirme, bir teslim formatı. Sorun hikâyeyse çıkarmaz. Aynı konudaki bir yanıt, hiç yazılım anmadan bu noktayı yaptı:

Sahneler çok kısa ve insanlar, yani, belli ki AI.

Kısa sahneler ve inandırıcı olmayan insanlar planlama sorunlarıdır — bir planın ne kadar tutulduğu, karakterin kesmeler boyunca aynı kişi olup olmadığı — ve bunları bir plan listesinde çözmek, kompozisyon programında çözmekten ucuzdur. Dürüst sıra şu: önce bir sahneyi baştan sona, birkaç açıdan, içinde aynı insanlarla çalıştırın; sonra hangi adımın, varsa, uzman bir araç gerektirdiğine karar verin. AI'ın uzun metrajlı bir film yapıp yapamayacağı yanıtı bunun uzun sürede neye mal olduğunu işliyor; bir karakterin neden her planda farklı göründüğü ise en yaygın dikişi ele alıyor.

Tek proje yolunun sınırları

• Kontrolü tutarlılıkla takas eder: tek bir plan için başka bir model takamaz, 3D varlığı kendiniz konumlandıramaz ya da bir kareyi boyayamazsınız.
• Birleştirilmiş bölümden fazlasını istiyorsanız son rötuş — renk derecelendirme, kompozisyon, başlıklar — yine bir kurgu programında yapılır.
• Her sahnenin 3D modeli otomatiktir ve görünmezdir; onu açamaz ya da mobilyaları elle oynatamazsınız.
• İşlenen planların yine gözden geçirilmesi gerekir ve kaçan bir segment yeniden üretilir; bu, o segment için yeniden faturalanır.
• Sayılar, sabit bir kamusal gönderi penceresine kurallarla eşleştirilerek üretilir; sorunun ne kadar yaygın olduğunu gösterir, kesin bir toplam vermez.

SSS

Konumların kesmeler boyunca nasıl korunduğuna ve tüm bir dizinin neden tutarlı kaldığına bakın; bu yöntemle kurulmuş koca bir sekans için felaket sahnesi yapmak üzerine yanıtı okuyun. Buradaki her sayının dayandığı konu başlığı örneklemi yöntem notunda anlatılıyor.