Bir video modelinden "ateşböceği kız bir yaprağın altına saklanıyor" isteyin, her seferinde farklı bir ateşböceği kız alırsınız. Aynı şeyi bir görsel modele, ona kızın referans sayfasını göstererek isteyin, onu alırsınız. Sonra bir video modelinden o görseli canlandırmasını isteyin, kız hareket eder. Hikâyeden film ile birlikte yayına aldığımız sahne hattının bütün fikri bu ve elimizdeki en etkili tutarlılık aracı da bu.

Metinden videoya neden unutur

Bir metin prompt'u bir bireyi değil, bir dağılımı tarif eder. "Yarı saydam kanatlı küçük bir ateşböceği kız" binlerce çizimle eşleşir ve her çağrı bunlardan farklı birini örnekler. Video modelleri durumu daha da kötüleştirir: karakteri kareler boyunca da sabit tutmaları gerekir ve herhangi bir referansa sadakati hareket kalitesi uğruna feda ederler. Mühendislik yapılmadan otuz bağımsız metinden videoya çağrısı size birbirinden biraz farklı otuz kahraman ve kimin kim olduğunu anlatmak için altyazıya ihtiyaç duyan bir film verir.

Eski yol

Karakterli sahneler, video sağlayıcısının çoklu görsel referans uç noktasını kullanıyordu: birkaç referans görsel artı bir prompt ve model kompozisyonu icat ederken karakterin tutarlı kalacağı vaadi. İnsan yüzleri için makul çalışıyordu. İnsan olmayan karakterleri hiçbir zaman iyi idare edemedi ve kısa süre önce sağlayıcı tarafından pek haber verilmeden emekliye ayrıldı. Tek bir sağlayıcının özel uç noktasına bağımlı bir hat, o sağlayıcının bir sonraki ürün kararında kırılır; bu yüzden emekliye ayrılmayı, yerine yeni bir uç nokta bulmak için değil, tasarımı değiştirmek için bir gerekçe olarak gördük.

Yeni yol

  1. Yönetmen sahne prompt'unu yazar ve sahnede bulunan karakterleri kadro kimliğiyle listeler.
  2. Stüdyo bir anahtar kare üretir: görsel model kadro sayfalarını, sahne prompt'unu ve stil rehberini, her tasarımı referansına sadık tutma talimatıyla birlikte alır.
  3. Anahtar kare, hangi kalite kademesinde olursa olsun görselden videoya yöntemiyle klibin ilk karesi olur. Video prompt'u yalnızca değişeni tarif eder: hareketi, kamera hareketini, ifadeyi.

Kadrodan kimsenin olmadığı sahneler, örneğin vadinin bir açılış planı, stil cümlesi başa eklenmiş olarak hâlâ doğrudan metinden videoya gider. Devam eden olarak işaretlenen sahneler, taze bir anahtar kare yerine önceki klibin son karesinden başlar; böylece mekân ve ışık bir sonraki sahneye taşınır.

Hoşumuza giden yan etkiler

  • Sinema kademeleri artık karakter kullanabiliyor; önceden yalnızca hızlı kademeler kullanabiliyordu, çünkü referans uç noktası yalnızca orada vardı.
  • Klip daha ortada yokken anahtar kareyi inceleyebilirsiniz; Kütüphane de onu prompt'uyla birlikte saklar.
  • Başarısız bir anahtar kare ucuza başarısız olur; pahalı video adımı hiç çalışmaz.
  • Kompozisyon hareketten ayrılır. Bir sahne yanlış görünüyorsa sorun durağan karede görünür ve düzeltmesi tek bir prompt'ta yapılacak bir düzenlemedir.

Maliyeti ne

Sahne başına bir görsel üretimi; gerçek maliyetle birkaç sent. Öncesinde geldiği video klibe kıyasla neredeyse bedava. Yaklaşık 32 sahneli dört dakikalık bir film, yaklaşık 30 dolarlık kliplere kabaca 1,30 dolarlık anahtar kare ekliyor. Bu tutarı kazanmak için anahtar kareyi isteğe bağlı yapmayı düşündük ve vazgeçtik; kazanç önemsiz, tutarlılık kaybı ise hiç de değil.

Ondan en iyi nasıl yararlanılır

  • Özneyi anahtar kare prompt'unda, yalnızca hareketi video prompt'unda tarif edin. Karakteri video aşamasında yeniden tarif etmek, modeli onu yeniden çizmeye davet eder.
  • Stil cümlesini her prompt'ta en başta tutun. Modeller başlangıca daha fazla ağırlık verir.
  • Anahtar karede çerçeveyi ve yazıyı yasaklayın. Görsel modeller bazen bir çerçeve çizgisi ya da bir altyazı çizer; video modeli de ardından bir afişi canlandırır.
  • Çizim stillerinde Standart'ı tercih edin. Hızlı kademe düz rengi düz tutar; Sinema kademeleri çizilmiş bir anahtar kareye fotogerçekçi doku ekleyebilir.

Tuzaklar

Görselden videoya hareketi karenin sınırlarıyla kısıtlıdır. Kameraya doğru koşan bir karakter ya da bir kavga kısıtlı görünebilir, çünkü model kendisine verilen kompozisyonun dışına çıkmakta isteksizdir. Daha kısa klipler işe yarar, bir sonraki an için taze bir anahtar kare de öyle. Bazı modeller uzun bir klibin sonuna doğru da kayar; hızlı kademede sahne başına 5 ila 8 saniye ideal aralıktır ve hikâyeyi kesmeler boyunca anlatım taşır.

Tek karede üç ya da daha fazla kadro üyesi, güncel modellerin özellikleri birbirine karıştırmaya başladığı noktadır. Yönetmene sahneleri önemli karakterlerle sınırlı tutması söylenir ve iki karakter aynı kareyi paylaştığında prompt'lar konumları adlandırır ("kurbağa solda, baykuş sağda").

Sık sorulanlar

Anahtar kare yolu her kademede çalışıyor mu? Evet. Taslak, Standart, Sinema ve Sinema Pro'nun hepsi anahtar kareden canlandırır; yalnızca süreler farklıdır: hızlı kademelerde 5 ya da 10 saniye, Sinema'da 4, 6 ya da 8.

Kendi ilk karemi verebilir miyim? Evet. Sahne sahne çalışma akışında onayladığınız bir storyboard karesi, aynı görselden videoya adımıyla klibin ilk karesi olur; model onun bir tarifinden değil, sizin resminizden başlar.

Video modeli anahtar kareyi yok sayarsa ne olur? Klibi kısaltın, anahtar karede çerçeve ya da yazı olmadığını kontrol edin ve video prompt'unu yalnızca hareketle sınırlı tutun. Çerçeveli bir görsel afiş olarak okunur ve yeniden yorumlanır.