"Three Thousand Crows" AI yüzünü değiştiren teknoloji sarı ağ kadar iyi değil, Çin'de yüz değiştirme seviyesi gerçekten çok mu kötü?
Yazar / Yuzhong
Son zamanlarda, Mango TV tarafından yayınlanan "Three Thousand Crows" adlı TV dizisi vasat bir yanıt aldı, ancak AI, slotlarla dolu yüz değiştiren netizenler arasında birçok tartışmaya neden oldu. "Biraz sığmaz mı? Yüz hatları neredeyse sınırların dışında", "O kadar korktum ki ruhun bedenden çıktığını düşündüm", "Bu fazla formalite icabı" diye herkes şikayet etti.
Yapay zekanın yüzleri değiştirmek için kullanılmasının nedeni, oyundaki yeşil perinin aktörü Liu Lu'nun geçen yıl tren istasyonunda yaygara koparması, ancak aracı şirket Mango tarafından feshedilmesi ve sonunda yüz değiştirmesidir. Ve bu, yüzleri değiştirmek için yapay zekayı kullanan ilk yerli TV dizisi değil. Liu Lu'nun da oynadığı "Glory Times", "Fengshen Yanyi" ve "Time is Sweet with You" nun önceki yayınlarının tamamı aktör faktörlerinden kaynaklanıyor. Bu teknoloji sayesinde.
İlk birkaç dizi yayınlanmış olmasına rağmen seyirci bir bakışta kusurlar gördü.Örneğin, yapay zeka yüz değişikliğinden sonra oyuncunun saçının kenarları çevreye tam anlamıyla entegre olamadı ve yüzündeki ışık, yanındaki diğer oyuncuların yüzlerindeki ışıktan açıkça farklıydı. Ancak "Three Thousand Crows" da olduğu gibi, oyuncunun yüzü AI tarafından değiştirildikten sonra yüzün rengi boynun renginden açıkça farklıdır, yüz bulanıklaşır ve bazen yüz hatları bile net değildir, kafa boyutu ve tüm vücut uyuşmaz vb. Bu tür temel bir problem için ilk defa, P istasyonu UP ana bilgisayarının kendi yarattığı Yang Mi ve Di Lieba'nın yapay zekasının yüz değiştiren etkileri bile o kadar iyi değil.
AI yüz değiştirme, Çin özelliklerine sahip tipik bir üründür. Son yıllarda ünlülerin çeşitli nedenlerle büyük ekranda görünmesi yasaklandı. Bu, AI yüz değiştirmenin ortaya çıkmasına neden oldu. Bununla birlikte, bu tür şirketlerin yurtiçi hayatta kalması iyimser değil.
Bir yandan, çehresini değiştirmesi gereken daha az proje var ve yüz değişiminin sermaye maliyeti, üretici ve üreticinin katlanmaya isteksiz olduğu, küçük bir pazarla sonuçlanan ek bir maliyettir; diğer yandan bu adil ve rekabetçi bir pazar değildir. Proje için teknolojiye sahip olmak yeterli değil. göre Entertainment Capital Matrix Number Pufferfish Film ve Televizyon Arşivi (ID: htysda) Röportaj, bu kez "Three Thousand Crows" için yapay zeka yüzünü değiştiren şirket gibi, sermaye piyasası tarafından birkaç milyar yuan değerinde tanınan bir şirket olmasına rağmen, esasen film ve televizyon projeleri ile uğraşmadığını öğrendi. Film ve televizyon dizilerinde yapay zekanın yüzünü değiştirmekte iyi değil.
Çin'de görünüşte gizemli yapay zekanın yüz değiştirmesinin şu anki gelişimi nedir? Film ve televizyon endüstrisinde sonsuza kadar hayatta kalabilir mi?
AI yüzü değiştir, bir TV dizisi bir gecede değiştirilebilir
Bir endüstri gazisi A, "TV dizilerinde yüz değiştirmek zor değil." Entertainment Capital Matrix Number Pufferfish Film ve Televizyon Arşivi (ID: htysda) .
Daha 2015 yılının Aralık ayında yayınlanan "İnanılmaz" filminde olduğu gibi, yüz değiştiren teknoloji ilk defa Çin'de gerçekleştirildi. Filmin ana oyuncularından biri olan Du Wenze, o dönemde "Hong Kong'un bağımsızlığı" konusundaki tartışmalara yakalanmıştı.Film ekibi yüzünü Dapeng'in yüzüyle değiştirmek zorunda kaldı, ancak o sırada elle kesme ve yüzünü kare kare değiştirme yöntemini kullandı.
O sırada, yüzü değiştirmek için, yapım ekibinin erken aşamada değiştirilmesi gereken lensleri analiz etmesi ve her lens için ayrıntılı bir değiştirme planı bulması gerekiyordu. Çekim sürecinde, biri çekim alanında rehberlik etmek, diğeri ise her gün çekilen malzemelerin yüzü değiştiren lensin ihtiyaçlarını karşılamasını sağlamak için sahne arkasında kısa bir sentez yapmak üzere iki özel efekt ekibi görevlendirildi. Bu şekilde, yeniden çekim için sadece 20 günden fazla sürmesine rağmen, yüz değişikliğini arka arkaya elle keserek tamamlamak yarım ay sürdü. Film gösterime girdikten sonra seyirci kusurları görmedi.
Profesyonel video editörlerinin ve CGI ekiplerinin yüz değişikliğini sağlamak için uzun bir zaman ve yüksek maliyet harcamasını gerektiren bu tür bir yüz değişikliği.Çin'de yapay zeka teknolojisi popüler hale geldiğinde, yerini yapay zeka yüz değiştirme teknolojisi aldı ve işleri ortaya çıktıkça yapay zeka yüz değişimini kullanan bir grup şirket aldı. . Ancak bu teknoloji zor değil, sadece bir GPU ve bazı eğitim teknikleri ile sağlanabilir.
Dahası, yerli yapay zeka yüz takas teknolojisi, iki yabancı açık kaynaklı yazılıma dayalı olarak geliştirildi: biri Amerika Birleşik Devletleri'nden Deepfakes, diğeri ise FaceSwap adlı Rusya'dan. Kamuya açık bilgilere göre, iki yazılımın yüz değiştirme süreci aynıdır:
İlk olarak, yüz görüntüsünü çıkarın: Yeni oyuncunun fotoğraflarını veya videolarını toplayın ve orijinal fotoğraflardan yüzünü çıkarın;
İkinci olarak, eğitim modeli: yani, fotoğraflardan veya videolardan çıkarılan yüzler üzerinde modeller eğitmek için algoritmaların kullanılması;
Üçüncüsü, resim dönüştürme: eğitimli yüz modeli aracılığıyla eski oyuncunun yüzü değiştirilir;
Dördüncü olarak, her karenin yüzlerini bir videoda birleştirin.
Bunların arasında en önemlisi modelin eğitilmesidir.Model sabitlendikten sonra yüz değişimi çok hızlıdır, özellikle lens piksel gereksinimi bu kadar yüksek olmayan TV dizileri için.Genellikle bir gecede bir dizi değiştirilebilir.
Bu süreç, sadece yüz değiştiren ekibin algoritmik yeteneğini değil, aynı zamanda hem teknolojiyi hem de film ve televizyon yapımını anlamalarını gerektiren kurgu yeteneğini de yansıtıyor. "" Üç Bin Karga "gibi, her şeyden önce, bunun nedeni eğitimin yerinde olmaması ve temel algoritmanın sorunlu olabilmesi olabilir, bu nedenle hesaplamadan sonra açık renk uyumsuzluğu, yüz uyumsuzluğu ve zayıf entegrasyon gibi sorunlar olacaktır." .
Aslında, "Three Thousand Crows" da kullanılan tüm yüzü değiştirme teknolojisi, AI yüz değiştirme teknolojisinin ilk aşamasıdır. Artık yerli yapay zeka yüz değişikliği ilk aşamayı çoktan geçti.İkinci aşamadan sonra tüm yüz özelliklerini söküp ayrı ayrı, yüz değişikliğinin üçüncü aşamasına çevirerek artık dördüncü aşamaya, yani netlik artırıldı. .
Teknoloji neden bu aşamaya kadar geliştirildi ve "Üç Bin Karga" da gösterilen etki gerçekten de böyle?
Bir söyler Entertainment Capital Matrix Number Pufferfish Film ve Televizyon Arşivi (ID: htysda) Bu dizinin çehresini değiştiren şirket sektörde iyi bilinmesine ve sermaye piyasasında yüksek bir değere sahip olmasına rağmen, önceki işi film ve televizyon alanında değildi ve TV dizilerinin yapay zeka ile yüz değiştirmesine aşina değildi.
Aslında, film ve televizyon dizileri için yapay zeka yüz değiştirme konusunda uzmanlaşmış şirketlerin sipariş alması zor. Çünkü genellikle bir dizinin çekilmesinden sonra, oyuncunun bir sorunu vardır ve yalnızca AI yüz değiştiren teknolojiyi kullanması gerekir.
Her şeyden önce, bu tür pek çok proje yok. Şu anda, "Feng Shen Yanyi", "Glory Times", "Time and You Are Good" ve "Three Thousand Crows" un sadece dört eseri var ve sonunda yüzleri değiştirmek ve yayın yapmak için AI kullandı; Üretici ve üretici bu ek üretim maliyetini ödemeye isteksizdir. Projeyi elde etme yeteneği sadece kimin yetenekli olduğuna bağlı değildir.
(Resim, "Glory Times" da Zhao Lixin'in yerine Huang Zhizhong'un yüzünü gösteriyor)
Ancak artık açık kaynağın kaynak kodu engellendiğine göre, gelecekte yeni gelenlerin TV dizisi AI değişim yüzüne girmesi zor olacak.
Dakikada on bin yuan,
Düşük maliyetli yüz takas teknolojisi sürdürülebilir olabilir mi?
Aynı zamanda, düşünmeye değer başka bir soru daha var: Yapay zekanın değişen yüzü, filme alınmış film ve televizyon çalışmalarını kurtarmanın ve oyuncuların sorunları olması için en iyi yol mu?
Maliyet açısından, AI yüz değişiminin sermaye maliyetinin en düşük olduğu doğrudur. Yapay zeka ile yüz değiştiren bir şirketin dakika başına 10.000 yuan fiyat verdiği anlaşılıyor. Yüzünü değiştirmesi gereken karakter ana karakter olsa bile 60 bölüm uzunluğuna ve bir bölüm için 20 dakikaya göre harcanan miktar sadece 12 milyondur. Oyunculardan yeniden yapım istemekle karşılaştırıldığında, maliyet açıkça çok daha düşük. Gao Yunxiang'ın oynadığı "The Story of Ba Qing" Avustralya'da savunulduktan sonra, film ekibi Li Chen'i Gao Yunxiang'ın sahnesini yeniden çekmesi için davet etti ve maliyet yaklaşık 70 milyon yuan'dı.
Ancak yukarıdakiler sadece TV dizileri için geçerlidir. Yerli filmlerde yapay zeka yüz değişimi henüz uygulanmadı. Öncelikle filmlerin gerektirdiği ekran çözünürlüğü TV dizilerinin en az 16 katı olduğu için günümüz teknolojisiyle elde etmek zor. Dahası, uzun bir zaman alır.Bir lensi değiştirmek bir ay sürer.Bir gecede bir TV dizisini değiştirebileceğinizi bilmelisiniz; sonunda, maliyet çok yüksektir ve etkisi, geleneksel CGI yüz değiştirme teknolojisi kadar iyi değildir.
Bu nedenle mevcut yerli film ve televizyon endüstrisinde, dizi projesi filme alınıyor ve oyuncunun sorunları varsa ve dizi yayınlanamıyorsa, yapay zekayı değiştiren yüzleri kurtarmanın en iyi yolu olduğu söylenebilir; eğer film ise ancak düşünülebilir. Oyuncuları değiştirin ve tekrar çekim yapın.
Yurtdışında Çin'de durum böyle olmasa da oyuncular nedeniyle film ve televizyon eserlerinin yayınlanamadığı durumlar da var. Örneğin, "Hızlı ve Öfkeli 7" nin kahramanı Paul Walker'ın 2013'te bir araba kazasında hayatını kaybetmesinden sonra, yapım ekibi yeniden çekim için "dört çift + CGI" teknolojisini kullandı.
Bunu yapabilmelerinin nedeni güçlü teknik desteğe sahip olmalarıdır. Üstelik, yapımcının filmi çekmeden önce satın alma garantisi var, böyle bir kaza durumunda sigorta şirketi hak talebinde bulunacak, böylece film sahibinin doğal olarak yeniden çekecek parası var.
Böylelikle, geleceğin teknolojisi duygusuyla dolu gibi görünen yerli yapay zeka, yıldız problemlerine yanıt olarak sadece Çin özelliklerine sahip bir üründür. "Gemini Killer" da kullanılan yapay zeka teknolojisi gibi bir iyileştirme arayışı haline gelmek zordur. Film ve televizyon prodüksiyonu düzeyinde uzmanlık.
Sonuç olarak, şu anda bu tür teknolojinin en popüler uygulama senaryoları eğlence uygulamalarında görünmektedir. 2019'da Momo'nun kuluçka şirketinin teknik ekibi tarafından başlatılan yapay zeka yüz değiştiren uygulama "ZAO Face-to-Face", kullanıcıların yüzlerinin çeşitli film ve televizyon çalışmalarında görünmesine olanak tanıyarak APP'yi Apple App Store'a ücretsiz olarak ulaştırıyor. Listedeki ilk yazılımı indirin.
Ancak, film ve televizyon işlerini kurtarabilen bir teknoloji olarak, kullanmaya devam edebilmek için sadece yapım ekibinin gelişmeye devam etmesi gerekmiyor, aynı zamanda endüstri ortamının da iyileştirilmesi gerekiyor.
