Aynayı kapatmak için 48 saat! Bu tamamen yapay zeka tarafından yapılmış bir bilim kurgu filmi
Xin Zhiyuan bugün
Xinzhiyuan Derlemesi
Kaynak: arstechnica
Derleyici: Xiao Qin
Xin Zhiyuan Rehberi Londra Bilim Kurgu Film Festivali'ndeki "48 Saatlik Film Yarışması" nda yönetmen Oscar Sharp ve yapay zeka araştırmacısı Ross Goodwin, yapay zeka tarafından yönetilen tüm prodüksiyon sürecini içeren deneysel bir film "Bölge Çıkışı" getirdi. Film, sinir ağı tarafından üretilen diyalog ve dublaj vb. Kullanarak "yüz değiştirme" teknolojisini kullanıyor. Tüm prodüksiyon süreci Benjamin adlı yapay zeka tarafından işleniyor. Bir bilim kurgu filmi olarak sonuçlar oldukça iyi.
İki yıl önce, Sunspring (Çince çevirisi "Yangchun") adlı garip bir kısa film çevrimiçi galasını yaptı. Bu kısa filmle ilgili en çarpıcı şey, filmin tamamı senaryo Hepsi AI tarafından yazılmıştır. Sonu özellikle ciddi bir şekilde gerçekleştirmeden önce, filmin canlı aksiyon oyuncuları, bilgisayar tarafından üretilen garip diyaloğa ve sahne rehberliğine güldüler.
Filmin prodüksiyon ikilisi ve yönetmeni Oscar Sharp Ve AI araştırmacısı Ross Goodwin Geri döndüm ve yapay zeka tarafından yönetilen başka bir deneysel film getirdim. Yüzeyde, bu film açıkça daha kötü. Yeni filmin adı Bölge Çıkışı , Film bulanık yüzler, bilgisayar tarafından oluşturulan diyaloglar ve garip sahne değişiklikleriyle dolu. Bu film "Londra Bilim Kurgu Film Festivali" ne katıldı 48 saatlik film yarışması "(Sci-Fi-London 48-Hour Challenge), bu, geçen sefer olduğu gibi, filmin 48 saat içinde üretilmesi ve belirli yönlendirmelerin takip edilmesi gerektiği anlamına geliyor.
"48 saat" kısıtlamasından bahsetmeye değer, çünkü Sharp ve Goodwin bu sefer daha da fazla izin veriyor: Filmin tüm prodüksiyon sürecini (Benjamin dedikleri) AI sistemine bıraktılar.
Benjamin Ölümsüz
48 saatlik geri sayımın başlangıcında, Sci-Fi-London'ın yapımcısı "Zone Out" u hatırlattı.
2016'da olduğu gibi, kısa filmlerinin de bir dizi gereksinimi var. (Yukarıdaki resim 2018 filmi için gereklilikler.) Bu sefer Benjamin'in bu verilerle çalışmasını istiyorlar.
Sharp, bir röportajda Benjamin'in kısa filmi tamamlamasına izin vermek için " Oluşturma, yönetmen, performans ve film müziği "Film festivalinin ön planlamasına hiçbir insan müdahalesi olmadan başladılar. Bu, Benjamin'e ekstra görevler eklemek anlamına geliyordu. Benjamin'in şunları yapmasına izin vermeyi planladılar: Kamusal alanda film kliplerini birbirine eklemek, ikisinin canlı oyunculuk veritabanını bu kliplerle değiştirmek, Benjamin'in senaryosunu okumak için sesler eklemek ve ardından filmi seslendirmek.
Bütün bunlar senaryoyu yazma sürecinde yapıldı ve bu süreç Benjamin'in 2016'daki deneyinden bu yana gelişiyor. AI yazma senaryoları hala şunlara bağlıdır: LSTM (Uzun Kısa Süreli Bellek) Sinir Ağı .
Zone personeli, çeşitli sinir ağı çözümlerinin yalnızca 48 saatlik süre içinde yüz işleme işini iyi bir şekilde tamamlayabildiğini itiraf etti.
Benjamin'i eğitmek için Goodwin internette bulduğu düzinelerce bilimkurgu film senaryosunu yapay zekaya girdi - bunların çoğu 1980'ler ve 1990'lardan kalma filmlerdi. Benjamin onları harf seviyesine indirdi, hangi harflerin birbirine bağlanma eğiliminde olduğunu ve hangi kelime ve cümlelerin birlikte görünme eğiliminde olduğunu tahmin etmeyi öğrendi. Markov zinciri ile karşılaştırıldığında, LSTM algoritmasının avantajı çok daha uzun harf dizilerini örnekleyebilmesidir, bu nedenle Paragrafın tamamını tahmin edin , Sadece birkaç kelimeyi tahmin etmekle kalmaz. LSTM şu konularda da iyidir: Orijinal cümleler oluşturun Derlemeden cümleleri kesip yapıştırmak yerine. Benjamin zamanla senaryonun yapısını taklit etmeyi, sahne rehberliği oluşturmayı ve iyi biçimli çizgiler oluşturmayı öğrendi.
"Zone Out" senaryosu, "Yangchun" gibi, boş saçmalık ve duygusal çizgiler arasında gidip geliyor - dürüst olmak gerekirse, bir bilimkurgu şaheserinden aşağı değil. (Filmdeki diyalogdan alınan bir örnek, Benjaminin efendisine yönelik eleştirisine benziyor: "Neden bana söylemedin ... dediğin doğru mu? İnsanlar insanlara daha fazla zarar verebilecek mi? "Bu sefer, senaryodaki insan benzeri diyalogların aksine garip, yapay zeka tarafından otomatik hale getirilen diğer birçok film yapımı görevi ile güçlendirildi.
Yapım sürecinde, Sharp ve Goodwin kamusal alanda film klipleri bulmakta zorlandılar, bu süreçte bazı engeller vardı. Bu sadece bir telif hakkı sorunu değil; istedikleri film klipleri çok sayıda çekim içermeli ve oyuncular, Benjamin'in herhangi bir şeyi daha kolay kesip yerleştirebilmesi için çekimlere bakmalıdır. Sharp ve Goodwin, kamusal alanda film veritabanları üzerinde derinlemesine araştırma yaptıktan ve avukatlara danıştıktan sonra iki film seçtiler: "Dünyadaki Son Adam" (Dünyadaki Son Adam) ve "Ölmemiş Beyin" (Ölmeyecek Beyin).
Yüz değiştiren teknoloji
Bu filmle ilgili en çarpıcı şey, Yüz değiştiren teknoloji Benjaminin isteklerine uyum sağlamak için mevcut filme güvenmek. Popüler kültürde, yüz değiştirme çok popüler bir konu haline geldi, özellikle de Obama'nın yüzü değiştirilen videonun internette viral hale gelmesinden sonra. Bununla birlikte, bu teknolojinin sınırlamaları, özellikle zaman kısıtlamaları olduğunda, hala açıktır. Zone Out yapım ekibi, Thomas Middleditch, Elisabeth Grey ve Humphrey Ker'in önceden kaydedilmiş videolarını analiz ederken çok uzun hesaplama süresi sorunuyla da karşılaştı. .
Çerçeveyi dondur modunda, yüz değiştirmenin etkisi oldukça iyi görünüyor
Belki böyle
Baş bir tabağa yerleştirilir
Zaman kısıtlamalarının etkisi nihai üründe belirgindir. Sharp ayrıca, bilgi işlem gücünün sınırlamalarının ekibin ürünün güzelliğine ilişkin vizyonunu engellediğini de kabul etti. İkili başlangıçta kendi kaydedilmiş diyaloglarını ve örneklerini kullanarak konuşmayı sentezlemek için Tacotron'un açık kaynaklı bir sürümünü kullanmak istedi; insan oyuncular çok sayıda diyalog okur ve Benjamin uygun olduğunda bu diyalogları otomatik olarak eklerdi. Ancak gerçekler bunun hesaplama açısından çok maliyetli olduğunu ve zaman sınırını aştığını kanıtladı, bu nedenle ikisi hala sentetik konuşmayı kullandı.
Kameranın yalnızca bir yan yüzü olduğunda, yüz değişikliğinin etkisi çok kötüdür
Resimde, Thomas Middleditch'in yüzü diyalogu olmayan bir oyuncuya yapıştırılmıştır.
Aynı sorun yüz değiştirme ve yüz kontrol sisteminde de karşımıza çıkıyor. Sharp şunları söyledi: "Nihayet bu filmin dublajının korkunç olduğunu kabul etmeliyiz." Çünkü yüzleşme ağlarının oluşturulması ve face2face'in açık kaynak sürümü gibi araçlar, belirtilen süre içinde yalnızca aynı "ilk taslak" yüz işleme sonuçlarını alabilir.
Bu üç aktör, yüzü değiştiren içeriğin kaynağıdır
İkisinin ilk planlarından biri sorunsuz gitti: Tamamen robotlar tarafından düzenlenmiş Jukedeck platformuna dayalı bir film müziği kullanmak. Sharp, "Sistem, senaryonun duygusal içeriğini analiz etti," dedi. Sonuç, insanların dikkatini Zone Out'un garip ses sentezinden uzaklaştırmaya yardımcı olan bir piyano müziği parçasıdır.
Sonraki hedef
Otomasyon sürecindeki en büyük başarısızlık, farklı bir AI sistemi, evrişimli bir sinir ağı kullanmaya çalışmaktan kaynaklanmaktadır. Kamuya açık film kliplerinin otomatik seçimi süreci. Sharp, "Komut dosyasında yeterli nesne tanımlayıcısı yok ve yeterince benzersiz nesne yok," dedi, bu da otomatik düzenleme sisteminin yeterli veriden yoksun olduğu anlamına geliyor. Bu noktada Sharp ve Goodwin, "yönetici" olarak yapay zekanın kararına dikkatle uyuyor ve Film sahneleri, çekim uzunluğu ve oyuncu kadrosu düzenlemeleri .
Sharp, "Editör Jono Chanin ve benim yaptığımız çalışmalar, Benjamin'in senaryosunu sıkı sıkıya takip ederken Benjamin'in anlatmaya ve düzenlemeye çalıştığı öykünün bu olduğunu varsayıyor," dedi. . Bu hala bir sonraki hedefimiz. "
Aslında, filmin sonu (ve filmdeki zayıf ses sentezi) tuhaf olsa da, özellikle Benjamin'in senaryosu ve halka açık film klipleri acı içinde bir çiftle düello yaparken, epeyce duygusal çekim içeriyor. Lens aynı olduğunda. Daha yüksek hesaplama verimliliği ve daha hassas veri analizi araçları, bu 48 saatlik film prodüksiyonunu gelecekte gerçeğe dönüştürebilir.
Sharp açıkça denemekten vazgeçmedi. "Bu deneyden sonra Ross, tam otomatik kurgulamada bize yardımcı olabileceğini düşündüğü bazı yeni teknolojiler keşfetti, bu çok heyecan verici."
Topluluğa katıl
Xinzhiyuan AI teknolojisi + endüstri topluluğunun işe alımında, AI teknolojisi + endüstrisiyle ilgilenen öğrenciler küçük bir WeChat asistanı hesabı ekleyebilirler: aiera2015_3 Gruba katılın; incelemeyi geçtikten sonra sizi gruba katılmaya davet edeceğiz. Topluluğa katıldıktan sonra, grup açıklamalarını değiştirmeniz gerekir (isim-şirket-pozisyon; profesyonel grup incelemesi katıdır, lütfen anlayın).
