"Digital Virtual Human" gerçek insanlarla karşılaştırılabilir, "The Force Animation" ilk halka açık hardcore teknolojisi
Mart ayında dünya çapında yayınlanan "Alita: Savaş Meleği", halkın film ve televizyon özel efektleri tartışmalarını yeniden alevlendirdi. Çin'de 36 kripton, Çin'de Force Animation adlı "süper gerçekçi karakter animasyonu" için bir güç buldu.
Film ve televizyon teknolojisinin vaftiz babası James Cameron tarafından üretilen "Alita" nın aksine, "Alita", hareket yakalama, yüz ifadesi yakalama ve CG gibi teknolojileri kullanıyor. Yüz ifadeleri gerçek bir insan aktöre dayanıyor.Gücün sürekli geliştirme sistemi, insan oyuncuyu atlamak ve bilgisayarın doğrudan insanlara sonsuz bir yaklaşım oluşturmasına izin vermek. , Gerçek ve sahteyi ayırt etmesi zor sanal aktörler.
The Force Animation'dan dijital sanal insan görüntüsü
- "Film ve televizyon prodüksiyon şirketi de Xiaoxianrou'yu zorlamak istiyor?" Zhao Rui tarafından gönderilen küçük videoyu görünce şaşırdım.
- "Bu yarattığımız sanal kişi. Gerçek dünya yok." Zhao Rui yanıtladı.
Yakından bakarsanız şok olursunuz. İnce ifadeler, büyük hareketler, cilt dokusu ve hatta gözlerden oluşan görüntüdeki karakterler oldukça hassas ve canlıdır. Görüntüdeki karakterleri "yanlış ve doğru" olarak tanımlamak abartı olmaz.
Force Animation'ın Nanjing genel merkezinde 36 krypton, Force Animation'ın kurucusu ve CEO'su Zhao Rui ile röportaj yaptı ve tam bir yanıt aldı. Avatar resmi bilgisayar animasyonuyla oluşturuldu Yaklaşık 3 yıllık Ar-Ge yinelemesinin ardından, The Force, eksiksiz bir sanal insan üretim sürecine sahiptir.Ar-Ge'nin başlangıcındaki "yüksek maliyetli tüm işleme modu" ile karşılaştırıldığında, zaten "Düşük maliyetli gerçek zamanlı animasyon" modunu gerçekleştirdi . Bu araştırma ve geliştirme başarısının ticari kapsamının film ve televizyon çevrelerinde kırılacağı ve art arda finansal hizmetler, eğitim ve tıbbi bakım alanlarına gireceği bildirildi.
1. Hardcore teknolojisi, sanal dünyayı gerçekliğe sonsuz derecede yaklaştırır
İncil'in Eski Ahitinin başlangıcında, Tanrı insanlığı kendi suretinde yarattı ve ona aura aşıladı, böylece insanlık yürüyebilir, oturabilir, yalan söyleyebilir ve düşüncelere sahip olabilir. Bu iki adımı karşılaştırdığımızda, Kuvvet sanal insanları geliştirirken de benzer "operasyonlara" sahiptir.
The Force, en son yüz kas sistemi, tüm vücut kas sistemi, performans yakalama sistemi ve yüz animasyonu otomatik tanıma sistemi dahil olmak üzere insan mekaniği ve biyolojik güçlere uygun eksiksiz bir simülasyon sistemleri seti oluşturdu. Zhao Rui 36 kripton'a şunları söyledi: "Sanal bir karakterin süper gerçekçi dijital görüntüsünü oluşturmak birkaç sistemle asla bağımsız olarak yapılamaz. Çekirdek, farklı teknolojileri seri olarak birbirine bağlamak için eksiksiz bir üretim süreci kullanmaktır.Örneğin, kas sistemi yalnızca alt katmandır ve üst katman, kasları doğru şekilde çalıştırmak için veriye ihtiyaç duyar. Tüm teknolojinin anahtarı, her sistemin verilerini bağlamak ve koordine etmektir. "
Zhao Rui, Force'un insan yüz hareketlerini tamamen simüle etmek için makine öğrenimi algoritmalarını kullanan otomatik bir animasyon sistemi geliştirdiğini ortaya koydu. Gelecekte sanal insanların yüz ifadelerinin daha "doğal", "zeki" ve hatta "otonom" olacağı düşünülebilir.
The Force Animation'dan kas sistemi görüntüsü
Önce "kas" sisteminden bahsedelim.
İnsan vücudunun hareketi kemiklerin, fasya ve kasların hareketinin etkisidir.Birçok 3 boyutlu görüntü serttir çünkü kemikleri sadece kalın çizgiler halinde hareket ettirirler. Bunu anlamak zor değildir ve insan "felç" e benzer - motor sinirlerin eksikliği, kemikler ve kaslar komut vermek için harekete geçirilemez.
Hareket komutlarının derinin her santimetresine doğrudan ulaşmasını ve harekete geçirmesini nasıl sağlayabilirim? Birincisi, insan anatomisi tarafından yönlendirilen bir dizi vücut sistemi olmalıdır.
Karakterin gerçek kas etkisini elde etmek için, Force Ar-Ge Ekibi 147 kas, insan vücudunun gerçek kas tepkisine karşılık gelecek şekilde inşa edildi ve ardından son cilt etkisini elde etmek için sırayla birden fazla adım çözüldü.
İlke düzeyinde, egzersiz sürecinin gerçekleştirilmesini beş aşamaya ayırırlar: iskelet animasyonu, kas hesaplama, fasya hesaplama, yağ hesaplama ve cilt hesaplama (ve cilt ve ifade kombinasyonu), zincirleme reaksiyon yoluyla "eski haline getirme" Gerçek kasların sıkma, gerilme, kayma ve sallama etkileri.
Şu anda Çin'de birkaç ekibin kas sistemini karakterlere, özellikle de yüz animasyonlarına uyguladığı anlaşılıyor.
İkincisi, "3B gerçek zamanlı ifade eğitim sistemi" dir.
Sanal kişinin ifadesi nasıl daha hassas ve gerçek hale getirilir? Bu nedenle The Force, kullanışlı ve verimli bir yapay zeka CG ifade sistemi olarak anlaşılabilecek kendi yüz ifadesi sürecinin geliştirilmesine büyük yatırım yaptı.
Etkili bir şekilde ifade eylemleri üretmek için "dinamik hesaplama ile oluşturulan kas verilerini" ve insan 3D görüntü mühendislerinin "elle kazınmış verileri" veya "tarama verilerini" "ifade denetleyicisine" dönüştürebilir. Örneğin--
Geçmişte, dijital bir görüntü tarafından yapılan her ifade eylemi, animasyon, ciltleme ve özel efekt mühendislerinin işbirliğini gerektirir. Bunlar arasında, harman şekli iş yükü en büyüktür. Tutarlı bir ifadeyi, genellikle tek bir eylem çerçevesine bölmeleri gerekir. Göz kırpmak ve gülümsemek yüzlerce kare çalışma gerektirir ve bir kişinin tamamlaması yaklaşık yüzlerce saat sürer.
Force'un kas tabanlı "yüz yüz sistemi" veri sonuçlarını tersine çevirir ve sinir ağı hesaplama yöntemiyle kontrolöre geri hesaplar.MAYA DAG'ı tasarlamak ve her bir hedef gövdeye bağlamak için bağlayıcı bölüme gerek yoktur. Gereksiz seviyelerin ve düğümlerin azaltılması Geçmişte, Hero karakteri 1.000'den fazla tasarım düğümüne ihtiyaç duyuyordu, ancak şimdi sadece yaklaşık 300'e ihtiyaç duyuyor ve esneklik ve akıcılığın yanı sıra genel hesaplama hızı ve üretim verimliliği iki katına çıktı. Ve mevcut yüz kası efektleri, gerçek zamanlı görüntüleri gerçek olmayan motora aktarabilir.
The Force Animation'dan dijital sanal insan görüntüsü
2. Teknolojik atılımlar, film ve televizyon endüstrisinin verimlilik artışını teşvik eder
Sanal kişinin videosunda görebildiğimiz seviye, sanal bir kişinin insanları şaşırtan süper gerçekçi bir performansı; göremediğimiz seviye, insan vücudunun çeşitli sistemlerini simüle eden bilgisayarın birleşik çalışmasıdır.
Zhao Rui 36 kripton dedi, " Önceki teknoloji ile sanal bir insan yaratmak yarım yıldan fazla sürüyor. The Force tarafından bağımsız olarak geliştirilen yeni teknolojiyi uyguladıktan sonra ilk karakter üretimi yaklaşık bir aya kadar kısaltılabiliyor. "
Kolaylıkla konuşursak, aslında, sanal insanlar pürüzsüz ve doğal etkiler gösterebilir.Güç, 50'den fazla kişiden oluşan bilimsel araştırma ekibinin 5 yıllık portre üretim deneyimine, binlerce terabayt veri birikimine ve on binlerce saatlik bilgisayar bilgi işlem eğitimine adanmıştır. Ve her yıl yazılım ve donanım araştırma ve geliştirme yatırımlarında 10 milyon yuan'dan fazla.
Ayrıca The Force'un kuruluşundan bu yana sistematik olarak portre verilerini biriktirdiği anlaşılmaktadır. Bu aynı zamanda Gücün engellerinden biridir.
Geçmiş projelerde, Makine öğreniminin bir örneği olarak binlerce saatlik veri birikimi, Force'un sanal insan teknolojisi araştırma ve geliştirmesinin desteğidir. Zhao Rui, "Force dışında piyasada bu kadar büyük ve eksiksiz bir 3D portre veri kaynağı bulmak zor olabilir" dedi.
Zhao Rui 36 kripton'a şunları söyledi: "Şirketin şu anda yaptığı konu "Sanal İnsanların Derinlemesine Öğrenilmesi" Ayrıca, veri setini, yani öğrenme materyalini bilgisayara sağlamanız gerekir. Geçmişte, sanal karakterlerin yüz ifadeleri ve görünümleri, 3 boyutlu sanatçıların orijinal resimler ve 3 boyutlu modeller yapmasını gerektiriyordu. Verilerimize dayanarak, yakında makineye teslim edilecek ve makinenin insan düşünme sürecini, yaratıcı yolu simüle etmesine ve belirlenmiş görüntüler, ifadeler ve eylemler üretmesine izin verecek. "
"Elbette, bilgisayarlar her zaman insanlara yardımcı olacak ve sanatçılar yine de bu süreçte temel itici güç olacak, ancak gelecekte sanatçılar, daha yaratıcı çalışmalar yapmak için zamanlarını ve enerjilerini serbest bırakacaklar."
Force şimdi yeni nesil yapay zeka ve makine öğrenimi çözümleri geliştirmeye başladı.Bilgisayarın, talimatların özelliklerine bağlı olarak birkaç saniye içinde yüzlerce sanal insan yapay zeka sistemi oluşturabileceği ve üretim sonrası içeriğin gerçek zamanlı olarak oluşturulabileceği umuluyor.
Gelecekte, bilgisayarlar tarafından otomatik olarak portre oluşturma sürecinde, karakter özelliklerine, karakter ayarlarına, AI işlem teknolojisine (aydınlatma, render vb.) Uygun bir kompozit sistem yüklenecek, sanal kişinin gerçekçiliği, resmin incelik ve içerik üretimi Zeka derecesi ikiye katlanacak. Makineler büyük ölçekte farklı görüntülere ve kişilik ayarlarına sahip sanal insanlar üretebildiklerinde, ticari olanaklar daha ilginç hale gelecektir.
3. Dijital sanal insanların ticari uygulama senaryoları
Zhao Rui, 36Kr'a, sanal insanların ticari kullanımıyla ilgili olarak, halk önce film ve oyun endüstrisindeki sanal idolleri, sanal aktörleri ve diğer uygulamaları düşünecek olsa da, Ancak Kuvvet, "Gölge Turu Boyut Duvarı" nı aşmayı planlıyor. Diyalogda finansal hizmetler, eğitim ve tıbbi bakımın iniş sahnelerinden defalarca bahsetti.
Finans ortamını örnek olarak ele alırsak, büyük bir banka, 3D sanal akıllı müşteri hizmeti sağlamak için Force'un teknolojisini kullanıyor. Finansal hizmetlerin özelliğinden dolayı, müşteri hizmetlerinde güven, güvenlik ve güvenilirlik gereksinimleri nispeten yüksektir ve sanal müşteri hizmetleri için gereksinimler de nispeten yüksektir. Videoların ve 2D çizgi film videolarının manuel olarak çekilmesi ve kaydedilmesi ile karşılaştırıldığında, "AI sanal insanlar" işbirliği Hizmeti tamamlamak için "AI ses tanıma", sektörde yeni bir değişikliktir.
Ayrıca, "Kontrol Dışı" kitabının yazarı Kevin Kelly'nin geleceğe bakarken bahsettiği "ayna dünya" bakış açısını da düşünüyoruz ve bizim bakış açımız genişleyecektir. "Ayna Dünyası" ilk olarak Yale Üniversitesi bilgisayar bilimcisi David Gelernter tarafından önerildi ve yazar Jorge Luis Borges da düşündü.
Yakın gelecekte, gerçek dünyadaki her yer ve her şey - her sokak, her lamba direği, her bina ve her oda - aynalı dünyada tam boyutlu "dijital ikiz" e sahip olacak .
Ayna dünyası sadece nesnelerin görünümünü değil, aynı zamanda sahnesini, anlamını ve işlevini de yansıtır.
Bu sözlere inanırsanız, Güç'ün sanal insan teknolojisi daha yaratıcı hale gelir.
Her birimizin sanal dünyanın bir dizi baskısına ihtiyacı var ve sanal dünyada kendimize ve arkadaşlarımıza ihtiyacımız var, bu da her dijital platformun VR ve AR içeriğine ihtiyacı olduğu anlamına geliyor. The Force tarafından geliştirilen sanal insan teknolojisi yukarıdaki iki gereksinimi karşılayabilir. Büyük kampın bireysel ve çeşitli dijital portre içeriği talebi var.
Bu bağlamda Zhao Rui, 5G'nin tanıtımı ile yüksek bant genişliğinin içerik için daha fazla talep edeceğini belirtti. Sanal dijital görüntülerin gelecekte en umut verici "yeni nesil insan-bilgisayar etkileşimi arayüzleri" olabileceğine inanıyor.
Elbette bunun da ötesinde, yeni dünyanın inşası Google, Microsoft, HTC ve IMAX gibi platform düzeyindeki şirketlerin bilimsel araştırmalarından ayrılamaz. Teknolojik atılımlarına dayanarak, insanlığın "gelecek" için belirlediği zaman düğümü hızlanabilir.
Son olarak, herkesin uzun vadeli düşük anahtar şirketi "The Force Animation" ı hızlı bir şekilde anlamasını kolaylaştırmak için kısa bir giriş:
Original Force, 1999 yılında kurulmuştur. Esas olarak yüksek teknoloji ürünü dijital eğlence içeriğinin oluşturulmasıyla ilgilenmektedir ve portre dijital içeriğinin araştırma ve geliştirilmesinde uzmanlaşmıştır. Aynı zamanda en büyük yerli 3D bilgisayar animasyon şirketi ve bilim ve teknoloji alanında en çok yatırım yapan yerli bilinen animasyon şirketlerinden biridir. Force, 2016 yılında Tencent'ten 100 milyon yuan'den fazla finansman aldı ve şirketin mevcut yıllık geliri yaklaşık 400 milyon yuan.
Orijinal başyapıtları arasında "Mamma Mimi Duck" yer alır ve film ve oyun çalışmaları arasında "The Legend", "Ejderhanı Nasıl Eğitirsin", "GTA", "God of War", "Uncharted Seas" ve daha birçok eser yer alır.
The Force'un merkezi Nanjing'dedir. Şimdiye kadar Çin, Amerika Birleşik Devletleri, Tayland ve diğer ülkelerde şubeleri bulunmaktadır. Faaliyetleri, filmle ilgili IP geliştirme, proje yatırımı, içerik oluşturma, teknoloji araştırma ve geliştirme, türev lisanslama ve yetenek eğitimini kapsamaktadır. Dünya çapında yaklaşık 1.0003D animasyon sanatçısı ve mühendisi dahil olmak üzere 1.500 çalışanı vardır. SIGGRAPH (Grafik ve Etkileşimli Teknoloji Derneği) komitesinin üyesi olan Kurucu ve CEO Zhao Rui, teknoloji araştırma ve geliştirme, stratejik planlama ekibine liderlik ediyor ve Sony ve DreamWorks gibi önde gelen uluslararası film şirketleriyle uzun vadeli bir işbirliğine sahip.
Not: Ben 36 Mo Xiaoli ve eğlence ve tüketici alanlarındaki yeni şeyler konusunda endişeliyim. İletişim için WeChat Spontane-Literary ekleyebilirsiniz. Lütfen adınızı, şirketinizi ve pozisyonunuzu not edin.
