Xigu Video, 6DoF videoları çekebilen bir optik akış kamerası başlattı. CTO ile sohbet ettik
Son zamanlarda, ışık alan kameraları alanı sık sık hareket ediyor Google birkaç gün önce birden fazla ışık alanı videosu yayınladıktan sonra, yerli bir şirket de 6DoF'yi destekleyen optik akış kameralarını ve ışık alanı videolarını çıkardı.
Bu şirket, Mayıs 2017'de kurulmuş olan Hangzhou Xigu Video Technology Co., Ltd.'dir (FXG-Video). Derin sürükleyici içerik ve teknoloji Ar-Ge ve üretimi yapmaktadır.Yazılım ve donanım teknolojileri ve çözümleri vardır, içerik post prodüksiyonuna ürün çekimi sağlar ve Entegre süreç hizmetini oynatın. Şu anda 3D VR ve 2D VR kamera ürünlerine sahiptir.
6DoF'u destekleyen 3DVR kameralarını anlamak için Leifeng.com, CTO'su Li Wensong ile kasıtlı olarak derinlemesine bir röportaj gerçekleştirdi.
Yukarıdaki resimdeki cihaz, "Optik Akış VR Kamera" olarak adlandırılan ürününün ET-23DVR kamerasıdır. Raporlara göre, bu kameranın işlevleri şunlardır:
Ultra yakın mesafeden (30CM) çekim ve mükemmel dikiş desteği
360 derecelik video derinliği bilgilerini yakalama ve altı derecelik özgürlük (6DoF) izleme özelliği sağlama özelliği
· Sekiz mercek aralıklı kamera dizisi, monoküler 240 derece megapiksel mercek
· Yeniden oynatma, konum değiştirme, alan derinliği, mermi zamanı ve diğer özel efektler sırasında gerçekleştirilebilen optik akış teknolojisi
· 16K 3DVR film kalitesi
· Tamamen elektronik senkronizasyon, tek tuşlu anahtar makinesi, tek tuşla çekim
· Gerçek zamanlı izleme (VIVE / CV1) ve canlı yayın
· uzaktan kumanda
Bu kamera, lens üstte ve ana bilgisayar altta olacak şekilde silindirik bir tiptir.
Yerinde koşullar nedeniyle, Leifeng.com'un editörleri Xigunun 6DoF videosunu doğrudan deneyimlemedi. Kullanıcı, başlıkta kaydedilen videodan kamera ile çekilen video içinde hareket edebilir. Bu hareketin menzili 7-10 cm'dir.
(West Gu 6Dof video deneyimi Demosu)
6DoF videoyu deneyimlemememe rağmen, Leifeng.com Xigu HD 3DVR videosunu düzenledi ve deneyimledi. Düzinelerce 3DVR videosunda Leifeng.com bunların çoğunu deneyimledi: uzak doğum günü partisi, dansçılar, China Joy sahnesi vb. Deneyim açısından bakıldığında, bu videolar çok net, doygun renkler, iyi 3D efektler ve iyi daldırma ile. Xigu'nun çözünürlüğü iyileştirmek için kendi oynatıcı ve sekiz yüzlü projeksiyon formatını benimsediği söyleniyor.
Ultra yakın çekim, güvenlik mesafesini kısaltın
Etkileyici olan şey, bu videolarda, deneyimleyen ile içerik arasındaki mesafenin, içerik bozulması ve dikiş hataları olmadan çok yakın olabilmesidir ki bu, vurguladıkları süper yakın çekim efekti (30CM). Uzak doğum günü partisinin videosunda, Lei Feng.com editörleri bu çekim mesafesinin faydalarını deneyimlediler.
Kulaklığı taktıktan sonra Amerika Birleşik Devletleri'nde bir konutta göründüm ve etrafa baktım.Yemek ve konuşan insanlar vardı Bu belli ki küçük bir özel parti sahnesiydi. Sonra bir adam bir kokteylle yanıma geldi ve mutlu yıllar bana dedi ve ardından yanındakiler yanıma gelip onları tek tek bana tanıttı ve bu insanlar da bana doğum günü dileklerinden bahsetti. . Bunun zihnimde sanal bir sahne olduğunu biliyorum ama sahnenin atmosferini gerçekten hissedebiliyorum. Başımı eğdim, masanın üzerindeki şeyleri görebiliyordum, herkes yanımda duruyordu. Bu insanlar en yakın olduklarında benden sadece bir adım uzakta görünüyorlar ki bu yakın arkadaşlar ve arkadaşlar arasındaki en kısa mesafe, sadece onlarca santimetre hatta on santimetre.
Ultra yakın güvenlik mesafesi Xigu ET-23DVR kameranın önemli bir özelliğidir.Teknik farkındalık açısından bunun değeri nedir?
Panoramik kameraların yakalamak için birden fazla lens (2'den büyük veya eşit) kullandığını ve ardından yakalanan görüntüleri algoritmalar aracılığıyla diktiğini hepimiz biliyoruz. Kamera lensleri arasındaki optik düğümler üst üste binmez. Bu mesafeye kameranın "düğüm mesafesi" denir. Mesafe ne kadar büyükse, yakalanan görüntüde bozulma ve birleştirme hataları üretme olasılığı o kadar artar: "gölgelenme" ve yakın nesneler uzakta görünecektir. Resim eksik olacak.
2D panoramik kameraların düğüm probleminin çözümü, Ricohun binoküler reentrant prizma patenti gibi, lens yapısını olabildiğince kompakt hale getirmek için nispeten basittir. Li Wensong ayrıca, 2D kamera mesafesi sorununu çözmek için birkaç yıl önce taramalı arka arkaya bir lens geliştirdi.
Sekiz mercek aralıklı kamera dizisi, optik akış enterpolasyon algoritması
Ancak, 3DVR ve 6DoF kameraların düğüm sorunu 2D'den çok daha karmaşıktır Şu anda, piyasadaki panoramik kameralar ve optik kameraların tümü farklı kamera dizileri kullanıyor. Lytro Immerge gibi bir duvar gibi büyük kamera dizisi çözümleri ve Google'ınki gibi dönen bir platformda 16 kamera dizisi var. Farklı kamera dizileri tamamen farklı çekim efektleri üretecektir.
(Lytro Immerge)
Li Wensong, Xigunun sekiz lensli aralıklı kamera dizisini anlamak için, kişinin şu dediği bir kavramı anlamak gerektiğini söyledi: Bakış açısı oranı . Yani, kameranın stereo paralaks mesafesinin lens düğüm mesafesine oranı. Panoramik kamera insan gözünün görüntüsünü simüle ettiği için birden fazla kamera modunu benimseyecektir.İki kamera arasındaki mesafeye görsel nokta farkı denir. İnsan gözünün göz bebekleri arası mesafesi vardır ve nokta farkı için en iyi mesafe 6-8 cm'dir, bu çok küçük veya çok büyük olamaz. Genel olarak, kameranın paralaksı insan gözü göz bebeği mesafesine yakın olmalı ve lens düğüm mesafesi mümkün olduğunca küçük olmalıdır.
(Xigu ET-23DVR kamera)
"Bakış açısı oranında" birkaç nesil 3D VR kameranın geliştirilmesinden bahsetti. "İlk nesil 3DVR kameralar, çiftler halinde binoküler paralaks üreten birden fazla sol ve sağ lens seti koydu ve ardından sol ve sağ lensleri birbirine dikti. Bu sırada kamera Düğümler arasındaki mesafe çok büyüktür ve paralakstan daha büyük olmalıdır, bu nedenle görüntü alanı oranı 1'den azdır. İkinci nesil 3B panoramik kameranın bir lensi aynı anda sol ve sağ göz olarak kullanılabilir ve ardından farklı kameraların sol ve sağ göz bölgeleri birbirine eklenir, ardından bakış açısı eklenir Google JUMP, FB'nin Surround 360'ı gibi düğüm ile aynı boyuttadır. Li Wensong, Xigu'nun optik akışlı VR kamerası tarafından kullanılan yöntemi üçüncü nesil olarak adlandırır. Aralıklı lens birleştirme yöntemi kullanır ve 1 aralığını seçebilirsiniz. 3 kamera tarafından çekilen görüntüler birbirine dikilmiştir, böylece kameralar arasındaki perde çok dar olabilir ve paralaks mesafesi çok daha büyük hale gelir. Görüş alanı oranı 1'den çok daha fazladır ve şu anda yalnızca Samsung'un Beyond kamerası yaklaşık 1'den büyük bir görüş alanına sahiptir. 1.2 ve bu ET-2 kameranın görüş alanı 2.4'tür. "
Li Wensong, sekiz kamera dizisini ve aralıklı birleştirme yöntemini kullandıktan sonra, her biri 8K çözünürlükte 4-5 tam panoramik görüntüyü birleştirebileceğini, diğer 3DVR kameraların ise yalnızca 2 tam görüntüyü birleştirebileceğini açıkladı. Panoramik resim, optik akış kamerasının daha fazla bilgi elde ettiği anlamına gelir. Bu aralıklı birleştirme algoritmasını açıklamak için Li Wensong, Leifeng.com'a bir grafik cihazı gösterdi.Kamera sayısını ve lens gücünü girdikten sonra, kaç tane panoramik görüntünün elde edilebileceğini hesaplayabilir.
Ayrıca çekim sürecinde optik akış algoritması kullanıldı. Li Wensong, yukarıdaki 4-5 tam fiziksel panoramik görünüme dayalı olarak, kamera çekimlerinin ardından, alandaki tüm ışığı geri yüklemek için yüzlerce lens açısını (hesaplama hızına bağlı olarak) sanal olarak enterpolasyon yapmak için yazılım kullanabileceğinizi açıkladı. . Daha sonra, sıradan binoküler stereo algoritmalardan daha eksiksiz ve doğru çok katmanlı 6DoF derinlik bilgisi elde etmek için özel MVS ve Parallex interpolasyon algoritmaları kullandılar. Bu şekilde gerçekleştirilen 6DoF video, geleneksel optik akış kamerasının (6DoF hareket, yeniden odaklanma, özel diyafram) tüm işlevlerini tamamlayabilir, ancak depolama formatı Lytro ve Google gibi fiziksel çok lensli matris tabanlı veri formatından çok daha küçüktür ve yalnızca normalden daha iyidir 3DVR video, veri bant genişliğini 2 kattan daha az artırır. Xigu Video şimdi bu 6DoF video veri formatına dayalı olarak özel bir 6DoF video oynatıcı geliştirdi ve yakın gelecekte 6DoF VR video canlı yayınını gerçekleştirebilecek.
(Xigu VR8 video formatının tanıtımı)
6DoF Videonun Fırsatları ve Zorlukları
Panoramik video, 2015 yılından bu yana, VR için sürükleyici içerik sağlayabilen film ve televizyon teknolojisinin gelişiminde önemli bir trend olmuştur. Panorama videonun geliştirilmesi üç aşamadan geçmiştir: 2D panorama, 3D VR panorama ve 6DoF panorama. Xigu Video şu anda son iki aşamaya odaklanmaktadır.
Li Wensong, 2017'de, HTC Vive Focus, Pico Neo all-in-one'lar vb. Dahil olmak üzere bir dizi 6DoF özellikli VR all-in-one'ın piyasaya sürüldüğünü ve 2018'de satışa sunulacağını söyledi. Şu anda 6DoF video içeriği çok eksik. Bilgisayar CG yöntemi nispeten pahalıdır ve video çekim yöntemi 6DoF içerik üretimini daha hızlı ve daha ucuz hale getirebilir. 6DoF video teknolojisinin mevcut durumu genellikle iki tür çözüm içerir: içeriden dışarıya (Lytro, Google ve FB) ve dışarıdan içeriye (Intelin çözümü). Xigu çözümü öncekine, yani içeriden dışarıya aittir. Bu 6DoF teknolojisi çözümü dağıtılmıştır. Çekmek kolaydır ve gelecekte genel tüketici üretim içeriği (UGC) modu üretebilirken, dışarıdan içe teknolojiye sahip 6DoF teknolojisi yalnızca profesyonel bir ekip (PGC) tarafından üretilebilen özel bir stüdyo oluşturmalıdır, ancak hareket özgürlüğü ve doğruluğu özellikle daha iyidir İnsan karakterlerini çekmek için uygundur.
Elbette 6Dof video daha yeni başladı ve gelecekte hala birçok zorluk var. Örneğin, 6Dof videonun taşınabilir aralığı daha da genişletilmelidir.Şu anda, Google ve Xigu gibi içeriden dışarıya çekim yöntemleriyle üretilen 6Dof videonun hareketli aralığı sınırlıdır. Hareketli menzil yeterince genişse, videodaki hareket yalnızca daldırma hissini geliştirmekle kalmaz, aynı zamanda gerçek çekim sahnesindeki etkileşimi tasarlar ve sanal ve gerçek bir oyuna dönüşür.
