En güçlü AI telefonu Google, iPhone XS'i neden tek kamerayla öldürdü?
Teknolojiyi ve parametreleri soyun ve tasarımın ve insanlığın kökenini keşfedin.
Çok fazla donanım genine sahip olmayan Google, özellikle fotoğraf çekme konusunda akıllı telefon ürünleri konusunda her zaman başka bir anlayışa sahip olmuştur.
5 Ekim 2016'da Google CEO'su Sundar Pichai (Sundar Pichai) "önce mobil" den "önce yapay zeka" sloganını ortaya attı. Aynı gün tanıtılan ilk nesil Pixel cep telefonu bu konseptin somutlaşmış haliydi.
Yüzeyde, Pixel tarafından kullanılan kamera önceki Nexus 6P'den çok fazla değişmedi.Herkes 12.3 milyon piksel ve 1.55 m tek piksel boyutuna sahip.Tek fark faz odak fonksiyonunun eklenmiş olmasıdır.
Ancak ikisi, DxOMark-Nexus 6P'de tamamen farklı değerlendirmeler aldı, sadece göze çarpmayan bir 73 puana sahipti, ancak Pixel 89 puanla en üst sırada yer aldı.
İkinci nesil Pixel piyasaya sürüldüğünde Google da en önemli satış noktasını fotoğraf çekmeye koymaya başladı.Bu telefonun puanı aynı dönemde Samsung Galaxy Note 8 ve Apple iPhone 8 Plus'ı geride bırakarak 98 puana yükseldi ve DxOMark yine zirveye ulaştı. Yapılan yorum, "akıllı telefon kameralarının kalitesi için yeni bir rekor" oldu.
Medyadan ve kullanıcılardan gelen övgü dolu eleştirilerle birlikte üst üste iki kez listenin en tepesini kazanmak, Google'ın oğlunun cep telefonunu gizemli bir cazibe yaymaya başladı. En şaşırtıcı olanı, iki nesil Pixel telefonun bu sonucu tek bir kamerayla elde etmiş olmasıdır.Google'ın AI algoritması fiziksel donanımı görmezden gelebilecek kadar güçlü mü?
Bugün bile, yeni piyasaya sürülen Pixel 3 telefonlar hala ana akım çift kamera ve hatta üçlü kamera kombinasyonunu kullanmıyor. Bu tür bir "tek kamera" becerisi, Google dışında ikinci bir tane bulmak zor. .
Ama şimdi bakıldığında, bu "kasıtlı" nitelik ve güvene sahip.
Pixel 3 kamera ne kadar akıllı?
Kamuya açık kullanıcıların algısına göre, fotoğraf süreci üç adımdan başka bir şey değildir: 1) ne çekmek istediğinizi görmek; 2) anı kaydetmek için kamerayı açmak ve deklanşöre basmak; 3) hareketsiz bir fotoğraf elde etmek.
Profesyonel fotoğrafçılar farklıdır. Obtüratör ve apertür boyutunu sahnedeki ışık koşullarına göre ayarlamalı, uygun odak uzaklığına sahip bir lens seçmeli ve çekim yaparken kompozisyona ve deklanşöre basma zamanlamasına dikkat etmelidir.Çekimden sonra PS veya LR'yi daha sonraki bir aşama için almaları gerekir. Gözlerinde her türden "gişe rekorları kıran".
Ancak akıllı telefonların popülaritesi her şeyi değiştirdi. İster Pixel ister iPhone veya diğer cep telefonları olsun, cep telefonu üreticileri ISO'yu, maruz kalma süresini ve yalnızca fotoğrafçıların ilk anladığı diğer değerleri küçümsüyor. Bunlar sadece işlemciye ve algoritmaya bırakıldı. Kullanıcılar deklanşöre nasıl basacaklarını bildikleri sürece, bir kartlı kamerayla karşılaştırılabilir bir resim de çekebilirler.
Açıkçası Google, bu "fotoğraflama aptallığının" gerçeğini de anlıyor, ancak daha fazla beceri ağacını aydınlatmak için özel donanım aramak yerine, sorunları çözmek için AI ve çeşitli yığın algoritmalarını kullanmayı tercih ediyor.
Bu fikir çok ilginç, açıkça söylemek gerekirse, makinenin nasıl daha iyi ateş edeceğini öğrenmesine izin vermeyi umuyor.
Geçen yılki Pixel 2 serisine Google, çeşitli yapay zekayı hızlandırmak için Google ve Intel tarafından geliştirilen 8 çekirdekli bir yardımcı işlemci olan "Pixel Visual Core" adlı özel bir görüntü işleme birimi ekledi. Pixel serisinin her zaman amiral gemisi olan HDR + gibi fotoğrafla ilgili görevler.
Ve Pixel 3'te bu Görsel Çekirdek çekirdeği de güncellendi.İşlem hızı geçen yıla göre% 40 daha hızlı, bu da makine öğrenimi yardımıyla çeşitli karmaşık fotoğraf kaynağı verilerini daha hızlı işleyebileceği anlamına geliyor. Ayrıca Pixel 3'ün günlük fotoğrafçılığın bazı acı noktalarını çözmesine olanak tanır.
İlki, iPhone'daki Live Photos'a biraz benzeyen deklanşöre bastığınızda birkaç saniye önce ve sonra görüntüleri otomatik olarak kaydedebilen "En İyi Çekim" adlı fotoğraf seçme özelliğidir, ancak bu sırada AI da "en iyi anı" otomatik olarak ayarlayacaktır. Onu seçmeniz için etiketleyin, böylece yanlışlıkla birinin gözlerini kapattığı bir fotoğrafını çekseniz bile son fotoğraf olarak başka bir resim seçebilirsiniz.
"Gece Görüşü" yalnızca arka taraf için değil, ön taraf için de geçerlidir. Resim, resmi Google örneğidir
Beş parmağın net görülemediği sahneye gelince, Google'ın verdiği çözüm "Gece Görüşü" gece sahne modudur.Bu fonksiyonun özü, HDR + 'nın sürekli örnekleme ve çoklu çerçeve sentezini kullanmaktır. Amaç, fotoğrafın parlaklığını olabildiğince artırmaktır. "Düşük ışıkta çekim yapmama" sorununu çözün.
Bu modelin olağanüstü etkisini vurgulamak için Google ayrıca basın toplantısında yan taraftaki iPhone XS'de bir "askı" gerçekleştirdi.Şu anda Apple'ın ruh halini bilmiyorum.
Ayrıca, esas olarak vizörün yakınlaştırıldığı ve resmin büyütüldüğü durumu ifade eden "Süper Res Zoom" da vardır.Aslında, bazı geleneksel SLR'lerde bulunan "piksel kaydırma modu" yakınlaştırma işlevi için kullanılır.
Engadget Japan, örnek almak için Pixel 3'ü kullanır. Resmin çerçeveli kısmına yakınlaştırırsanız ... Resim: engadget
Bu, Pixel 3'ün büyütülmüş bir örneğidir. Resim: engadget
Özellikle Google, çerçeveleme yaparken biraz titreyecek olan küçük ayrıntıları yakalar.Bu süreçte ışığa duyarlı öğeyi el hareketine göre otomatik olarak hareket ettirecek ve ardından sürekli olarak birkaç fotoğraf çekecek ve ardından bunları algoritmalar yardımıyla sentezleyecektir.
Bu sayede her piksel yeterli RGB bilgisi alabilir ve son olarak süper yüksek çözünürlüklü bir fotoğraf elde edilebilir.
Android Central'a göre, 8 kat büyütülmüş olsa bile Pixel 3'ün yakınlaştırma fotoğrafları, Pixel 2'deki 2 kat yakınlaştırma netliğini yine de koruyabilir. Bu, bağımsız bir telefoto lens olmasa bile Pixel 3'ün optik zoom kadar iyi fotoğraflar çekebileceği anlamına gelir.
Google yalnızca fotoğraf çekme genişliğini değil, aynı zamanda fotoğraf çekme derinliğini de genişletiyor
Seçilebilecek tüm lens kombinasyonlarını gördük ve sadece bir kamera eklemek bizim için iyi değil.Pixel 3 konferansından sonra, Google'ın ürün başkan yardımcısı Brian Rakowski, dedi. Ona göre Pixel telefonlar, sensörler aracılığıyla yeterli bilgiyi elde edebildi ve ardından makine öğrenimi ve diğer yöntemlerle kullanıcıların ihtiyaç duyduğu fotoğrafları da üretebiliyor.
Esasen Google, çözünürlük, aydınlatma, odak ve alan derinliği gibi görüntü bilgilerinde tek bir geçiş yapmaya eşdeğer olan, geleneksel fotoğrafçılık için AI makine öğrenimi gibi gelişmiş algoritmaları tanıtmak için "Hesaplamalı Fotoğrafçılık" kavramını kullanmaya çalışıyor. Tek bir kameranın fiziksel sınırlarını aşmak için yeniden düzenleyin.
Örnek olarak Pixel 2'de HDR + alalım.Yüzeyde sadece vizörü açıp cep telefonunuzla fotoğraf çekerken tıklıyorsunuz ama karanlıkta vizörü açtıktan sonra kamera iş toplamaya başlıyor ve veriler gerçek zamanlı olarak cep telefonunda saklanacak. Önbellekte ve sonunda sentez algoritması tarafından çağrılır.
Ayrıca Google, bulanıklığı, gölgelenmeyi ve gürültüyü mümkün olduğunca ortadan kaldırırken yüksek dinamik aralığı ve ayrıntıları korumak için resmi ayrı bloklara böler.
Yukarıda bahsettiğimiz "En İyi Çekim" gibi "seçimden önce ilk çekim" modeli de var, aslında hesaplamalı fotoğrafçılık düşüncesinden de etkileniyor, hepsi kullanıcıların algılayamayacağı en alt seviyede uygulanıyor.
DPReview geçtiğimiz günlerde Pixelin kamera ürün yöneticisi Isaac Reynolds ve hesaplamalı fotoğraf yönetmeni Marc Levoy ile röportaj yaptı ve sıfır gecikmeli bir deklanşör deneyimi sağlamak için Pixel 2nin güvenli deklanşör değerinin en kötü durumda bile başlangıçta 1/15 saniyeye ayarlandığını belirtti. Karanlık ortamda, HDR + 0,6 saniyede 9 görüntünün sentezini de garanti edebilir; ışık yeterliyse 150 milisaniyeye kısaltılabilir.
Açıkçası, kullanıcılar bu işlem sonrası prosedürleri algılamayacaklar ve bize sunulan sadece nihai ürün fotoğrafı.
Pixel 3'te, "Süper Res Zoom" yakınlaştırma modunda kullanılan kompozit görüntüler 15 kareye kadar yüksek olacak ve "Gece Görüşü" gece sahne modu sıfır gecikmeli deklanşörden ödün veriyor.
Bazı ev tipi cep telefonlarının süper gece sahnesi ile aynıdır. Deklanşöre basarken gövdeyi sabit tutmanız gerekir. Şu anda kamera en fazla 15 fotoğraf çekecek ve bunları sentezleyecektir.Her fotoğraf için minimum deklanşör hızı 1/3 saniyedir. Bu sayede 5 saniyeye yakın pozlama efektine sahip bir fotoğraf elde edilir ve el titremesinden dolayı bulanıklaşan fotoğraflar da otomatik olarak reddedilir.
Sadece bu değil, karanlık ortamdaki kötü ışık kaynağı dikkate alındığında, "Night Sight" ile çekilen fotoğraflar da otomatik beyaz dengesini sağlamak için makine öğrenimini kullanacak.
Söylemem gereken bir diğer şey ise Google Pixel 2 döneminden beri oldukça beğenilen portre modu ... Bu telefon çift kamera ile donatılmasa da yine aynı dönemde çift kameralı amiral gemilerinden aşağı olmayan bulanık fotoğraflar çekebiliyor.
Aslında, basit derinlik bilgileri elde etmek için sol ve sağ görsel görüntüleri yakalamak için sensörün PDAF çift piksel özelliğini kullanır ve ardından görüntü konturunu doğru bir şekilde bulmak için görüntü bölümleme teknolojisine güvenir.
Google bu süreçte bir sinir ağı modeli eğitmek için çok çaba sarf etti.Fotoğrafın hangi bölümlerinin karakterlere, hangi bölümlerinin arka plana ait olduğunu derinlik bilgisine göre ayırt edecek. Sonuçta algoritma sadece ön plan ile arka planı ayırt ederek yapabilecektir. Doğru alan bulanıklaştırılır ve son olarak sığ alan derinliğine sahip bir fotoğraf sentezlenebilir.
Yukarıdaki resim, makine öğrenimi dahil edildikten sonraki derinlik bilgisi haritasıdır ve aşağıdaki resim, tamamen ikili piksel ve stereo algoritmasına dayanan derinlik bilgisi haritasıdır.Arka plan sandalyesinde bariz farklılıklar vardır. Resim: DPReview
Pixel 3'te Google, derinlik haritalama algoritmasında yeni ayarlamalar yaptı ve makine öğrenimi yöntemleri ekledi. Karşılaştırma tablosundan, eğer tamamen çift piksel ve stereo algoritmalarına dayanıyorsa, ön plan ve gözlükler ve ızgaralı korkuluklar gibi arka planı bulanık sahnelerle karşılaşıldığında, derinlik haritası tanımanın muhtemelen yanlış olacağı görülebilir.
Ancak makine öğreniminin katılımından sonra, fotoğrafın tüm bulanıklık efekti ve kapsamı öncekinden tamamen farklıdır.
AI fotoğraf çekerken, Pixel telefonlar iPhone'lar kadar popüler hale gelebilir mi?
Google, arama ve araç işiyle başladı ve aslında bir donanım şirketi değil. Pixel telefonlar için bile tüm odak noktası hizmetler ve AI üzerinedir.
Yani önceki Pixel konferanslarında en popüler olanı hala Google'ın yazılım hizmetleridir. Konuşmacı, yapılandırmaya çok fazla giriş yapmayacak ve aralarında çeşitli AI kamera figürlerinin bulunduğu "yalnızca Pixel telefonların kullanabileceği işlevler ve hizmetler" i vurgulayacaktır.
Bununla birlikte, Apple, Amazon ve diğer dev şirketlerin adım adım daha fazla baskı yapması karşısında, Google'ın donanım yapması gerekiyor. Tıpkı Google'ın donanım başkanı Rick Osterloh'un dediği gibi, Google'ın akıllı asistanının insanlarda görünmesi için daha fazla yol bulması gerekiyor. önce. Böylece yalnızca Pixel telefonları değil aynı zamanda çeşitli hoparlörleri, kulaklıkları ve tabletleri de görebilirsiniz.
Bu genel bir oyun değil.Birçok insanın gözünde akıllı telefonlar bir donanım işi. Tüketicilerin her yıl telefon değiştirmelerinin itici gücü daha iyi bir görünüm, daha güçlü bir işlemci ve daha fazla kameradan geliyor. Ürün Hengping yalnızca donanım parametrelerinin bir karşılaştırmasıdır ve miktarı belirlenemeyen yazılımlar yalnızca elden çıkarılabilir.
Sonuçta, herkes temel olarak Android'i alt katman olarak kullanıyor, aynı apk uygulamasını kullanıyor ve yalnızca donanım büyük bir fark yaratabilir.
Ancak Pixel telefon hala diğer Android'lerden farklıdır. Bu Google'ın kişisel katılımıdır. Yalnızca Android sistemini istediğiniz şeye dönüştürebilir, aksi takdirde çok fazla temel kamera algoritması ve ek olarak görmezsiniz. Özel çipler.
Google'ın yapay zeka onayıyla Pixel telefonlar hakkında bilmediğimiz kaç tane ışık ve gölge oyunu tahmin edemez.
Ancak AI her şeye kadir değildir. Pixel 3 hala yalnızca donanımla elde edilebilen özelliklere sahiptir. Örneğin, yeni eklenen 8 milyon ön geniş açılı lens, özellikle çok kişili grup fotoğrafları ve büyük ölçekli özçekimler çekmek için kullanılır; bunların hiçbiri standart lenslerle elde edilemez.
Bir de Visual Core çekirdeği var.Yardım olmadan Pixel 3'ün yapay zeka fotoğrafçılığından bahsetmenin bir yolu yok.
Son analizde, cep telefonlarındaki yapay zeka, sürmek için hala yeterli bilgi işlem gücüne güvenmek zorundadır. Temel olarak mükemmel bir donanım olmadan, yazılım deneyiminin kesinlikle indirgenmesi gerekir.
Bununla birlikte, Google açıkça mobil fotoğrafçılığa başka bir gelişme yönü getiriyor ve bu da zaten güçlü fiziksel donanıma sahip meslektaşlarına daha fazla aydınlanma sağlıyor. Elbette tüketicilerin cep telefonu fotoğrafçılığına yönelik beklentilerini artıracak.
Başlık resminin kaynağı: Nagisa Ichikawa
