Dharma Enstitüsü neden ISP görüntü işlemcisini kendi geliştirdi?
Lieyun.com Beijing 8 Nisan'da bildirildi
Alibaba Dharma Enstitüsü, 8 Nisan'da kendi geliştirdiği ISP görüntü işlemcisinin lansmanını duyurdu ve geceler gibi zorlu ortamlarda görüntü tanımanın doğruluğu, sektördeki ana akım ürünlere kıyasla% 10'dan fazla artırıldı. ISP işlemcisi, kameranın önemli bir bileşenidir Ali Dharma Akademi'nin bu alana girmesinin mantığı nedir?
ISP nedir?
ISP, Görüntü Sinyal İşlemcisinin kısaltmasıdır ve akıllı telefonlarımızın her birinde yaygın olarak kullanılmaktadır. Herkes artık kameralı çok sayıda gömülü cihaz olduğunu biliyor, akıllı telefonlarımıza kadar, çok sayıda tüketici düzeyinde ekran ve tabii ki geliştirilmekte olan akıllı sürüş sistemi ve çeşitli kamusal alanlarda izleme ekipmanı. Alçak Dünya yörüngesinde çalışan birçok mikro uydu olduğu kadarıyla, görüntü sinyallerinin elde edilmesi ve işlenmesinin son derece yaygın bir talep olduğu söylenebilir. Görüntü sinyali işlemcisi, kamera tarafından yakalanan görüntüleri farklı derecelerde analiz edebilir ve görüntüleri farklı programlarda geliştirebilir ve iyileştirebilir.
Örnek olarak mevcut akıllı telefonları ele alalım.Herkes akıllı telefonlarını neredeyse her gün fotoğraf çekmek için kullanıyor Mevcut akıllı telefon üreticileri doğrudan kamera modülleri geliştirmiyorlar.OFILM, Sony gibi üçüncü taraf üreticilerden kamera satın alıyorlar. Modüller, bazen farklı akıllı telefonlar aynı üreticiyi ve aynı kamera modelini kullanır, ancak sunulan fotoğrafların kalitesi hala çok farklıdır.Bu büyük ölçüde her üreticinin kullandığı ISP'nin kalitesinden kaynaklanmaktadır. Neden oldu.
Akıllı telefonların günlük fotoğraf çekiminde herkesin aşina olduğu sahneler için, cep telefonu çipinin yerleşik ISP'si, otomatik yüz odaklama, otomatik beyaz dengesi ve otomatik ton eşleme gibi bir dizi işlevi yerine getirecek. Örneğin, ISP'nin otomatik görüntü keskinleştirmesi, keskinleştirme çok fazlaysa, fotoğraf daha belirgin bir "göz alıcı" hissine sahip olacaktır (çünkü fotoğraftaki çoğu nesnenin kenarları çok keskin optimize edilmiştir), keskinleştirme çok azsa, Genel resim puslu bir his uyandıracak ve insanlara bu cep telefonunun kamera sisteminin ayrıntıları yakalamak için yetersiz olduğu hissini verecektir. Birçok tüketicinin her gün fotoğraf çektiği sahne koşulları çeşitlidir ve hiçbir otomatik keskinleştirme teknolojisi evrensel değildir.ISS'ler, keskinleştirme derecesini belirlemek için sahnedeki bazı özellikleri otomatik olarak algılayıp tanıyabilmelidir. Bu tür bir ISP'nin araştırma ve geliştirmedeki zorluk, insanların sıklıkla tartıştığı her akıllı telefon kamera sisteminin "üretim tarzı" ve "üretim kalitesi" olan ürüne yansımaktadır.
Otonom sürüş neden bir İSS'ye ihtiyaç duyar?
Mevcut popüler otomatik sürüş sistemi mimari tasarımında, genel olarak konuşursak, mevcut sahnede hangi araçların, yayaların ve engellerin bulunduğu gibi kamera sistemi tarafından döndürülen mevcut sahne bilgilerini yargılamak için güçlü bir yapay zeka sistemi bulunacaktır. Hızı tahmin edin, mesafeyi tahmin edin, vb. Bu yapay zeka sisteminin son derece doğru bir yargıya ulaşmasının öncülü, kamera sistemi tarafından döndürülen mevcut sahne bilgilerinin mümkün olduğunca doğru olmasıdır.
Otonom sürüşün, cep telefonları gibi kitlesel tüketici ürünlerinden daha fazla ISP gerektirdiği söylenebilir. Cep telefonları için, ISP yalnızca fotoğrafın kalitesini belirler ki bu bir algı meselesinden başka bir şey değildir.Yüksek hızlı bir araçta, ISP sahne özelliklerini sonraki sistem bileşenlerine doğru bir şekilde gösteremezse, sonuç Felaket.
Örneğin, araç yüksek hızda hareket edeceğinden, kamera tarafından çekilen fotoğraflar genellikle belirli bir "kuyruk" ya da "gölgelenme" ye sahiptir, bu da görüntü işleme sistemindeki sonraki algoritmaların nesne özelliklerini tanımlaması için iyi değildir. Bu nedenle, bir ISP'nin önemli sorumluluklarından biri, bu "izlemeyi" ve "gölgelenmeyi" azaltmaktır. Bu, ISP'de "hareket tahmini" adı verilen çok önemli bir alt alandır.
Başka bir örnek olarak, mevcut kamera sensörü teknolojisinin sınırlamaları nedeniyle gece sürüş yapıyorsanız, gece görüntülemesi genellikle gündüz görüntülemeden daha fazla sorun ortaya çıkarır Kamera sensörü, daha fazla sahne ayrıntısı yakalamak için poz süresini uzatmalıdır. Işık miktarını artırın, ancak bu bariz bir gürültü getirecektir. Örneğin, bu karşılaştırmalı resim grubunda, soldaki resim, işlendikten sonra açıkça daha fazla sahne bilgisini ortaya çıkarmıştır.Ağaçların ve çimlerin detayları ve kenarları daha net ve daha keskindir, ancak aynı zamanda arka planda gece gökyüzünde ve uzaktaki binalarda. Yukarıda daha fazla gürültü var.
Otopilot sisteminde kullanılan elektronik bileşenlerin de otomobil yönetmeliği ile doğrulandığı düşünüldüğünde zorluk daha da artıyor. Yazarın bildiği kadarıyla, bazı otomotiv sınıfı elektronik bileşenlerin 125 derecelik bir çalışma sıcaklığına dayanması gerekirken, Intelin CPUsu gibi genel tüketici pazarındaki yongalar yalnızca 100 derece gerektirir. Bu sıcaklığa yakın olması aşırı ısınma korumasını tetikleyecektir. Elektrik kesintisinden sonra bilgisayar otomatik olarak yeniden başlayacaktır. Aynı zamanda, otomotiv sınıfı yongaların ayrıca güvenilirlik için ek gereksinimleri vardır.Bu nedenle, ISP'nin tüm otonom sürüş sistemi içindeki durumunun çok önemli olduğunu ve ISP'nin geliştirilmesinin de çok teknik ve zorlu olduğunu söylemek abartı olmaz. alan.
Dharma Enstitüsü ISP'yi neden geliştirdi?
Ali, 20 yıllık bir gelişimin ardından bir e-ticaret şirketinden teknoloji devine dönüştü ve bugün tüm toplumun dijital ekonomisinin altyapısı rolünü oynamaya başladı. Bugün, Alibaba iş kapsamını sadece yatay olarak genişletmiyor, aynı zamanda iş derinliğini dikey olarak da genişletiyor. Ali'nin geçtiğimiz birkaç yılda çip gibi temel araştırma alanına girdiğini, Dharma Akademisini kurduğunu, Pingtou Ge Semiconductor Şirketini kurduğunu ve kuantum hesaplama gibi birçok son teknoloji alanda araştırma yaptığını gördük.
Otonom sürüş şüphesiz önümüzdeki on yıl içinde yıkıcı değişiklikler getirebilecek bir parkurdur.Ali'nin yok olması için hiçbir neden yok, Ali'nin birçok iş senaryosunun da otomatikleştirilmesi ve güncellenmesi gerektiğinden bahsetmeye gerek yok. Üst düzey otopilot sistemi, yazılım ve donanımın (yapay zeka algoritması + sensörler) bir kombinasyonu olmalıdır ve ayrıca donanım ve donanımın (çoklu sensör füzyonu) bir kombinasyonuna sahiptir.
İdeal otonom sürüş sisteminin, algoritma tasarımı ile donanım tasarımı arasındaki işbirliğini gerektiren karmaşık yol ışığı ortamında / kötü hava koşullarında derin öğrenme algoritmasının gerektirdiği görüntü verilerini elde edebilmesi ve aynı zamanda görüntü sensörünü tahmin edebilmesi gerekir. Maruz kalma süresi son derece önemlidir.Radar belirli bir konuma tarama yaparken görüntü sensörünün aynı anda tetiklenmesini sağlayabilir.Bu, donanım ve donanım arasındaki işbirliğini gerektirir. Bu nedenle, Dharma Akademisi bu aşırılığı takip etmek için kendi geliştirdiği ISP'yi seçti.
Mevcut değerlendirme sonuçlarından yola çıkarak, Dharma Academy'nin kendi geliştirdiği ISP şüphesiz sektörde birinci sınıf arasında yer aldı.Kendi geliştirdiği ISP ve derin öğrenme algoritmalarının işbirliği sayesinde, gece sahnelerinin tanınma doğruluğu yüzde on puan arttı. . Bu on yüzde puanlık artışı küçümsemeyin. Bunun arkasında, otonom sürüş ekipmanı algısını büyük ölçüde geliştirebilen derin algoritmaların yeniliği yatıyor.
Ali'nin stratejisi
Bir şirketin stratejisini gözlemlemek uzun vadeli bir boyut gerektirir. Bu açıdan, Alinin kendi geliştirdiği ISP işlemcisi Alinin "çip" stratejisinde önemli bir adım olabilir.
Ali, art arda kendi geliştirdiği RISCV CPU'ları, kendi geliştirdiği AI hızlandırma yongalarını ve kendi geliştirdiği ISP işlemcilerini piyasaya sürdü.Çip üzerinde sistem (SoC) için gereken birkaç önemli parçanın tümü masaya yatırıldı.
Bu nedenle, bu büyük parçalar, Ali'nin çip stratejisi alanındaki ilk taslağını açıkça ortaya koyabilir: Ali, kendi geliştirdiği AliSoC'yi çıkaracak ve ayrıca Google, Amazon ve donanım alanında da derin olan diğer önde gelen uluslararası üreticilerle işbirliği yapacak. Daha fazla rekabet başlatın.
On yıl önce Ali'de, tek e-ticaret şirketi Taobao halk tarafından tanındı. Neredeyse beş yıl önce, finans (Alipay) herkesin bilincine eklendi ve herkesin Alibaba Bulut Bilişim'i kabul ettiği üç yıl önceydi. Ali, Dharma Akademi'nin kuruluşunun duyurulmasından sadece birkaç yıl sonra, teknoloji birikimine son derece bağımlı olan çekirdek donanım alanında eğilip geçmeye başladı.Herkesin Ali'yi başarılı bir çip şirketi olarak kabul etmesi birkaç yıl almayabilir. Temel teknolojilere sahip yeni bir ekonomik altyapı şirketi.
Değişmeyen tek şey değişimdir. Ve Ali'nin "özünün" parlamasını bekleyin.
