SenseTime: Yeni "akıllı kabin" deneyiminin perde arkası teknik analizi
Otomobil ile yolcular arasındaki ilişkiyi çözen akıllı araba kabininin en yüksek seviyesi nedir?
Bir birey için, sizi anlayan bir makine "sırdaşıdır". Duygularınıza, öfkenize, üzüntünüze ve çeşitli ihtiyaçlarınıza zamanında ve doğru bir şekilde cevap verilecektir.
SenseTime bunu, akıllı kabinin üst düzey "zekasının" "hissedilmez konfora" yakın olması olarak tanımlıyor.
"Duygusuz rahatlık" nedir? Beş yıldır kurulmuş bir yapay zeka platform şirketi olarak SenseTime, Şangay Otomobil Fuarı'nda gelecekteki yeni nesil araç içi akıllı sistemler için kimlik tanıma, yorgunluk algılama ve yorgunluk algılama sağlayabilen eksiksiz "akıllı kabin" ürünlerini ve çözümlerini sundu. Yedi işlev, dikkat dağınıklığını algılama, kapıyı açmak için yüzü kaydırma, görüş izleme, hareket tanıma ve yolcu özellik analizi içerir.
SenseTimeın temel teknolojisi, bilgisayarla görme ve derin öğrenmede yatar ve bu da akıllı kabinin yüksek hassasiyet avantajına sahip olduğunu fark eder ve farklı yazılım ve donanım platformlarını destekleyerek farklı araçlarda promosyonu kolaylaştırır.
Aslında, kapıyı açmak için yukarıda belirtilen yüz kaydırma, kimlik tanıma ve hareket tanıma gibi işlevler birçok modeldeki uygulamalarla donatılmıştır.
Ancak, diğer akıllı araba kabini ürünlerine kıyasla, SenseTime'ın çözümü daha düşük donanım gereksinimlerine sahiptir. Yıllar boyunca biriktirdiği kendi imaj efsanesi algoritmasını donanım eksikliğini telafi etmek için kullanabilir ve bu, OEM'in çok değerli olduğu maliyetle ilgilidir. Kararlılık, verimlilik ve düşük maliyet, SenseTime'ın temel rekabet gücüdür.
Akıllı kabini hafifçe deneyimleyin
Aslında akıllı kabinler, benzer işlevlere sahip orta ve üst düzey araçlarda görünür. SenseTime'ın akıllı kabini nasıl bir his veriyor? Leifeng.com'un yeni akıllı sürüşü, deneyim işlevi ve sürecine göre tanımlanmıştır.
Kapıyı açmak için yüz tanıma : "Sürücü", kapı kolundaki mikro anahtarı tetiklemek için araca yaklaştığında, yüz tanıma işlevi aynı anda uyandırılır. Bu sırada yüz tanıma sistemi, yüzü yakalayacak ve sahibini onaylamak için buluttaki kayıtlı araç sahibiyle karşılaştıracaktır. Kimlik ve araba kapısının kilidini açın.
Ek olarak, yüz karşılaştırma sürecinde, sistem ayrıca güvenliği artırmak için canlı vücut algılamayı etkinleştirir ve izleme, sürücünün ekstra eylemleri olmadan tamamlanabilir.
Yüzü kaydırarak kimlik doğrulama yoluyla aracın kilidi açıldığında, kimlik tanıma aslında aynı anda tamamlanır.Bu işlevin gerçekleştirilmesi, aslında, sahibi araca bindiğinde sahibinin bilgilerine göre koltuğu ve direksiyon simidini otomatik olarak ayarlamak gibi birçok kişiselleştirilmiş işlevi genişletebilir. Ve dikiz aynasının konumu, klimanın sıcaklığı vb.
Akıllı kabin sisteminin arabaya yerleştirilmiş iki düşük maliyetli geleneksel kameraya sahip olduğunu belirtmekte fayda var.
SenseTime ürün ve stratejisinin yönetici direktörü Xu Liang, Leifeng.com'a iki kameradan birinin sürücüden bilgi toplamak için, diğerinin ise arabadaki yolculardan bilgi toplamak için kullanıldığını söyledi.
Diğer bir deyişle, sahibinin bu akıllı araba kabininin kimlik doğrulaması gibi bir dizi görüntü tanıma işleme kapasitesinin gerçekleştirilmesi, iki geleneksel kameraya dayanır.
Bu bağlamda Xu Liang, SenseTime tarafından bağımsız olarak geliştirilen bir derin öğrenme platformu olan SenseParrots'a dayalı olarak arka planda büyük ölçekli bir sunucu gerektirmediğini ve sonunda hafif bir hesaplama yapabileceğini söyledi.Şu anda platform, cep telefonlarında, otomobillerde ve binalarda yaygın olarak kullanılıyor. Dikey sahneleri bekleyin.
Ek olarak, SenseTime Pekin, Şanghay ve Tokyo'da süper hesaplama merkezleri kurmuştur.Her biri dikey bir algoritma alanı için özel olarak eğitilmiş 17 GPU kümesi dahil olmak üzere algoritma eğitimini desteklemek için 15.000'den fazla GPU bulunmaktadır. En büyük kümenin boyutu 2000 CPU'ya yakındır. Süper hesaplama merkezinin getirdiği güçlü bilgi işlem gücü, yapay zeka algoritmalarının sürekli yinelemesini destekleyen temel unsurlardan biridir.
Yorgunluk algılama Dikkat dağınıklığı algılama : Sürücünün güvenliğini sağlamak için akıllı kabin, sürücü tarafından iletilen bilgileri yorgunluk algılama, dikkat dağınıklığı algılama ve bakış takibi gibi işlevleri gerçekleştirmek için kullanabilir.
Belirli bir deneyim açısından, yüz bilgilerini yakalamak için kamerayı kullanın ve gözlerin açık ve kapalı durumunu ve esneme sıklığını kapsamlı bir şekilde belirleyin ve gerekirse yorgunluk alarm sinyalleri verin;
Sürücünün başının dönüşü ve görüş hattının yönü izlenerek, sürücünün dikkatinin yolda olup olmadığı teyit edilmiş ve üç seviyede dikkati dağılmış sürüş uyarı sinyalleri verilmiş;
Baş ve göz dinamiklerini yakalayarak, güneş siperliği, yol yüzeyi, gösterge paneli, merkezi kontrol ekranı, iç dikiz aynası, dış dikiz aynası vb. Gibi sürücünün baktığı arabadaki alanın gerçek zamanlı tanımlanması ve farklı müşterilere dayalı olabilir. Merkezi kontrol ekranının otomatik açılması ve siyah ekranı ve HUD ekran içeriğinin takibi gibi farklı işlevlerin özelleştirilmesi gerekir.
Mimik tanıma: Gerçek deneyim sürecinde, jest tanımanın müzik koleksiyonunu "beğenmek" için kullanılabileceğinden etkilendim. Leifeng.com'a göre, şu anda SenseTime 20'den fazla standart dinamik ve statik hareket geliştirdi ve özelleştirmeyi destekleyebilir. Deney arabasında on bir tanesi kullanıldı.
Ek olarak, SenseTime kapsamlı eğlence etkileşimleri gerçekleştirmek için kafa tanıma ve yüz tanıma içeriğine hareket tanıma eklemeyi umuyor Bu, dokunmatik ekrana gerçekten inebilen ve gerçekten yerini alabilen durumdur.
Yolcu nitelik analizi: Araçta bulunan bir diğer kamera ise otomobildeki yolcuların bilgilerini toplayabiliyor.Farklı aydınlatma koşulları ve farklı aydınlatma açıları altında otomobildeki kişilerin cinsiyetini, yaşını, otomobildeki konumunu ve hatta duygularını doğru bir şekilde tespit edebiliyor ve ihtiyaçlara göre özelleştirilebiliyor. Cep telefonları, bilgisayarlar ve diğer değerli öğeler gibi öğe algılama. Gelecekte bu işlev, arka koltuktaki çocuk yolculara özel bakım, kayıp eşyaların tespiti ve bildirimi gibi sahnelere uygulanabilecek.
Tüm akıllı araba kabinini deneyimleme sürecinde, SenseTime'ın müşterilerin ve tüketicilerin ihtiyaç duyduğu akıllı beyin deliklerini karşılamak için kamerayı kullanabileceğini görebilirsiniz. Aslında, tüm bunlar SenseTime'ın bilgisayarla görme ve derin öğrenme teknolojisi alanındaki derin birikimine dayanıyor ve böylece eksiksiz bir akıllı kabin ürünü ve çözümü sunuyor.
Gerçek savaş akıllı araba kabininin temel teknolojisi
Son yıllarda, yapay zeka, yeni enerji, paylaşılan seyahat ve V2X gibi sosyal trendlerin desteğiyle otomotiv endüstrisi, gelişme için sınırsız alan dışına çıktı. Şangay Otomobil Fuarı'nda akıllı kabin ürünlerinin sektörden büyük ilgi gördüğü görülüyor.
Bununla birlikte, SenseTime görüşüne göre, akıllı araba pazarının genel geri bildirim döngüsü nispeten uzundur.Farklı araç türlerinin farklı çipleri ve donanım cihazları vardır ve insanların hedeflenmesi farklıdır.Bu nedenle, akıllı araba kabinlerinin tam olarak uygulanmasına devam edilmesi gerekmektedir. Güç biriktirin.
Xu Liang, jest tanıma uygulamalarına bir örnek verdi: Şu anda, jest tanıma, birçok insanın dikkat ettiği bir işlevdir. Hareketlerin tanınması yoluyla, ses seviyesini ayarlama, şarkıları değiştirme ve araba camlarını kontrol etme gibi araç işlevleri kontrol edilebilir. Bununla birlikte, pratik uygulamalarda, farklı müşteriler, hareketlerin anlamının farklı tanımlarına sahip olabilir, bu da tüketicilerin her bir hareketin anlamını hatırlamasına neden olur ve bu da işlemin zahmetine katkıda bulunur.
Bu nedenle, jest tanımanın doğruluğunu ve karmaşıklığını sürekli olarak iyileştirirken, endüstri aynı zamanda standart anlamına gelen birleşik bir jest oluşumunu da teşvik etmelidir, böylece bu işlev, tüketicilerin sadece "soğukkanlılık" peşinde koşmak yerine gerçekten kullanması için uygundur.
Buna ek olarak, farklı araçlar farklı yonga seviyeleri ve kapasiteleri taşır.Kabinlerin yaygınlaşmasını teşvik etmek istiyorsanız, kendi SDK ürünlerinizin evrenselliğini sürekli olarak iyileştirmeniz gerekir. Özellikle, yerleşik ana bilgisayar daha küçük ve daha hafif hale geliyor Tek bir SDK ne kadar çok işlev sağlarsa, ana bilgisayar o kadar az meşgul olur ve kullanıcı deneyimi iyileştirilebilir.
Leifeng.com'a göre, bazı araç şirketleri, İnternet şirketleri, otomobil parçası üreticileri, telekom operatörleri ve otonom sürüş şirketleri araştırma ve geliştirmeye yatırım yaptı ve kendi akıllı araba kabinlerini açtı.
Öyleyse, diğer tedarikçilerle karşılaştırıldığında, SenseTime'ın temel teknolojileri ve avantajları nerede?
SenseTime Teslimat Yönetimi Direktörü Chen Yongbo, SenseTime'ın akıllı kabininin aşağıdaki dört avantajı olduğunu söyledi:
İlk çözüm tamamlandı: IR kamera ve otomobil yönetmeliklerinin ana akım çiplerinin yardımıyla, otomobilin içinde ve dışında eksiksiz bir görüş çözümü ele alınabilir. Yüz tanıma ekipmanı, yorgunluk algılama ekipmanı, dikkat algılama ekipmanı, hareket tanıma ekipmanı, dikkati dağılmış hareket algılama ve özellik algılama ekipmanının altıyı bir arada etkisine eşdeğerdir.
İkinci tanıma algoritması yüksek hassasiyettir: Kızılötesi kamera, arabadaki karmaşık aydınlatma koşullarının zorluklarını karşılamak ve tüm hava koşullarını tanıma ve algılama ihtiyaçlarını karşılamak için derinlemesine optimize edilmiştir.
Üçüncüsü düşük maliyettir: CPU komut seti seviyesi optimizasyonu, milisaniye yanıtı, aynı teknik performansa sahip daha düşük maliyetli donanım platformu.
Dört çoklu platform desteği : Farklı yazılım ve donanım platformlarını, X86, GPU, ARM mimari yongaları ve Linux / Android sistemlerini destekleyin.
Aynı zamanda SenseTime'ın akıllı araba kabini DMS'sinin saha doğrulaması ve hesaplaması büyük ölçekte gerçekleştirildi.Aynı zamanda akıllı araba kabini, şirketin akıllı şehirler, cep telefonları, İnternet eğlencesi, finans, perakende ve diğer sektör senaryolarındaki zengin deneyimini birleştirerek V2X Nesnelerin İnterneti'ni derinleştirecek. Uygulama, otomobil ve ödeme, navigasyon, eğlence vb.'nin sınır ötesi entegrasyonunu geliştirin.
OEM'ler etrafında ticari rota
2018 yılında, SenseTime'ın akıllı araba kabini ürünlerinin seri üretiminin gerçekleştirilmesinden bu yana, çok sayıda uluslararası Tier 1 tedarikçisi kazandı ve 10'dan fazla yerli ve uluslararası OEM üreticisi, SenseTime'ı Mercedes-Benz ve Cadillac gibi araç görüş teknolojisi sağlayıcıları olarak belirledi. , Audi, SAIC, BYD, Weimar, vb. Parçalar aşağıdaki gibidir:
Visteon ile işbirliği : Bu Şangay Otomobil Fuarı'nda SenseTime, Visteon ile stratejik bir işbirliğine de ulaştı. İşbirliği yoluyla, Visteon ve SenseTime, sürekli artan akıllı insan-araç etkileşimini karşılamak için SenseTimeın sürücü tanımlama, yorgunluk algılama ve dikkat dağınıklığı algılama teknolojilerini Visteonun gelişmiş SmartCore ve DriveCore ile birlikte geliştirecek ve birleştirecektir. talep.
Weimar ile işbirliği : Ekim 2018'de, SenseTime'ın yüz tanıma teknolojisine sahip Weimar EX5 resmi olarak piyasaya sürüldü ve teslim edildi. SenseTime teknolojisi, Weimar EX5'in yalnızca sürücü kimlik doğrulamasına yardımcı olmakla kalmaz, hırsızlık riskini azaltır ve araç güvenliğini iyileştirir, aynı zamanda araçları kişisel alışkanlıklara göre yapılandırarak sürücünün kişiselleştirilmiş ve akıllı etkileşimli deneyimini büyük ölçüde geliştirebilir.
Shanghai International Automobile City ile İşbirliği : Mart 2019'da, Shangtang Technology tarafından sağlanan akıllı kabin çözümü, Şanghay'ın çeşitli bölgelerinde 38 hat üzerinde "istasyon servis otobüsü" ne indi ve gerçek zamanlı izlemeyi gerçekleştirdi ve sürücü kimliği, yorgunluk ve dikkat dağınıklığını hatırlattı. Aynı zamanda SenseTime, "hareket sonrası servis otobüsü" ndeki yolcular için akıllı bir deneyim ve hizmetler sağlar. İki taraf ayrıca trafik koşullarının veri toplama, büyük veri analizi ve trafik sahnelerinin işlenmesini ortaklaşa gerçekleştirdi ve yapay zeka için temel bir veri platformunun inşasını teşvik etti.
Bu bakış açısına göre, SenseTime otomotiv dikey alanında bir düzineden fazla OEM'i kucakladığından, OEM'lerin akıllı kabinler için gereksinimlerinin çok iyi farkındadır.
Chen Yongbo'ya göre, OEM'lerin şu andaki sıkıntı noktası, geleneksel arabaları akıllı arabalara yükseltme sürecinde teknolojik yeniliklerin de büyük zorluklarla karşı karşıya olmasıdır.Geleneksel OEM'ler için, endüstriyel akıllı dönüşüm dalgasına ayak uydurmak istiyorlar. Teknolojinin birikimi ve uygulanması esastır.
Akıllı araba kabini ürünleri için, ürünün etkileşimi, deneyimi ve bireysel ihtiyaçları, ana makine üreticileri için derin bir endişe konusu haline geldi. .
Bu nedenle, halihazırda uygulanan işlevlere ek olarak, SenseTimeın akıllı kabin ürünleri ARHUD head-up display, AR yüksek hassasiyetli navigasyon ve araç içi yüz ödemesi gibi işlevler geliştirmeye devam edecek.Çeşitli akıllı işlevlerin, işlevsel çağdan araçları tanıtması bekleniyor. Zeka çağına doğru gelişin.
Akıllı araba kabinindeki bir sonraki çıkış: sizi anlayın
Geleceğin akıllı araba kabininin deneyimi üç boyutlu olacak.
Leifeng.com'a göre gerçek zeka, insanların ihtiyaçlarını anlamaktır ve akıllı kabin insanları anlayabilmeli ve insanları bulmak için hizmetler sunabilmelidir.
Bu nedenle, içerik zekası umut verici bir yön olacaktır.
Ürün deneyimini anlamak ve iyileştirmek açısından SenseTime, güvenlik ve akıllı deneyimin iki ana yönünden başlar: yukarıda bahsedilen yüz açma ve kimlik tanıma ve sürücü izleme sistemi ürün işlevleri.
Buna ek olarak, SenseTime, sürücünün yüzünün tanıma uygulamasına dayanacak, jestlere, göz yuvarlağına kadar uzanan ve benzersiz bir akıllı insan-araba etkileşimli eğlence deneyimi yaratacak; aynı zamanda, tam kabin zekası elde etmek için tanıma aralığını arka yolcuları da kapsayacak şekilde genişletebilir. Entegrasyon, akıllı kabini daha "fütüristik" hale getirir.
Başka bir deyişle, akıllı araba kabininin bir sonraki temel geliştirme yönü, tüm sistemin insanları anlamasını ve insanların ihtiyaçlarını anlamasını sağlamak olmalıdır.
Xu Liang, pazar açısından bakıldığında, OEM pazarı için bekleme süresinin nispeten uzun, genellikle bir buçuk ila iki yıl arasında olduğuna ve ticari araç pazarı için bekleme süresinin genellikle nispeten kısa olduğuna inanıyor. SenseTime, tüketicilerin teknolojinin getirdiği kolaylıktan daha hızlı yararlanabilmeleri için akıllı kabin ürünlerinin uygulanmasını teşvik etmeye devam etmek için pazarla işbirliği yapacak.
Sonraki adım planı
Şu anda, SenseTime'ın akıllı kabin ekibi, çoğunlukla Pekin, Şangay ve Shenzhen'de dağılmış yaklaşık 100 kişiye sahiptir.
Buna ek olarak, Leifeng.com'a göre, SenseTime'ın akıllı araç bölmesi ve otonom sürüş işi, mobil zeka iş grubuna aittir.Teknoloji araştırma ve geliştirme ve ürün gereksinimlerindeki farklılıklar nedeniyle, ilgili ekipler işin ilgili bölümlerinden sorumludur.
Shangtangın planına göre, Akıllı kabinin fonksiyonel modüllerinin birçoğunun 2019 yılında seri üretiminin gerçekleştirilmesi ve 2020 yılının ilk yarısında akıllı kabinin tam anlamıyla hayata geçirilmesi bekleniyor. Sonuç olarak, AI, akıllı otomobil endüstrisinin güçlendirilmesini sürekli olarak artırıyor ve akıllı otomobil endüstrisinin yükseltilmesini ve geliştirilmesini teşvik ediyor.
Uzun bir süredir, otonom sürüş ve akıllı araba kabinleri alanlarında derinlemesine keşifler yoluyla, SenseTime, bilgisayar görüşü teknolojisinin güçlendirici değerini tam anlamıyla oynamayı, araç güvenliğini ve deneyimini daha iyi dengelemeyi ve herkesin arabaya getirilen yapay zekanın keyfini çıkarmasına izin vermeyi umuyor. Güvenlik gözetimi ve teknoloji anlayışı, gelecekteki seyahatleri daha güvenli, daha rahat ve daha akıllı hale getirir.
