Sen benim gözlerimsin: Microsoft, körlerin sanatı sesle takdir etmelerine yardımcı oluyor
Editörün notu: Kör İskoç ressam, Microsoft'un The Oregon Project araştırma projesi sayesinde güvenini yeniden kazandı ve resim yapmaya devam etti. Ancak Oregon Projesi'nin önemi bundan daha fazlasıdır: 3 boyutlu bir ses sahnesi yaratır, böylece görme engelli ve ambliyopik hastalar dublaj yoluyla resimlerin içeriğinden keyif alabilir. Orijinal makale Microsoft Research Blog'da yayınlandı ve orijinal başlığı "Daha kapsayıcı bir deneyim için görsel sanatı sesli olarak yorumlamak". Leifeng.com tarafından özel olarak derlenmiştir, izinsiz yeniden basılması reddedilir.
İskoçya'da tanınmış bir manzara ressamı Keith Salmon var. Eski ve engebeli Scottish Highlands'den ilham alarak dağları ve silüeti belirsiz ve duygusal bir soyutlamayla ifade etti. Maalesef Somon, uzun yıllar boyunca bir manzara ressamı için ölümcül olan görme kaybından muzdariptir. Sanat ve heykel eğitimi alan somon, yaratıcı becerilerini zenginleştirerek duyusal eksikliklerin üstesinden geliyor. Resimlerinde manzaranın gerçekçiliğini azaltmak ve vahşi doğanın soyut ve ince ifadesine daha fazla vurgu yapmak zorunda kaldı.
"Arran Adasında Kış", Keith Salmon
Diyabetik retinopati nedeniyle, Salmon'un görüşü 1980'lerden beri düşüyor. Uzun yıllar boyunca görüşü zayıf olan tek gözü vardı. Ama adapte oldu ve resim yapmaya devam etti ve dağa tırmanması için sevgilisi Anita Groves eşlik etti.
Geçtiğimiz ay, kör olduğu tespit edilen Salmon, Microsoft tarafından yenilikçi bir araştırma üzerine bir basın toplantısı düzenledi. Bu araştırma, İki boyutlu resimleri ifade etmek için üç boyutlu sesler kullanın , Salmon'un vizyonunun çoğunu kaybettiğinde resim sanatını zenginleştirmesine yardımcı olmak. o Dört Kinect (Microsoft hareket algılama kamerası), 15 yüksek irtifa hoparlörü ve 54 dublaj aracılığıyla, Salmonun üç resmi işitsel ve uzamsal boyutlarda ifade edilir . Bu üç çalışma Oregon'daki Cehennem Vadisi'ni boyadı, bu nedenle proje Oregon Projesi ("Oregon Projesi") olarak adlandırıldı.
Keith Salmon (solda), Neel Joshi (sağda); arkasında Keith Salmon tarafından Cehennem Vadisi'ne ait üç manzara resmi var
Bu sistem ilk kez Seattle 9e2 sergisinde "Sanat ve Teknoloji" temasıyla sergilendi. Öneminin iki noktası var: 1. Salmon gibi sanatçıların yaratmaya devam etmeleri için bir yol sağlayın. 2. Görsel kusurları olan izleyicilerin sanat eserlerini takdir etmeleri için fırsatlar sağlayın.
Somon, "Birkaç yıl içinde Ulusal Müze veya Sanat Galerisi'ne gittiğinizde, bu teknoloji ziyaret deneyiminin bir parçası olduysa, mükemmel olmalı." Dedi.
Bu sistemde her resmin önünde 18 ses telinin bulunduğu 3 boyutlu bir alan bulunmaktadır. Kinect kameraları, farklı film müziklerini çalmak için mekandaki ziyaretçilerin hareketlerini izler. Ziyaretçilerin kör veya sıradan insanlar olmasına bakılmaksızın, sistem işleri daha canlı ve interaktif hale getirebilir. Biraz daha uzakta, ziyaretçiler kuş, su ve çim seslerini duyabilirler. Bu sesler, Cehennem Vadisi'nde yerde Salmon ve arkadaşları tarafından kaydedildi.
Ziyaretçiler yaklaştıklarında, Salmon'un resimlerindeki mavi, yeşil, kahverengi ve koyu sarı boyaları yansıtan bir dijital film müziği duyacaklar. Ziyaretçiler daha yakın durduklarında stüdyoda somon balığının sesini ve boya çubuğunun çizim kağıdına sürtünmesini bile duyabilirler. Bu, sanat eserinin ayrıntılarını (ince fırçaların ana hatları) gözlemleyen gören bir kişinin deneyimini taklit etmektir. Kinect kamera, ziyaretçinin kolunun hareketini takip edecek ve çalınan müziği buna göre değiştirecektir. Bu, ziyaretçilerin sanatsal yaratım sürecinin bir parçası olmalarına ve kendi müzik deneyimlerini yaratmak için vücut ve kol hareketlerini kullanmalarına yardımcı olabilir. Sergide yetişkinler farklı müziklerden bir derleme oluşturmak için yürümeye güvenirken, çocuklar etrafta dans ediyor ve ellerini sallıyor.
Somon şu açıklamayı yaptı: "3B uzayın dış çevresinden iç çevresine, doğal ses ile yapay ses arasındaki geçiş çok uyumlu ve doğal. Bu, tüm sanatı birbirine bağlayan harika, atmosferik, mekansal ve peyzajlı bir duygu. Birlikte."
Bu ses sistemi, Microsoft araştırmacısı Neel Joshi, Meredith Ringel Morris ve eski stajyer Kyle Rector tarafından yaratılan Eyes-Free Art ("Gözsüz Sanat") adlı deneysel projeden türetilmiştir. Bu proje, görme engelli izleyicinin görsel sanatları (resim gibi) takdir etmesine yardımcı olmayı amaçlamaktadır.
Günümüzde pek çok müze, görme engelli ziyaretçilere ve heykellere eldivenle dokunacak aktivitelere açıklamalar yapıyor. Microsoft araştırmacıları, daha özelleştirilmiş bir deneyim oluşturmak istiyor. Ancak yine de halka açıktır, herkes katılabilir ve açıklayana bağlı değildir.
Pek çok fikri keşfettikten sonra, Microsoft araştırmacıları Kinect kamerasına dayalı bir uzamsal ses sistemi oluşturmaya karar verdiler. Bu sistemde ses ve görüntünün aynı güzelliğe sahip olabileceğini ve eşit derecede önemli olduğunu umuyorlar.
Joshi, görsel keşfin mesafeye dayalı kişisel bir deneyim olduğunu söyledi: Bir kişi yaklaştığında daha fazla ayrıntı görecek ve bu araştırmacılar bu fenomeni taklit etmek istiyor. O sadece projenin geliştiricisi değil, aynı zamanda yerel toplulukta aktif bir ressam ve interaktif bir sanatçı.
Geçtiğimiz yıl, araştırmacılar az gören ziyaretçileri prototipi test etmeye davet etti. Bu prototip
Frida Kahlo, Henri Matisse ve diğer sanatçıların çalışmalarını ifade etmek için programlanmış müzik, anlatım ve çeşitli sesler kullanın. Test uzmanı ziyaretten son derece zevk almak zorunda kaldı. Kadınlardan biri usta bir sanat aşığıydı ve kör olduktan sonra sergilere gitmeyi bıraktı. Hatta ziyaret sırasında heyecanla gözyaşı döktü. Ancak araştırma ekibi bunun sanat olmadığını biliyor, daha fazlasını yapmalılar.
Joshi, sanatçıyla olan bağına güvenerek, Salmon'un sanatsal yaratımını Microsoft'un teknolojisiyle birleştirmek için Salmon ile işbirliği yapmaya başladı. Sistemi dokuz gün boyunca 9e2'de sergilemek için Seattle film yapımcısı ve fotoğrafçı Dan Thornton, İskoç ses tasarımcısı Graham Byron ve 9e2 sergi organizatörü John Boylan ile birlikte çalıştılar. Tüm proje deneysel olsa da, onu ticarileştirme ve kısa vadede halka açma planı yoktur.Araştırmacılar Eyes-Free Art patenti için başvuruda bulundular ve kullanımı daha kolay ve daha sanatsal bir deneyim nasıl yaratılacağını araştırmaya devam edecekler. .
Neel Joshi, Oregon Projesi'nde çalışıyor
Amos Miller, görme engelli bir Microsoft araştırmacısıdır. Sistemin "doğuştan kapsayıcı" olduğu yorumunu yaptı: kişiselleştirilmiş bir deneyimin yanı sıra sosyalleştirilmiş bir deneyimin keyfini çıkarmasına olanak tanıdı ve her ikisi de sanatçının tasarım fikirleriyle uyumlu. .
"Eyes-Free Art sistemi, olumlu ve kapsayıcı bir deneyim yaratabileceğinizi kanıtlıyor." Miller, Cities Unlocked projesinin geliştiricisidir. 3 boyutlu bir ses ortamı oluşturarak, az gören kişilerin şehir içinde hareket etmesine yardımcı olan bir projedir.
Sheri Richardson iki kör örgütün başkanıdır, Vision Loss Connections ve bebeklikten beri kör. Onun için bu sistem, sanatı keşfetmenin canlı ve duygusal bir yolu. Sanatı farklı bakış açılarından değerlendirmenize olanak tanır ve başkalarının açıklamalarına güvenmez. Ressamın yarattığı sahneyi yeniden üretmek için Jigokudani'nin doğal sesini kullanmayı özellikle seviyor.
Richardson: "Kinect'in insan izleme teknolojisi ve resimdeki sizinle birlikte hareket eden ses hissi, bu sistemi ziyaret etmeyi çok deneyimsel hale getiriyor ve kalbimde duyguları uyandırıyor."
Salmon için zaten zayıf olan görme yeteneği birkaç yıl önce bozulmaya başladı. Eyes-Free Art sistemi, sanat kariyerine önümüzdeki yıllarda devam etme umudu verdi.
Dedi ki: "Bu harika. Geleceğimi geri kazandım. Görme gücüm bozulmaya devam etse bile resim yapmaya devam edeceğim - Sesi yaratmak için kullanacağım. Bu bir öğrenme ve uyum sağlama süreci."
Keith Salmon tırmanıyor
"Oregon Projesi", Nisan 2017'de Edinburgh College of Art'ta tekrar sergilenecek.
Özet: Microsoft Oregon Projesi'nin sistemi çok karmaşık değildir ve teknolojisinin bir atılım olduğu söylenemez. Ancak, aramızdaki azınlık grubu olan bu ses koleksiyonu, düzenleme ve 3B sahne düzeni serisi aracılığıyla, körler, başka türlü kendi yollarıyla ulaşılamayacak olan sanatı takdir edebilirler. Görüntünün ve 3 boyutlu ses alanının hepsi aynı resimden olmasına rağmen, körlerin duyduklarının sıradan insanların gözünde gördüğümüzden tamamen farklı olduğu söylenebilir. Resme teknik olarak karmaşık olmayan bu şekilde "ikinci bir hayat" verir. Bu teknolojinin kısa vadede pratik uygulama şansı olmasa da, gelecekte teknoloji keşiflerinin yönünü temsil ediyor. Belki de teknolojik ilerlemenin en büyük öneminin bize daha fazla eğlence seçeneği sunmak değil, herkesin hayatını iyileştirmek olduğunu hatırlatıyor - evet, herkes. Toplumun kenarlarındaki dezavantajlı grupların da teknolojik ilerlemenin faydalarından ve mutluluğundan yararlanmasına izin verin.
Microsoft aracılığıyla
[İşe Alım] Leifeng.com, yapay zeka, sürücüsüz, VR / AR, Fintech ve gelecekteki tıbbi bakım alanlarında denizaşırı teknoloji trendlerini ve bilgilerini mümkün olan en kısa sürede sağlamakta ısrar ediyor. Uluslararası haberlere önem veren, bilim ve teknoloji haberleri için konu seçme konusunda belirli becerilere ve mükemmel çeviri ve yazma becerilerine sahip çok sayıda çevirmene ihtiyacımız var. Shenzhen'de iş yeri. Özgeçmişinizi guoyixin@leiphone.com adresine gönderin. Yarı zamanlı ve staj kabul edilebilir.
Önerilen Kaynaklar:
Xu Yingqing: Son 7 yılda görme engelli kişilerin internete erişmesine olanak tanıyan bir ürünü nasıl yapıyoruz | Microsoft Asya Araştırma Akademisi
