DeepMind yeni eylem: AI'lar için bir psikoloji laboratuvarı açtı
Xia Yi Yunzhong Derleyin ve organize edin
Qubit Üretildi | Genel Hesap QbitAI
Son zamanlarda, DeepMind adlı bir psikoloji laboratuvarı açtı Psychlab , Konum DeepMind Lab'da.
Tabii ki insanlar için değil.
Psychlab'ın bulunduğu DeepMind Lab, birinci şahıs perspektifli bir 3D oyun dünyasıdır.Elbette bu psikoloji laboratuvarı aynı zamanda bir simülasyon ortamıdır.Araştırma nesnesi derin pekiştirici öğrenme ajanlarıdır (Ajanlar). Psychlab, geleneksel laboratuvarlarda klasik psikoloji deneylerini uygulayabilir, böylece başlangıçta insan psikolojisini incelemek için kullanılan bu deneyler, AI ajanlarında da kullanılabilir.
Bu laboratuvarla ilgili olarak DeepMind, Psychlab ortamını ve API'yi ayrıntılı olarak tanıtan ve ayrıca bazı örnek görevleri gösteren Psychlab: A Psychology Laboratory for Deep Reinforcement Learning Agents için bir makale yayınladı.
Makalede, Psychlab ile derin pekiştirmeli öğrenme ajanlarını insanlarla test etmek ve karşılaştırmak için doğrudan bilişsel psikoloji ve görsel psikofizik görevlerini kullanabileceğinizi söylediler. Temsilci anlayışımızı zenginleştirin ve aracıların tasarımını optimize etmeye yardımcı olun .
Sonra,
Psychlab tam olarak nedir?
Psychlab'da ajan, önünde büyük bir ekran bulunan ve uyaranları gösteren bir platformda durur. Bu ajan ekrana bakabilir veya etrafa bakabilir, yere bakabilir ve gökyüzünü görebilir, sorun yok.
Aracı, Psychlab'da görsel arama görevlerini tamamlar
Yukarıdaki şekilde gösterildiği gibi, aracının bakış yönü ekranda görüntülenen sahneyi belirler. ajanı ekranın merkezine bakar, ve ajanları hedefi arar ve ajanın hedefini bulduğunu gösterir: macenta T. Temsilcinin bakış yönü değiştikçe, farklı görüş alanları ekranda görüntülenir. Call of Duty oynadığınızda vizyonunuzdaki değişime benzer.
Temsilci, hedefi bulmak için ekrana bakmanın yanı sıra, bu laboratuvarda başka ne yapabilir? DeepMind'ın kendisi kağıtta 8 görev gösterdi :
Psychlab'da çeşitli görevler
Yaygın davranışsal test yöntemleriyle tutarlı olmak için, tüm Psychlab görevleri ayrı testlere bölünmüştür. Bu testler aynı zamanda temel analiz birimleridir. DM-Lab bağlantısında herhangi bir sayıda test gerçekleştirilebilir ve test sayısı ve süresi kendiliğinden yapılandırılabilir. Tüm testler ekranın ortasındaki kırmızı çarpı işaretine bakılarak başlatılır.
Şimdi, Psychlab'daki bu test görevlerinin örneklerine bir göz atalım.
1. Sürekli kimlik , Önünüzdeki eşyanın hiç görünüp görünmediğine karar vermek için, yenisi için sola, eskisi için sağa bakın.
2. Keyfi görsel haritalama , Önlerinde bir nesne ve dört etiket belirir ve etiketlerden yalnızca biri yeşildir. Bu nesne bir dahaki sefere tekrar ortaya çıktığında, karşılık gelen yeşil etiketin nerede olduğunu belirlemek gerekir.
3. Algılamayı değiştir , Önceki ve sonraki iki resim grubunun değişip değişmediğini değerlendirin.
4. Görme ve kontrast duyarlılık testi (Landolt C). Ekranın ortasında bir C halkası var. Öznenin boşluğun yönünü göstermesi gerekiyor.C halkası küçülmeye devam edecek ve kontrast azalmaya devam edecek.
5. Cam desen testi , İki desenden hangisinin eşmerkezli bir cam desen olduğunu belirlemek için.
6. Görsel Arama , Bir yığın nesnede aradığınız hedefi bulun.
7. Rastgele nokta hareket yönü kararı , Ekranın ortasındaki dairesel alanda çok sayıda rastgele nokta olacak ve ana hareket yönünü göstermeniz gerekiyor. Rastgele noktaların çok hızlı hareket etmesi gerçekten zor.
8. Çoklu nesne takibi . Resimde iki renkten oluşan bir grup top var ve sonra hepsi tek tip renklere dönüşüyor ve hareket etmeye başlıyor.Son olarak, küçük bir top belirleyin.Topun orijinal rengini yargılamalısınız.
Aslında bu görevleri okuduktan sonra Qubit şunu söylemek istiyor:
Bu ... AI için biraz utanç verici mi?
Bununla birlikte, DeepMind yazıda derin pekiştirme öğrenme aracısının "Git mavi balonu bul" doğal dil talimatını anlayabildiğinden, IQ'nun kötü olmadığı görülebildiğini ve bu psikofizik ve bilişsel psikoloji alanlarını bütünleştirme zamanının geldiğini söyledi. Deneysel plan öğrenmeleri için çıkarıldı.
Daha fazla meslektaşın yapay zekayı öğretmek için daha fazla görev oluşturmasına izin vermek için DeepMind bir Psychlab API açtı . Bu API, lua dilinde yazılmış basit bir GUI çerçevesidir.Psiklab'de sanal ekrana widget yerleştirerek görevler oluşturabilirsiniz.
Bu widget'lar herhangi bir görsel görüntü olabilir Ajanın bakış merkezi widget alanına girdiğinde veya buradan çıktığında olduğu gibi bir olay meydana geldiğinde, widget bir geri arama çağırır. Bu çerçeve, tamamlandıktan sonra geri aramaları geri aramak için zamanlayıcıların kullanılmasını da destekler.
Deneyde temsilci de ödüllendirilecek. Deney doğru şekilde tamamlandığında, temsilcinin ödülü 1, diğer adımlar 0'dır.
DeepMind, psikoloji ile modern yapay zeka arasında bir bağlantı noktası kurmak için bu "laboratuvarı" kurdu. Bu şekilde, psikoloji bilişsel teoriyi doğrulamak için yeni bir model buldu ve AI araştırması daha fazla ayrılık kazandı. Bilişsel temel görevler.
Ayrıca daha önce böyle bir araştırmanın ajanın tasarımını optimize etmeye yardımcı olduğunu söylemiştik. Muhtemelen inanmıyorsunuzdur, bu yüzden DeepMind başka bir kestaneye atıfta bulundu: 2016'da Jaderberg ve diğerleri tarafından önerilen çok güçlü bir kestane UNREAL ajanı bu psikolojik testleri iyileştirmek için kullanabilir.
DeepMind, UNREAL ajanının görsel hassasiyetini test etmek için yukarıda listelenen 4., 5. ve 6. testleri kullandı: Landolt C.
GERÇEK DIŞI ve insan görsel hassasiyetinin karşılaştırılması
Cam desen testinde GERÇEK DIŞI ve insan psikometrik eğrileri
Hedefe işaret etme görevinde, UNREAL hedefin boyutuna ve tuzağa çok duyarlıdır.Öğrenme hızı, hedef büyük olduğunda çok daha hızlıdır ve yem büyük olduğunda nihai performans ideal değildir.
Çeşitli deneyler, UNREAL'in büyük hedef uyaranları daha hızlı öğreneceğini göstermiştir ve bu keşif aynı zamanda Foveanın basit bir görsel modelinde özel iyileştirmeler , UNREAL'in Psychlab görevleri ve standart DeepMind Lab görevleri üzerindeki performansını önemli ölçüde geliştirdi.
Psychlab makalesinin Joel Z. Leibo, Cyprien de Masson d'Autume, Daniel Zoran, David Amos, Charles Beattie, Keith Anderson, Antonio García Castañeda, Manuel Sanchez, Simon Green, Audrunas Gruslys, Shane Legg dahil olmak üzere birçok yazarı vardır. Demis Hassabis, Matthew M. Botvinick, hepsi DeepMind'den.
Bu Psychlab'i de kullanmak istiyorsanız ... kağıt DM-Lab'da açık kaynaklı olduğundan bahsetmişti, güncellenip güncellenmediğini bilmiyorum, bulduğum sınıf arkadaşlarım çığlık attı ~
https://github.com/deepmind/lab
Kağıt adresi:
https://arxiv.org/abs/1801.08116
BTW, PDF okumak biraz yoruldu. Qubit'ler artık makale okumak için vicdan tarafından tavsiye edilen arxiv makyajını kullanmayı tercih ediyor.
adres:
https://www.arxiv-vanity.com/papers/1801.08116/
