Japon bilim adamlarının tanrılar üzerine araştırması: dramayı takip edin ve İngilizce öğrenin; göz hareketleri veri analizi kendi altyazılarınızı özelleştirecek

İngilizce öğrenmenin en iyi yolu Amerikan TV şovlarını fırçalamak mı? Ancak, bu tür bir "öğrenme" sürecinin çok eziyetli olduğu söylenebilir, dinleme pratiği yapmak için genellikle altyazıları kapatıyorum ve bir süre sonra uyuyakalıyorum ve tüm altyazılar açıldığında gözlerim sadece Çince. Bir oyunu izledikten sonra birkaç kelime öğrenmedim ve oyunu izlemenin eğlencesini feda ettim.

Dramayı bilimsel olarak nasıl takip edebilir ve İngilizce öğrenebiliriz? Son zamanlarda Japon araştırmacılar, TV şovlarını izlerken İngilizce öğrenmek için gerçekten bir dizi eser geliştirdiler: Amerikan TV şovlarını izlerken göz hareketlerinizi kaydedebilir, gerçek İngilizce seviyenizi anlayabilir ve ardından özel Amerikan TV altyazılarınızı özelleştirmek için makine öğrenimi analizini kullanabilirsiniz. Kulağa çok etkili ve acısız geliyorsa, bu sihirli aracın nasıl çalıştığına bir göz atalım. Tokyo Üniversitesi ve Sony Bilgisayar Bilimi Laboratuvarı araştırma ekibi bir İngilizce öğrenme sistemi "SubMe" yayınladı. Altyazılı bir video izlerken kullanıcının bakış hareketini izleyerek İngilizce yeterliliğini tahmin edebilir ve kullanıcının İngilizce yeterliliğine uygun İngilizce öğrenme materyalleri oluşturabilir.

Araştırma projesi makalesinin başlığı "SubMe: Eye Tracking Kullanarak İngilizce Beceri Tahminine Sahip Etkileşimli Bir Altyazı Sistemi". Yazarlar, Tokyo Üniversitesi ve Sony Bilgisayar Bilimleri Laboratuvarı araştırma ekibinden iki Japon akademisyen Katsuya Fujii ve Jun Rekimoto'dur.

Bu makale ayrıca Augmented Human International Conference 2019'da (Augmented Human International Conference 2019) yayınlandı. İki araştırmacıya göre, bu çalışmanın fikri başlangıçta bir psikoloji dersinden geldi ve öğrencilerin "Star Wars" kredilerini kaydırırken izlediklerinde kullanıcının bakışlarını kaydetmelerini gerektirdi. Katsuya ve Jun kayıtları entegre ettiklerinde, izleyicilerin görüş mesafesinin büyük ölçüde değiştiğini ve ana farkın İngilizce dinleme seviyesinde olduğunu, daha düşük İngilizce yeterliliğine sahip kullanıcıların daha dikey bakış hareketine sahip olma eğilimindeyken İngilizce yeterliliğinin daha yüksek olduğunu gördüler. Kullanıcıların oranı daha çok ekranın alt kısmına odaklanıyor.

(a) Daha yüksek İngilizce seviyesine sahip bir izleyicinin bakış izleme diyagramı. (b) Düşük İngilizce yeterliliğine sahip izleyicilerin bakış izleme çizelgesi.İkisi bu analizin sonuçlarını çok ilginç buluyor. Belki de ikinci dil öğrenenlerin İngilizce öğrenmeleri için daha iyi bir yol sağlayabilir. Bu nedenle Katsuya ve Jun, bu analize dayanarak, gözlerini hareket ettirerek İngilizce yeterliliğini ayırt edebilen bu araştırmaya başladılar. İki kişi, altyazılı bir videoyu izlerken kullanıcının gözlerinin hareketiyle her bir kullanıcının İngilizce seviyesini tahmin edebilen ve daha sonra toplanan verileri, mevcut düzeyde öğrenilmesi gereken İngilizce kelimelerin Japonca çevirisini ve altyazılarını etkinleştirmek için kullanabilen bir sistem önerdi. Birlikte gösterin.

SubMe sisteminin önemli donanımı: göz izleyici

Bu sistemin çalışması önce çok olgun bir donanım koşulu gerektirir: göz izleyici. Aslında, göz hareketi verilerini analiz ederek insan okuduğunu anlama yeteneğini tahmin etmeye yönelik birçok çalışma yapılmıştır. Okumada göz hareketi çalışmaları 19. yüzyıla kadar uzanmaktadır. Daha ünlü kitaplar arasında Quantz'in 1897'deki "Okuma Psikolojisindeki Sorular", 1906'daki Dearborn'un "Okuma Psikolojisi" ve 1908'deki Huey'in "Okuma Psikolojisi ve Eğitimi" sayılabilir. öğren ". Teknolojinin gelişmesiyle birlikte, göz izleme cihazı-göz izleyicinin doğruluğu çok yüksek hale geldi, bu nedenle göz hareketi yörüngesini kaydetmek, diğer yaşam aktivitelerini izlemek kadar uygulanabilir olabilir.

Göz izleme teknolojisinin web sitesi sayfa düzeni araştırması, kullanıcıların kendilerini daha pürüzsüz ve rahat hissetmelerini sağlar Sayfalara göz atmanın alışılmış bakış eyleminde, web sitesi sayfalarının içeriği, izleyicilerin ihtiyaç duyduklarını bulmalarını kolaylaştırmak için optimize edilir. Özellikle göz izleme teknolojisi, test edilen kişinin göz hareket yörüngesini kaydeder. Bir yandan kullanıcının göz yörüngesini ve göz atma alışkanlıklarını analiz ederken diğer yandan kullanıcının görsel dikkatini ve sayfanın her bir bölümüne bakışını tamamen ve objektif bir şekilde geri yükler. Kaliteyi takip edin ve odaklanın. Katsuya ve Jund, her bir İngilizce seviyesindeki kullanıcının gözlerinin hareketini kaydetmek için bir PC'ye bağlı bir Tobii EyeTracker 4C cihazı kullandı ve ardından bunları analiz etti. Bu analizin kelimelere değil, göz sabitleme sayısına ve her bir alt başlık satırında harcanan süreye dayandığını belirtmekte fayda var.

Analiz sonuçları, İngilizce yeterliliği düşük olan kullanıcıların daha yüksek saplantılara sahip olduklarını ve altyazılara daha fazla zaman harcadıklarını göstermektedir.

Bakış takibinin görselleştirilmesi: (A) ana dili İngilizce olan izleyiciler; (B) üst düzey İngiliz izleyiciler; (C) düşük seviyeli İngiliz izleyiciler Yazılım: makine öğrenimi, özel altyazıları özelleştirmenize yardımcı olur Bundan sonra, araştırmacılar analiz sonuçlarını makine öğrenimi için rastgele bir ormana giriyor.

İlk olarak, her kelimenin zorluğunu hesaplamak için Çağdaş Amerikan İngilizcesi Corpus'u (COCA) kullandılar. Ardından kullanıcının anlayamayacağı tüm altyazıların ortalama puanını alın (puan ne kadar düşükse, bilinmeyen kelimeler o kadar fazla), elde edilen değerden kullanıcının İngilizce seviyesini tahmin edin ve ardından kullanıcı için en uygun İngilizce öğrenme materyallerini görüntüleyin. Gösterim yöntemlerinden biri olarak her kullanıcının İngilizce seviyesine göre sadece bilinemeyebilecek İngilizce kelimeler Japonca'ya çevrilerek altyazılarda gösterilir.

Altyazılarda bilinmeyen İngilizce kelimeleri aynı anda görüntüleyerek İngilizce öğrenin. (Japonca altyazı: flört: bir tarihte) Bu sayede kullanıcılar, videoyu daha iyi anlayabilmek için altyazıları izlerken bilmedikleri kelimelerin çevirilerini izleyebilir ve aynı zamanda İngilizce seviyelerine en uygun olan bu tür öğrenme sayesinde daha etkili öğrenebilirler. Öğrenme.

İngilizce öğrenenlerin tüm dünyada izledikleri "Friends" ve altyazıların kombinasyonu, altyazı sistemini özetler ve Amerikan dramalarını izleme ve İngilizce öğrenme süreci bir bakışta anlaşılır: 1. Önce bir Amerikan dramasını izleyin ve göz hareketlerinizi kaydederek altyazıları izlediğinizi onaylayın Sıklık; 2. Buna göre İngilizce yeterliliğinizi tahmin edin ve ardından İngilizce yeterliliğinize uygun bir dizi seçin; 3. İngilizce yeterliliğinize göre özel altyazıları özelleştirin ve sadece aşina olmadığınız kelimelerin hedef tercümesini yapın; 4. İngilizce yeterliliği hızla gelişir.

Araştırma sonuçlarına göre, subme sistemi altında, Amerikan dramalarını "yeni kelimeler öğrenirken" izlemenin etkisi, geleneksel altyazılara göre önemli ölçüde geliştirildi. Ve şaşırtıcı olan şey, kullanıcı geri bildirimlerine göre, İngilizce öğrenirken bu film izleme şeklinin kullanıcıların zevk endeksini de artırmasıdır. Gerçek bir "drama izleyerek öğrenme" ve "eğlence yoluyla eğitim" olarak tanımlanabilir. .

Kullanıcı geri bildirimi sorusu 3: Bu aracı kullanırken görüntüleme deneyiminiz iyileşti mi? Çoğu kullanıcı bu soruya "katılıyorum" cevabını verdi.Son olarak, umarım bu araştırma sektöre bir an önce girebilir.

Editör: Jin Wanxia Sorumlu Editör: Jiang Peng

Kaynak: WeChat genel hesabı "Büyük Veri Özeti"

Büyü ... Amerika Birleşik Devletleri ve Rusya'nın liderleri arasındaki bu buluşma gerçekten büyülü!
önceki
"Çin'e karşı ABD-Rusya ortak direnişi" mi? Senarist Mars'tan mı geliyor?
Sonraki
Bunlar aşkla ilgili en eski 81 kod. Zhuang halkının "Poya Şarkı Kitabı" benzersiz bir çekicilik taşıyor.
Kadınlar geniş paçalı pantolon giyiyor, bu 3 noktadan özellikle yaz aylarında kaçının
Güney Koreli şarkıcı Jung Joon-young, gizlice müstehcen videolar çekip dağıttığı için tutuklandı, 10 kişi öldürüldü
78 yaşındaki bir hayran, 66 yıldır kraliyet ailesini takip etti ve resmi fotoğraftan daha doğal olan gerçek Diana ve Kraliçe'nin fotoğrafını çekti.
Not! 26 Mart'tan itibaren Alipay, 2.000 RMB'yi aşan kredi kartlarının geri ödenmesi için bir ücret alacaktır.
Taksi sürücüleri, dolambaçlı yollardan 50 yuan daha fazla kazandılar ve 2000 yuan para cezasına çarptırıldılar! Şangay Belediye İletişim Komisyonu taksilerdeki beş "zehirli çiviyi" kaldırdı
Dünyaya güzel bir Çin hikayesi anlatın - "Thrilling Dream" adlı sahne oyunu Auckland Sanat Festivali'nde çarpıcı bir şekilde göründü
70'lerde doğan kadınlara öneriler: Çok eski moda giyin, günümüzde popüler, zayıf ve daha çekici
Vergi indirimi sonrası! Alışveriş sepetinizi kontrol edin Satın almak istediğiniz ürünlerin fiyatı düştü mü?
Şüpheli bir fizik muayene sırasında hasta bir kızla karşılaştım ve 1,82 metrelik yakışıklı çocuk orada ağladı
Güzel ev, duvarda aniden büyük bir delik belirdi! Komşumun evine ulaşabilirim
Pekin'de bir deprem daha!
To Top