Yüz İfadelerini İzleyebilen, Şaşırtıcı Bir Kulaklık Geliştirildi

Araştırmacılar, giyenin yüz ifadelerini izleyebilen, üstelik bunu maske giyseniz bile yapabilen bir kulaklık sistemi geliştirdiler. C-Face adlı sistem, kulaklığı takan kullanıcının yanak hatlarını izleyerek bunları emojilere dönüştürüyor.Yazılımlar Gözümüz KulağımızBilkent Üniversitesi Bilgisayar Mühendisliği Bölümü tarafından görme engelliler için geliştirilmiş olan ‘OKU’ adlı program yeni sürümünde yeni özelliklere kavuştu.

Cornell Üniversitesi'nin SciFi laboratuvarının direktörü Cheng Zhang, C-Face ile ilgili yaptığı açıklamada bu cihazın mevcut kulağa takılan ve yüz ifadelerini izleyen teknolojilere göre daha basit ve daha az rahatsız edici olduğunu, aynı zamanda daha yetenekli olduğunu söyledi. Zhang, daha önceki teknolojilerin çoğunun yüze sensör takmayı gerektirdiğini, bu durumda bile sadece belirli yüz ifadelerini algılayabildiklerini söylüyor.

Kulaklık, kulağın altında bulunan iki RGB kamerayla yüz hatlarının hareketlerini izliyor. Yakalanan görüntüler bir derin öğrenme modeli ve bilgisayar görüşüyle yeniden oluşturuluyor, ardından evrişimli bir sinir ağı 2B görüntüleri analiz ediyor. Teknoloji, giyenin ağzının, gözlerinin ve kaşlarının konumunu ve yerini temsil eden 42 yüz ifadesi noktasını tercüme edebiliyor. Alınan sinyaller, nötr veya kızgın yüzler dahil sekiz emojiye dönüştürülebiliyor. Sistem, yüz hareketlerine bakarak müzik uygulamasındaki müziği kontrol etmenize de olanak tanıyor.