Konuşma ve Yüz İfadelerini Çözen Beyin Bilgisayar Arayüzü

  • 18/09/2023

Konuşma ve Yüz İfadelerini Çözen Beyin Bilgisayar Arayüzü

California San Francisco Üniversitesi'ndeki araştırmacılar, şiddetli felçli birinin dijital avatar biçiminde hem konuşma hem de yüz ifadeleriyle iletişim kurmasına olanak tanıyan bir beyin bilgisayar arayüzü geliştirdiler. Bu buluş, önceki beyin bilgisayar arayüzü sistemlerinin yalnızca konuşmayı sağlamasıyla mümkün olanı ilerletiyor ve doğal iletişimin önemli bir yönü olan yüz ifadelerini de kapsayacak şekilde insanların daha eksiksiz iletişim kurmasına olanak tanıyor. Sistem, yüz kaslarına yönelik beyin sinyallerini yakalayan ve esasen karmaşık yüz ifadelerini çözen elektrotlar içeriyor.


Beyin bilgisayar arayüzleri, aksi halde iletişim kurmakta zorluk çekebilecek veya hiç iletişim kuramayacak durumda olan ciddi felçli kişilerin zihinlerine bir pencere açmıştır. Motorlu tekerlekli sandalyelerin ve diğer robotik yardım cihazlarının kontrol edilmesi bu teknolojilerin bir yönüdür.


Buna rağmen bugüne kadar beyin bilgisayar arayüzleri temel konuşma yeteneklerini sunmaya odaklandı. Ancak insan iletişimi, temel konuşmadan daha karmaşıktır ve çok sayıda karmaşık yüz ifadesi ve diğer vücut dilini içerir. Bu son gelişmede, bu araştırmacılar, ağır felçli bir kadının, konuşmaya eşlik eden yüz ifadelerinden oluşan bir repertuar kullanarak iletişim kurması için bir araç olarak dijital avatarın kullanılmasına öncülük ettiler.


Üstelik yeni sistem, bu beyin sinyallerini dakikada 80 kelimelik bir hızla çözebiliyor; bu da, önceden var olan ticari teknolojilere göre hızda belirgin bir gelişme anlamına geliyor. Araştırmacılar, katılımcının beyninin konuşma ve yüz ifadeleriyle ilgili bölgelerine elektrotlar bağladılar ve sistemi, belirli kelimelere ve yüz ifadelerine karşılık gelen sinyalleri tanıyacak şekilde zamanla eğittiler.


Araştırmaya katılan Sean Metzger, “Doğruluk, hız ve kelime bilgisi çok önemli. Kullanıcıya zamanla neredeyse bizim kadar hızlı iletişim kurma ve çok daha doğal ve normal konuşmalar yapma potansiyelini veren şey budur.” dedi.

Kaynak: https://www.medgadget.com/