Beyin sinyallerinden dijital bedene: Kelimeler ve jestler avatara taşındı
Kaliforniya Üniversitesi San Francisco (UCSF) ekipleri, felç nedeniyle konuşma ve hareket yetisini kaybeden bireylerin, tek bir beyin implantından gelen sinyalleri okuyarak hem kelimeleri hem de mimikleri dijital bir avatar üzerinden iletebilen bir sistem geliştirdi. Nature Neuroscience’a yayınlanan makalede, bu sistemin, beyin sinyallerini aynı anda konuşma ve beden dili olarak çözen ilk örnek olduğu belirtiliyor. Makine öğrenmesi ile desteklenen teknoloji, baş sallama, omuz silkme ve el hareketleri gibi beden sinyallerini algılayıp avatar üzerinde gerçek zamanlı olarak yansıtabiliyor.
Araştırmanın başyazarı Samantha Brosler, sistemin “tek bir işlevi geri kazandıran önceki arayüzlerin ötesinde, farklı iletişim ve hareket biçimlerini tek bir arayüzle yeniden sağlamak” hedefinde olduğunu söyledi. Çalışma, iki katılımcı üzerinde gerçekleştirildi. Bir katılımcı 10, diğeri ise dört farklı iletişim hareketini denedi; her iki durumda da sistem, beyin sinyallerini yüksek doğrulukla çözümleyerek istenilen kelimeleri ve jestleri doğru şekilde yansıttı. Brosler, jestlerin konuşmaya anlam, vurgu ve duygu ekleyebileceğini, bazı durumlarda ise tamamen yerini alabileceğini belirtti.
Uzmanlar, bu tür iletişim protezlerinin, bilişsel yetilerini büyük ölçüde koruyan felç, ALS ve diğer nörolojik rahatsızlıklar nedeniyle konuşma yetisini kaybeden milyonlarca kişiye yardımcı olabileceğini ifade ediyor. Ancak sistem, ciddi bir beyin ameliyatı gerektirdiği için yaygın kullanıma hazır değil; ayrıca her hasta için ayrı bir eğitim sürecinin zorunlu olması, klinik yaygınlaşma için önemli engeller oluşturuyor. Bu zorlukların aşılması, teknolojinin geniş çapta uygulanabilirliğini belirleyecek kritik faktörler arasında yer alıyor.
