Felçli beşerler yapay zeka sayesinde konuşacaklar! Bunu da gördük!
UC San Francisco ve UC Berkeley’den araştırmacılar, Edinburgh merkezli Speech Graphics paydaşlığıyla öncü bir gayretle, felçli bir bayanın, beyinle denetim ettiği dijital bir avatar aracılığıyla özgürce konuşmasına imkan tanıyan, çığır açan bir bağlantı sistemi tasarladılar.
Beyin-Bilgisayar Arayüzleri (BCI’ler), gri maddenizin ürettiği analog sinyalleri izleyen ve bunları bilgisayarların anladığı dijital sinyallere dönüştüren aygıtlardır.
Bu çalışma için, UCSF nörolojik cerrahi lideri Dr.EdwardChang liderliğindeki araştırmacılar, birinci olarak hastanın beynindeki konuşma merkezine 253 pinli bir elektrot dizisi yerleştirdiler. Bu sondalar olağanda çenesindeki, dudaklarındaki ve lisanındaki kasları harekete geçirecek olan elektrik sinyallerini izleyip yakaladı ve bunun yerine bunları kafatasındaki kablolu bir irtibat noktası aracılığıyla bir işlemci bankasına iletti.
Bu bilgi süreç yığını, birkaç haftalık eğitim boyunca hastanın 1000’den fazla sözdeki elektrik sinyali modellerini tanıyan, makine tahsili yapan bir yapay zekayı barındırıyordu.
Felçli beşerler yapay zeka sayesinde konuşacaklar! Bunu da gördük!
Araştırmacılar, hastanın avatarını oluşturmak için Halo Infinite ve The Last of Us Part II’deki fotogerçekçi yüz animasyonu teknolojisini geliştiren birebir şirket olan Speech Graphics ile birlikte çalıştı.
SG’nin teknolojisi, ses girişinin tahliline dayanarak bir yüzün yapacağı gerekli kas-iskelet sistemi hareketlerini “tersine mühendisleştiriyor” ve akabinde bu bilgileri bir avatara dönüştürülmek üzere gerçek vakitli olarak bir oyun motoruna aktarıyor. Hastadan gelen zihinsel sinyaller direkt avatarla eşleştirildiğinden, hasta hislerini söz edebiliyor ve kelamsız olarak da irtibat kurabiliyordu.