Japonya’da bilim insanları, insan beynindeki görsel imgeleri gerçek zamanlı olarak metne dönüştürebilen öncü bir teknik geliştirmeyi başardı. “Zihin betimleme” adı verilen yöntem, fonksiyonel manyetik rezonans görüntüleme (fMRI) ve yapay zeka teknolojilerinin entegrasyonuyla çalışıyor.
YÖNTEMİN İŞLEYİŞİ
Nippon Telegraph and Telephone (NTT) şirketinin İletişim Bilimleri Laboratuvarı’nda araştırmacı Horikawa Tomoyasu liderliğinde yürütülen çalışmada, 22-37 yaş aralığındaki 6 Japon gönüllü yer aldı. Katılımcılara nesneler, doğa manzaraları, insan hareketleri ve günlük aktiviteleri içeren toplam 2.180 video izletildi.
Araştırmacılar, katılımcılar bu videoları izlerken fMRI cihazıyla beyin aktivitelerini kaydetti. Videolara ilişkin metinler önce büyük dil modelleri tarafından sayısal dizilere dönüştürüldü, ardından yapay zeka modelleri bu sayısal diziler ile beyin aktivitelerini eşleştirecek şekilde eğitildi.
POTANSİYEL UYGULAMA ALANLARI
Horikawa, geliştirdikleri tekniğin beyindeki dil merkezlerinden bağımsız çalıştığını vurgulayarak, “Bu yöntem, nörodejeneratif hastalıklar nedeniyle konuşma yetisini kaybeden kişilerin iletişim kurmasına yardımcı olabilir” açıklamasını yaptı.
Yöntemin, beynin görsel bilgiyi işleme şeklini çözümleyerek nesneleri, mekanları, eylemleri, olayları ve aralarındaki ilişkileri betimleyen ayrıntılı metinler üretebildiği belirtildi.
Çalışma, bilim dergisi “Science Advances”ta yayımlandı.
