Konuşamayanlara umut olacak! Zihindeki görüntüleri sözcüklere dönüştüren yeni teknoloji
Konuşamayanlara umut olacak! Zihindeki görüntüleri sözcüklere dönüştüren yeni teknoloji
Japonya'da bir araştırmacı, fMRİ ve yapay zeka kullanarak insanların zihinlerinde canlandırdığı görselleri sözcüklerle ifade eden 'zihin betimleme' adlı yeni bir yöntem geliştirdi.
Özetle
Dinle
Konuşamayanlara umut olacak! Zihindeki görüntüleri...
Kaydet
Teknoloji
51 dk önce
Japonya'lı bir araştırmacı, beyin görüntüleme ve yapay zekâ yöntemlerini kullanarak insanların zihinlerinde canlandırdıkları görüntülerin yazılı betimlemelere dönüştürülebilen 'zihin betimleme' adını verdiği yeni bir tekniği geliştirdi.
- Deneyde, katılımcılara çeşitli videolar gösterildi ve beyin aktiviteleri fMRİ cihazıyla kaydedildi.
- Büyük dil modelleri ve basit yapay zeka modelleri kullanarak videolarla beyin aktiviteleri eşleştirildi.
- Bu yeni teknik, beynin görsel bilgilere nasıl dönüştürdüğünü anlamamızı sağlayabilir.
- Teknolojinin konuşma yeteneğini kaybeden kişilerin iletişim kurmasına yardımcı olabilir.
0:00
0:00
1x
Japonya'da bir araştırmacı, beyin görüntüleme yöntemleri ve yapay zekadan yararlanarak insanların zihninde canlandırdığı görüntüleri sözcüklere dökebilen "zihin betimleme" adlı yeni bir yöntem geliştirdi.
Japonya'da bulunan Nippon Telegraph ve Telephone telekomünikasyon şirketinin İletişim Bilimleri Laboratuvarı'nda çalışan araştırmacı Horikawa Tomoyasu, 22-37 yaş aralığında, ana dili Japonca olan 6 gönüllüyle yürüttüğü çalışmada, zihinsel imgelerin yazılı betimlemelere aktarılma sürecini araştırdı.
Deney süresince katılımcılara nesnelerden doğa manzaralarına, insan hareketlerinden günlük aktivitelere kadar çeşitli içeriklere sahip 2 bin 180 video gösterildi.
Katılımcıların beyin aktiviteleri, izledikleri kısa süreli videolar sırasında fonksiyonel manyetik rezonans görüntüleme (fMRI) cihazıyla kaydedildi.
Videoların içeriğine ilişkin yazılı metinler önce büyük dil modelleri tarafından sayısal dizilere dönüştürüldü, ardından basit yapay zeka modelleri, bu sayısal diziler ile videolar izlenirken kaydedilen beyin aktivitelerini eşleştirecek şekilde eğitildi.
Zihindeki görüntüleri sözcüklere dönüştüren yeni teknoloji
"ZİHİN BETİMLEME" ADINI VERİLDİ
Deney kapsamında, katılımcıların videoları izlerken veya izlediklerini hatırlarken zihinlerinde canlandırdığı görüntüleri cümlelere dönüştürmeyi başaran Horikawa, geliştirdiği tekniğe "zihin betimleme" adını verdi.
Horikawa, bu yeni yöntemin, beynin görsel bilgiyi nasıl işlediğini çözümleyerek nesneleri, mekanları, eylemleri, olayları ve aralarındaki ilişkileri betimleyen ayrıntılı metinler üretebildiğini söyledi.
Tekniğin, beyindeki dil merkezlerinden bağımsız çalıştığını vurgulayan Horikawa, bunun nörodejeneratif hastalıklar nedeniyle konuşma yetisini kaybeden kişilerin iletişim kurmasına yardımcı olabileceğini belirtti.
Çalışma, "Science Advances" dergisinde yayımlandı.
Yayın Tarihi
|
Bizi Takip Edin
YORUMLAR
