Yapay zeka sayesinde: İnsan aklındaki görüntüyü sözcüğe dönüştüren yöntem

IMG_3714

Japonya’da yapay zeka sayesinde insan aklındaki görüntüleri sözcüklere dökebilen ‘zihin betimleme’ adlı bir yöntem geliştirdi.

CNN’in haberine göre Japon bilim insanı Horikawa Tomoyasu, 22-37 yaş aralığında ana dili Japonca olan altı gönüllüyle yürüttüğü çalışmada zihinsel imgelerin yazılı betimlemelere aktarılma sürecini araştırdı.

Deneyde katılanlara nesnelerden doğa manzaralarına, insan hareketlerinden günlük aktivitelere kadar çeşitli içeriklere sahip 2 bin 180 video izletildi.

Beyin aktiviteleri kısa süreli videolar izlenirken fonksiyonel manyetik rezonans görüntüleme (fMRI) cihazıyla kaydedildi.

Videoların içeriğine ilişkin yazılı metinler önce büyük dil modelleri tarafından sayısal dizilere dönüştürüldü. Ardından basit yapay zeka bu sayısal dizilerle videolar izlenirken kaydedilen beyin aktivitelerini eşleştirecek şekilde eğitildi. 

Katılımcıların videoları izlerken veya izlediklerini hatırlarken zihinlerinde canlandırdığı görüntüleri cümlelere dönüştürmeyi başaran Horikawa, geliştirdiği tekniğe ‘zihin betimleme’ adını verdi.

Bilim insanı bu yöntemin beynin görsel bilgiyi nasıl işlediğini çözümleyerek nesneleri, mekanları, eylemleri, olayları ve aralarındaki ilişkileri betimleyen ayrıntılı metinler üretebildiğini söyledi.

Tekniğin beyindeki dil merkezlerinden bağımsız çalıştığını belirten Horikawa, bunun nörodejeneratif hastalıklar nedeniyle konuşma yetisini kaybeden kişilerin iletişim kurmasına yardımcı olabileceğini düşünüyor.

Japonya’daki Nippon Telegraph ve Telephone telekomünikasyon şirketinin İletişim Bilimleri Laboratuvarı’nda çalışan Horikawa’nın araştırması ‘Science Advances’ dergisinde yayınlandı.

Exit mobile version