Skip to main content
RSS

Нейросеть читает воспоминания

Американским нейрофизиологам удалось расшифровать данные МРТ и воссоздать изображения лиц, о которых вспоминали участники эксперимента. О результатах они рассказали в статье, опубликованной в Journal of Neuroscience. 

Иллюстрация из обсуждаемой статьи


Участникам эксперимента один за другим показывали цветные снимки 1000 лиц. Учёные Хунми Ли (Hongmi Lee) и Брайс Кюль (Brice Kuhl)  из университетов штатов Нью-Йорк и Орегон при помощи МРТ регистрировали активность угловой извилины, ответственной за извлечение памяти. 

При помощи алгоритмов Eigenface в показанных фотографиях исследователи выделили 300 ключевых элементов. Эти алгоритмы позволяют рассматривать любое лицо как совокупность характеристик базового набора («палитры лиц») с различными весовыми коэффициентами. После анализа полученных данных с помощью системы искуственного интеллекта учёные обнаружили между ними корелляции: с определенными шаблонами активности нейронов ИИ соотнёс соответствующие компоненты лиц. 

Далее учёные продемонстрировали подопытным уже другой набор фотографий лиц. После этого участники эксперимента старались вспомнить увиденные лица, а исследователи фиксировали их мозговую активность с помощью МРТ. В итоге, используя ранее обнаруженные соответствия, им удалось воссоздать лицо, которое не было знакомо используемому ИИ. Точность этой реконструкции далека от идеала, но на ней вполне различимы ключевые особенности исходного лица 
 пол, цвет кожи, эмоциональное выражение и пр. 

Двумя годами ранее Брайс Кюль уже продемонстрировал возможность воссоздания незнакомого лица из данных функциональной МРТ в процессе наблюдения и обработки визуальной информации. Теперь же получилось сделать это и при воспоминании. Правда, пока не очень похоже. 

#Глубокое обучение   #Память  
14 Июня