Используя функциональную МРТ и языковые модели, исследователи показывали участникам эксперимента тысячи коротких беззвучных видеороликов и просили их мысленно воспроизвести увиденное.
В это время сканер фиксировал активность мозга, а затем на основе этого формировал описания.
«Наш метод показывает, что мозг хранит структурированные представления опыта еще до того, как они становятся словами. Мы не читаем мысли — мы интерпретируем содержание, которое мозг уже закодировал», — пояснил ученый Томоясу Хорикава.
Исследование открывает перспективы для создания систем коммуникации для людей, утративших возможность говорить или писать, а также для изучения воображения, сновидений и эмоций.