💻 ИИ учат превращать мысли в картинки
Израильские ученые создали ИИ-инструмент, который по сканам мозговой активности воссоздает изображения, на которые посмотрел человек.
Модель-декодер обучили на открытых данных восьми добровольцев, каждый из которых просмотрел около 9 тыс. картинок, лежа в томографе. По сканам их мозга она научилась «угадывать», как на изображении расположены цвета и что на нем показано (например, «бананы на тарелке»). По этим подсказкам отдельная нейросеть рисует итоговую картинку.
Вторая модель, энкодер, решает обратную задачу: она предсказывает, как мозг отреагирует на то или иное изображение. Обе модели тренируются в паре: энкодер создает предполагаемый скан для новой картинки, а декодер пытается восстановить по нему исходное изображение. Так систему можно обуч…