Учёные из Института Вейцмана (Израиль) разработали нейросеть, которая по снимкам фМРТi воссоздаёт изображение, которое в этот момент видит человек. Модель отдельно анализирует структуру и содержание картинки, благодаря чему результат получается заметно чётче, чем у предыдущих подобных попыток — сохраняются композиция, расположение объектов и цвета.

Технология работает и в обратную сторону: ИИ может предсказывать активность мозга по тому, на что смотрит человек. Авторы надеются применить метод для общения с пациентами с синдромом «запертого человека», изучения работы мозга и в перспективе — для записи и визуализации снов, фантазий, видео и звуков, что уже поднимает вопросы о приватности мышления.

• Разработку представили учёные Института Вейцмана (Израиль)
• Модель раздельно анализирует структуру и содержание изображения, что повышает чёткость реконструкции по сравнению с прежними аналогами
• На результатах всё ещё встречаются артефакты и ошибки: например, торт на исходной картинке превращался в сгенерированный ИИ бутерброд
• ИИ умеет работать и в обратном направлении — предсказывать активность мозга на основе того, что видит человек
• Планируемое применение: коммуникация с пациентами с синдромом «запертого человека», исследование работы мозга, в будущем — восстановление видео, звуков, мыслей и снов
• Расширение технологии до чтения снов и мыслей уже вызывает серьёзные вопросы о приватности, отмечает 3DNews