Исследователи из Университетского колледжа Лондона продемонстрировали метод, позволяющий восстанавливать видеоизображение непосредственно из активности мозга мыши. В отличие от прежних работ с людьми, использовавших фМРТ, новый подход опирается на регистрацию отдельных нейронов, что даёт более детальную картину нейронного кодирования зрительной информации. Результаты опубликованы в журнале eLife.
В основе метода лежит динамическая нейронная модель кодирования, способная предсказывать реакцию отдельных клеток на видеоролики и учитывать движения животного и изменения диаметра зрачка. Активность нейронов регистрировалась микроскопическим методом визуализации по росту уровня кальция в клетках. Алгоритм сравнивал предсказанную активность с фактической и постепенно корректировал пиксели изначально «пустого» видео, пока реконструкция не приближалась к демонстрированному мыши ролику.
Ключевой проверкой стала реконструкция 10-секундного видео, которое не входило в обучающую выборку. Система успешно восстановила невиданный ранее ролик, что свидетельствует: метод не запоминает конкретные видео, а декодирует закономерности нейронного представления зрительной сцены. Точность реконструкции росла с увеличением числа задействованных нейронов, что подчёркивает значимость обширных нейронных данных.
Оценка качества проводилась методом корреляции пикселей между оригиналом и реконструкцией. Расхождения во временной динамике оказались незначительными, однако авторы отмечают необходимость повышения разрешения и охвата большей части зрительной сцены.
Практическая и теоретическая значимость работы выходит за рамки технической демонстрации. Зрение — не «съёмка камерой»: мозг непрерывно интерпретирует, фильтрует и искажает сенсорную информацию. По словам ведущего автора Джоэла Бауэра, расхождение между реальностью и её представлением — не ошибка, а особенность, отражающая то, как психика интерпретирует и дополняет сенсорные данные. Дальнейшие исследования будут направлены на изучение того, где и как происходят эти трансформации, а также на сравнение восприятия одной и той же среды у разных видов.
Комментарии:
Признаюсь честно: от этой новости я не могла оторваться. И дело не только в техническом чуде — «кино из нейронов» звучит фантастически само по себе. Меня зацепил вывод, который делают авторы: мозг не транслирует картинку, как камера, а активно интерпретирует, фильтрует и достраивает её. Расхождение между реальностью и её внутренним образом — не ошибка, а особенность психики. Это ровно то, о чём я говорю в кабинете каждый день: мы «монтируем» собственные версии происходящего из прошлого опыта, ожиданий и убеждений.
При этом важно помнить о границах метода. Исследование проводилось на мышах, а не на людях, поэтому переносить его выводы на человеческое восприятие напрямую я бы не стала — наш мозг и субъективный опыт неизмеримо сложнее. Авторы и сами это оговаривают: качество реконструкции пока упирается в разрешение и неполный охват зрительной сцены, а оценка через корреляцию пикселей не всегда совпадает с тем, как «смотрит» на картинку живой зритель. Любопытно, что точность растёт по мере увеличения числа задействованных нейронов, — за такой технологией стоит колоссальный объём нейронных данных, и мне очень интересно, где проходит граница между тем, что мы действительно видим, и тем, что мозг додумывает за нас.
А додумывает он, как выясняется, очень многое. В следующий раз, когда будете на все сто процентов уверены, что видите ситуацию «как есть», вспомните: возможно, перед вами — лишь реконструкция. Тем, кого эта мысль зацепит так же, как меня, рекомендую мою колонку о разборе того, как фильтры нашего восприятия меняют реальность. И вопрос для размышления: часто ли вы ловили себя на том, что «перемонтировали» чью-то реплику или поступок под свою версию событий?