Ученые восстановили видео по активности нейронов мыши

Исследователи использовали двухфотонную кальциевую визуализацию: в нейроны животных ввели светящийся белок, который вспыхивает при передаче сигнала. Пока мыши смотрели десятисекундные ролики, микроскоп фиксировал эти вспышки. Затем нейросеть проанализировала данные, учитывая дополнительные параметры состояния организма — скорость бега и размер зрачка. В отличие от предыдущих попыток, где нейросети часто дорисовывали детали, которых не было в оригинале, этот метод работает строго на основе сигналов конкретных нейронов. Если мозг не считал фрагмент картинки, он не появится на итоговом видео.

Коэффициент корреляции между оригиналом и реконструированной картинкой составил 0,57. Это почти в два раза выше показателей, достигнутых ранее при работе со статичными изображениями. Несмотря на успех, технология имеет пределы: она не считывает мелкие детали, а временное разрешение ограничено способностью мышиного глаза воспринимать мерцание лишь до 14 Гц. Авторы работы планируют использовать этот инструмент, чтобы понять, как биологические системы выделяют важное в потоке данных и предсказывают развитие событий в кадре.