- Ученые успешно реконструировали динамичное видео из активности клеток зрительной коры мыши.
- Алгоритм считывал вспышки кальция в 8 тысячах нейронов и восстанавливал видео.
- Технология достигла беспрецедентной точности, на кадрах можно различить силуэты людей и контуры предметов.
- Реконструкция приближает науку к пониманию искажения физической реальности мозгом.
- Ученые использовали двухфотонную кальциевую микроскопию для фиксации активности мозга животных.
- Динамическая модель нейронного кодирования применялась для расшифровки данных.
- Пиксельная корреляция между оригиналом и реконструкцией составила 0.57, что более чем в два раза превышает предыдущие попытки чтения статических изображений.
Ученые не использовали готовые генеративные сети для дорисовки смысла. Они опирались на сырые данные, считывая импульсы отдельных нейронов с частотой восемь герц на площади мозга размером 630 на 630 микрометров. Они напрямую заглянули в операционную систему зрения млекопитающего, а не пытались угадать ассоциации.