- Китайские ученые представили фотонный микрочип LightGen для поддержки крупномасштабных генеративных моделей ИИ.
- LightGen - первый полностью оптический вычислительный чип для семантических и визуальных генеративных моделей.
- Оптические чипы обеспечивают высокую скорость и параллелизм, но сложно применять их к генеративному ИИ из-за масштаба моделей.
- LightGen преодолевает три узких места: интеграция миллионов оптических нейронов, реализация оптического преобразования размерностей и разработка алгоритма обучения оптических генеративных моделей.
- Чип обеспечивает полный цикл «вход - понимание - семантическая обработка - генерация» на оптическом чипе.
- LightGen способен выполнять семантическую генерацию изображений, 3D-генерацию, генерацию видео высокой четкости, шумоподавление и перенос признаков.
- Производительность LightGen сравнима с ведущими электронными нейронными сетями, такими как Stable Diffusion и NeRF.
- При использовании современных устройств LightGen может достичь повышения вычислительной мощности на семь порядков и энергоэффективности на восемь порядков.
В ходе испытаний LightGen доказал способность выполнять семантическую генерацию изображений с высоким разрешением, 3D-генерацию, генерацию видео высокой четкости и семантическое управление, а также решать такие задачи, как шумоподавление и перенос признаков.