Гибридная ИИ-модель создает реалистичные изображения в 9 раз быстрее новейших инструментов

Гибридная ИИ-модель HART создана для быстрого и качественного создания изображений.
HART сочетает авторегрессионные модели для предсказания сжатых токенов и диффузионные модели для остаточных токенов.
Модель генерирует изображения в 9 раз быстрее стандартных диффузионных моделей и потребляет меньше ресурсов.
HART может использоваться для создания изображений, сравнимых по качеству с моделями с 2 млрд параметров, но быстрее.
Метод требует на 31% меньше вычислительных ресурсов по сравнению с современными моделями.
HART подходит для исследователей робототехники и гейм-дизайнеров, которым нужна оперативная визуализация идей.
Архитектура HART масштабируема и применима к видео/аудио, что делает ее полезной для мультимодального ИИ.