Новая модель OpenAI ускоряет генерацию медиа для БЯМ в 50 раз

OpenAI разработала новый тип модели sCM для ускорения генерации мультимедиа в 50 раз.
sCM создает изображения за десятую долю секунды на GPU A100, в отличие от более 5 секунд для обычной диффузии.
Новая технология позволяет создавать высококачественные образцы за два шага выборки, сокращая вычислительные затраты.
Генеративные приложения ИИ в реальном времени становятся более осуществимыми благодаря sCM.
Диффузионные модели хорошо подходят для создания реалистичных изображений, 3D-моделей, аудио и видео, но не подходят для реального времени из-за медленного процесса выборки.
Модель sCM преобразует шум в высококачественные образцы за один или два шага, сокращая время и вычислительные затраты.
Самая большая модель sCM от OpenAI может сгенерировать образец всего за 0,11 секунды на одном GPU A100, что в 50 раз быстрее, чем модели диффузии.
sCM достигла высокого качества генерируемых изображений, сравнимого с лучшими моделями диффузии, с использованием набора данных ImageNet 512x512.
Новый подход OpenAI предлагает сочетание высокой скорости и качества, преодолевая ограничения предыдущих методов быстрой генерации.
Успех sCM обусловлен ее способностью масштабироваться пропорционально модели диффузии, от которой она получает знания, и возможностью оптимизации для специфических потребностей различных отраслей.