Ученые адаптировали ИИ для генерации изображений под российскую культуру

Ученые адаптировали ИИ для генерации изображений под российскую культуру.
Методика сбора и обработки пар данных текст-изображение была разработана для культурной адаптации моделей ИИ.
Модель Kandinsky 3.1 была обучена с учетом культурных особенностей народов России.
Результаты работы опубликованы в журнале «Доклады Российской академии наук».
Создание изображений требует особых навыков и эмоционального настроя, что может быть сложно для некоторых людей.
Технологии ИИ и машинного обучения позволяют создавать модели генерации изображений по описаниям, например, DALL-E, Midjourney или Stable Diffusion.
Проблема качественного иллюстрирования не исчезла из-за трудностей перевода и отсутствия адаптации моделей под национальную культуру.
Ученые выбрали 17 направлений для обучения моделей созданию изображений, уделив особое внимание русскому языку, литературе и традициям.
Около 8 тысяч текстов и иллюстраций были обработаны вручную для реализации методики.
В результате было собрано около 200 тысяч пар текст-изображение, отражающих визуальную составляющую русской культуры.
Данные использовались для дообучения модели Kandinsky 3.1, которая продемонстрировала лучшие результаты при решении практических задач, ориентированных на специфику российской информационной среды.