ИИ-модель обучает роботов «на лету» — по одной короткой демонстрации

Generalist AI представила GEN-1.5 - ИИ-модель, обучающую роботов на основе коротких демонстраций.
Модель не обновляет веса и не требует тонкой настройки после демонстрации.
GEN-1.5 анализирует видео, языковые и проприоцептивные сигналы для генерации траекторий движений.
Модель успешно выполнила 59% заданий в 10 бытовых сценариях после одной демонстрации.
После добавления обучающих данных и дообучения, показатель успешности вырос до 83%.
GEN-1.5 умеет комбинировать навыки и обобщать полученные навыки для применения в новых условиях.
Демонстрации в симуляции могут использоваться для управления реальными роботами без специального обучения.
Подход Generalist AI может изменить способ программирования роботов, упрощая процесс обучения.