• Waymo интегрирует языковую модель Gemini от Google в обучение своих беспилотных автомобилей.
• Новый метод обеспечивает улучшенную навигацию и уверенное преодоление непредвиденных ситуаций.
• Waymo разработала «сквозную мультимодальную модель для автономного вождения» (EMMA).
• EMMA обрабатывает данные с датчиков автомобиля и помогает принимать решения о движении.
• Компания подчеркивает преимущество доступа к научным исследованиям Google DeepMind.
• EMMA использует комплексный подход к обучению беспилотных систем, снижая количество ошибок и облегчая адаптацию к неожиданным ситуациям.
• Gemini обобщает знания из интернет-данных для эффективного решения нестандартных ситуаций на дороге.
• EMMA показывает отличные результаты в прогнозировании траекторий, распознавании объектов и анализе дорожных графов.
• Однако модель пока не может обрабатывать 3D-данные и работает с ограниченным числом кадров изображений.
• Waymo осознает риски, связанные с использованием ИИ для управления беспилотными автомобилями, и стремится минимизировать ограничения модели.

https://youtu.be/hA_-MkU0Nfw