Google DeepMind анонсировала Gemini Robotics ER 2 — специализированную платформу для управления робототехническими системами. Решение объединяет продвинутое понимание видеопотока, оркестрацию сложных задач и механизмы взаимодействия между несколькими роботами. Система позволяет автономным устройствам эффективнее интерпретировать визуальную информацию из реального мира и координировать действия для выполнения многоэтапных операций в динамических условиях.

Платформа решает проблему «разрыва» между высокоуровневым планированием и физическим исполнением. Благодаря интеграции с мультимодальными моделями Gemini, роботы получают способность анализировать окружающую обстановку в режиме реального времени, что критически важно для навигации и манипуляции объектами. Система берет на себя логику распределения подзадач, позволяя группе роботов работать как единый слаженный механизм, даже если они выполняют разные функции.

Особое внимание в новой версии уделено оркестрации инструментов и взаимодействию. Вместо жестко запрограммированных сценариев, роботы используют логические цепочки для выбора оптимальных инструментов и последовательности действий. Это значительно расширяет возможности применения автономных систем в логистике, производстве и сервисных задачах, где требуется адаптивность к непредсказуемым изменениям среды.

Ключевые факты

  • Платформа обеспечивает глубокое понимание видео в реальном времени для принятия решений роботами.
  • Внедрена функция многоагентной оркестрации, позволяющая координировать действия группы роботов для выполнения общей цели.
  • Система поддерживает динамическое планирование задач, минимизируя необходимость в жестком программировании каждого движения.
  • Технология ориентирована на решение сложных прикладных задач в неструктурированных реальных условиях.