Robbyant, подразделение Ant Group, выпустило LingBot-VLA 2.0 — открытую Vision-Language-Action модель с 6 млрд параметров, предназначенную для управления различными типами роботов. Система обучалась на 60 000 часов данных, объединяя траектории движений 20 конфигураций роботов и видеозаписи действий человека, что позволяет унифицировать управление разнородными манипуляторами через единое пространство действий.
Ключевой особенностью модели является использование 55-мерного канонического пространства действий. Это решение позволяет LingBot-VLA 2.0 эффективно переносить навыки между разными физическими воплощениями роботов, преодолевая проблему несовместимости аппаратных интерфейсов. Модель распространяется под лицензией Apache-2.0, что делает её доступным инструментом для исследователей в области робототехники и обучения с подкреплением.
Обучающая выборка включает 50 000 часов данных о движении роботов и 10 000 часов эгоцентрических видео, где человек выполняет различные манипуляции. Такой подход обеспечивает модели глубокое понимание визуальных контекстов и физических ограничений, необходимых для выполнения сложных задач в реальном мире, от простых перемещений объектов до взаимодействия с инструментами.
Ключевые факты
- Модель содержит 6 миллиардов параметров и распространяется с открытым исходным кодом под лицензией Apache-2.0.
- Обучающий датасет составляет 60 000 часов данных, включая 50 000 часов робототехнических траекторий.
- Система поддерживает 20 различных конфигураций роботов, преобразуя их действия в единое 55-мерное каноническое пространство.
- В состав данных включено 10 000 часов эгоцентрических видеозаписей действий человека для улучшения понимания визуальных задач.
