Исследователи представили SymmGrid — фреймворк для обучения роботов с подкреплением, который радикально сокращает время тренировки моделей непосредственно на физических устройствах. Используя метод аугментации траекторий на основе параллельных симметрий, система масштабирует групповые преобразования данных. Это позволяет эффективно обрабатывать визуальную информацию как с эгоцентрических, так и с экзоцентрических камер, устраняя главные узкие места в скорости обучения робототехники.

Традиционное обучение с подкреплением (RL) на роботах часто ограничено низкой скоростью сбора данных и необходимостью длительных итераций. SymmGrid решает эту проблему, внедряя механизм, который моделирует марковские процессы принятия решений с учетом геометрических симметрий окружения. Благодаря этому робот быстрее адаптируется к новым задачам, так как система «понимает» эквивалентные состояния без необходимости их физического повторения.

Метод демонстрирует высокую эффективность в задачах, требующих сложной визуальной навигации и манипуляций. Интеграция эгоцентрического (вид от первого лица) и экзоцентрического (вид со стороны) восприятия позволяет модели строить более устойчивые представления о пространстве. Это приближает создание автономных систем, способных к быстрому дообучению в динамических условиях реального мира без многочасовых симуляций.

Ключевые факты

  • SymmGrid использует аугментацию на уровне траекторий для ускорения обучения с подкреплением.
  • Фреймворк поддерживает работу с визуальными данными из двух перспектив: эгоцентрической и экзоцентрической.
  • Метод основан на параллелизации групповых симметрий, что позволяет эффективно масштабировать процесс обучения.
  • Решение направлено на устранение задержек в «реальном времени» (wall-clock time) при тренировке моделей на физическом оборудовании.