Anthropic представила новую функцию для десктопного приложения Claude Cowork, позволяющую агенту обучаться выполнению задач на основе действий пользователя. Теперь ИИ может анализировать запись экрана и закадровые пояснения, превращая их в воспроизводимые алгоритмы действий. Это значительно упрощает автоматизацию рутинных процессов, позволяя агенту перенимать специфические рабочие навыки без необходимости написания сложного кода.
Новый подход к обучению агентов меняет парадигму взаимодействия с ИИ-помощниками. Вместо настройки API-интеграций или создания жестких сценариев, пользователь демонстрирует последовательность действий в интерфейсе любого приложения. Claude Cowork фиксирует клики, ввод данных и навигацию, сопоставляя их с голосовыми комментариями, которые объясняют логику процесса. Полученный «навык» сохраняется в библиотеке агента и может быть запущен повторно для выполнения аналогичных задач в будущем.
Эта технология направлена на снижение порога входа для автоматизации бизнес-процессов. Агент выступает в роли «цифрового стажера», который наблюдает за рабочим процессом и учится на реальных примерах. Такой метод обучения особенно эффективен для работы с устаревшим ПО или закрытыми корпоративными системами, где прямая интеграция через API затруднена или невозможна.
Ключевые факты
- Claude Cowork теперь поддерживает запись экрана для захвата последовательности действий пользователя.
- Голосовые комментарии используются для контекстуализации действий и объяснения логики выполнения задачи.
- Записанные сессии преобразуются в многократно используемые навыки, которые агент может воспроизводить автономно.
- Инструмент ориентирован на автоматизацию задач в десктопных приложениях, где не требуется глубокая программная интеграция.
- Решение позволяет масштабировать специфические рабочие процессы без привлечения разработчиков для написания скриптов.