Ричард Саттон, лауреат премии Тьюринга и один из основоположников современного обучения с подкреплением, запустил стартап Oak Lab в Торонто. Компания сфокусируется на разработке ИИ-агентов, способных к непрерывному обучению в динамической среде. Саттон критикует текущие методы глубокого обучения за их неэффективность и стремится создать системы, которые развиваются самостоятельно, имитируя процессы адаптации, характерные для биологических организмов.
В основе подхода Саттона лежит идея отказа от статических моделей, которые обучаются на фиксированных наборах данных. Вместо этого Oak Lab будет работать над архитектурами, где агент взаимодействует с миром в реальном времени, корректируя свои стратегии на основе полученного опыта. Это направление рассматривается как фундаментальный сдвиг в сторону создания полноценного общего искусственного интеллекта (AGI), способного решать задачи без предварительного обучения на огромных массивах размеченных данных.
Создание Oak Lab подчеркивает растущий интерес к методам обучения с подкреплением как альтернативе или дополнению к трансформерным архитектурам. Хотя текущие большие языковые модели демонстрируют впечатляющие результаты в генерации текста, их способность к долгосрочному планированию и автономному обучению остается ограниченной. Исследовательская деятельность стартапа направлена на преодоление этих барьеров через интеграцию принципов обучения в процессе взаимодействия с окружением.
Ключевые факты
- Ричард Саттон — лауреат премии Тьюринга 2024 года и соавтор фундаментального учебника по обучению с подкреплением.
- Стартап Oak Lab базируется в Торонто и ставит целью создание агентов, которые обучаются непрерывно, а не на статичных датасетах.
- Саттон публично называет современные методы глубокого обучения «слабыми и неэффективными» для достижения целей долгосрочного развития ИИ.
- Основной фокус компании — разработка систем, способных к самообучению в реальных условиях без постоянного участия человека в процессе разметки данных.