Рич Саттон и Хуррам Джавед основали Oak Lab
Лауреат премии Тьюринга 2024 года и один из создателей современного обучения с подкреплением Рич Саттон вместе с Хуррамом Джаведом запустил стартап Oak Lab в Торонто. Оба ранее работали в компании Keen Technologies, принадлежащей Джону Кармаку.
Саттон называет нынешние методы глубокого обучения «слабыми и неэффективными» и утверждает, что они нуждаются не в доработках, а в принципиально новых идеях и глубокой переработке, прежде чем смогут стать надёжной основой для достижения более амбициозных целей ИИ.
«Современные методы глубокого обучения слабы и неэффективны. Им нужны не доработки, а принципиально новые идеи и глубокая переработка, прежде чем они смогут стать прочной основой для достижения более амбициозных целей ИИ», — заявил Саттон.
В июне он уже отмечал, что генеративный ИИ хорошо имитирует, но не способен оценивать собственные результаты, что делает его непригодным для настоящих открытий. Саттон стремится создать ИИ-агентов, которые непрерывно обучаются в своей среде, строят внутренние модели мира и самостоятельно справляются с вариативностью, оценкой и отбором. Именно вокруг этой идеи построен Oak Lab.
Как и в Keen, ставка делается на обучение с подкреплением и убеждение, что ИИ должен учиться на опыте в процессе работы, а не единожды тренироваться на статичных наборах данных. Долгосрочная цель — агент с «триллионом параметров, который обучается и планирует в реальном времени, потребляя 20 ватт энергии».