CMU бесплатно выкладывает на YouTube новый курс по ИИ-агентам — 11-768. Этой осенью его ведут Грэм Нойбиг и Дэниел Фрид. Это один из первых курсов об агентах, который я видел, где проходят весь путь от создания агентной обвязки до обучения модели, на которой она работает.

Начинается курс с ожидаемых тем: использование инструментов, управление контекстом, навыки, память и планирование. Дальше идут отдельные разделы об агентах для программирования, работы с графическим интерфейсом и глубокого исследования. Затем — дообучение с учителем, обучение с подкреплением, системы для такого обучения, песочницы, управление учётными данными, OpenHands, LangGraph, наблюдаемость, взаимодействие агентов друг с другом и с людьми, а также поиск.

Лучше всего курс описывают задания. Сначала нужно создать агентную обвязку. Потом — разработать тесты для её оценки. И наконец — обучить агента с подкреплением. Первое задание вместе со стартовым кодом уже опубликовано на GitHub.

Лекции появляются на YouTube по ходу семестра. Грэм Нойбиг сообщил, что все видео войдут в открытый плейлист.

Это гораздо полезнее, чем изучить один агентный фреймворк и решить, что теперь понимаешь агентов. Здесь показывают всю систему: модель, обвязку вокруг неё, инструменты и память, оценку результатов и обучение, которое может изменить саму модель.

Курс: https://www.cmu-agents.com/
Лекции: https://www.youtube.com/playlist?list=PLSN0qpDfUvTM