Как я недавно ботал ML (часть 1)

Есть у меня некоторое количество знакомых, которые думают, что за 15 лет в ML я, наверное, уже знаю все, что можно знать в ML. К счастью, я сам так никогда не думал. ML безразмерный, постоянно развивающийся и пополняющийся, да и я ни разу не самый умный человек в профессиональном сообществе (не прибедняюсь, просто я знаю реально мощных ребят, на фоне которых чувствую себя тормозом). Кстати, если что, нейросетки и, в частности, LLMки это тоже ML (ремарка для любителей спросить «у вас в проекте ML или AI?» :)

Так вот недавно мне нужно было за неделю разобраться в некотором количестве новых для меня тем из ML, не на понятийном уровне, а с готовностью писать и объяснять формулы. Ниже рассказ о том, как это было.

Сначала я читал статьи и смотрел YouTube «в ширь»: все интересное по теме подряд, без ведения каких-то записей и конспектов. Статьи с arxiv здесь не были в списке источников, все было приземленнее - Хабр и сайты вроде Medium. Шло тяжко, со скрипом, прогресс почти не чувствовался.

Параллельно я смотрел материалы, которые мои коллеги по преподаванию в MLinside готовят для специализации по AI, и которые уже имеют вид последовательного изложения для курсов. Вот такие забавные плюсы делать школу ML: можно ботать материалы из неё же, причем еще до публикации, и это часть моей работы по валидации контента.

Ботать по материалам курсов не так раздражало, как «вширь» по всему интернету. Как минимум, не было столь сильного чувства тревоги от ограниченных сроков и непонимания своего прогресса. Когда есть программа курса, всегда можно нарисовать в голове примерный прогресс-бар.

Однако стоит заметить, что мой мозг и близко не работает как «послушал материал и все понял». Даже больше скажу, читать лекции я люблю, а вот слушать просто невыносимо тяжело. В записи я прерываюсь по сто раз за видео, вживую отвлекаюсь и теряю нить повествования каждые 5-10 минут.

В итоге для ключевых тем я находил еще 2-3 варианта изложения в открытых источниках, сравнивал их между собой, и обнаруживал, что оптимальный для меня вариант изложения неизменно состоял из частей разных лекций от разных авторов. Кстати, о лекциях, моей задачей на неделю было только изучить подробнее теоретическую часть, про практику напишу в другой раз.

Постепенно, среди всего набора курсов, видео и статей, выделились несколько особенно ценных, которые давали прям подробное, системное и понятное изложение. Что важно, даже по уже известным мне темам, потому что одно дело думать, что понимаешь тему, и совсем другое - быть готовым её нормально рассказать с чистого листа (это и было моей целью). Нахождение этих материалов в общей массе доступного контента также радикально снизило уровень тревоги, потому что каждое их прочтение заметно наводило порядок в голове. Тоже важный момент: однократного прочтения мне было мало. Если вы что-то прочитали и не поняли полностью или, тем более, не запомнили - не надо паниковать, это нормально.