Start Career in DS

#алгоритмы
В некоторых компаниях на интервью любят спрашивать алгоритмы и структуры данных. Справедливости ради, нужно сказать, что к этим "некоторым компаниям" можно отнести Яндекс, Google и Facebook.
Есть очень классная книжка, которая содержит разборы огромной кучи задач на эту тему. Причем разбирается это всё прямо в виду задач с собесов.
Книга называется "Cracking the coding interview"
Ссылка: https://disk.yandex.ru/i/4_Ef2sBal5LohA

Несколько интересных экспериментов с #pandas
Вновь ссылка на статью Александра Дьякнова. В ней есть сравнение распространённых методов решения разных задач, которые часто возникают на практике:
https://dyakonov.org/2019/09/23/python-и-pandas-делаем-быстрее/

#SQL
Ещё немного доп. инфы по SQL. Знать его хорошо, но что могут спросить на собеседовании? Вот очень хорошая подборка вопросов:
https://tprg.ru/q7p5

#SQL
На стажëрских позициях SQL не всегда требуют. Но это может сыграть вам на руку и выделить среди других кандидатов :)
А если вы претендуете на позицию джуна, то я бы сказал, что SQL - прям мастхэв.
Самый лучший сайт для изучения SQL с нуля - sql-ex.ru
Там есть всё - и теория, и практика, и куча примеров. И всё бесплатно

#метрики
Очень хорошая статья, которая позволит подробно разобраться с одной из очень часто используемых метрик - ROC-AUC.
Блог Александра Дьяконова в целом очень советую, он содержит в себе большое количество полезностей. Думаю, буду еще на него ссылаться :)
https://dyakonov.org/2017/07/28/auc-roc-%D0%BF%D0%BB%D0%BE%D1%89%D0%B0%D0%B4%D1%8C-%D0%BF%D0%BE%D0%B4-%D0%BA%D1%80%D0%B8%D0%B2%D0%BE%D0%B9-%D0%BE%D1%88%D0%B8%D0%B1%D0%BE%D0%BA/

Интересная статья про фичи и их отбор. На английском, но он тут достаточно простой:
https://machinelearningmastery.com/feature-selection-with-real-and-categorical-data/

Не может.
Подробности - по ссылке
https://telegra.ph/Mozhet-li-Information-Gain-byt-otricatelnym-10-25

Мне тут студенты задали очень интересный вопрос. Давайте без гугла - правда очень интересно. Чуть позже сделаем подробный разбор :)

#интересное, #python
Визуализация - мощный инструмент, которым нужно хорошо владеть DS'ам. Почему? Да потому что построить модели из коробки могут многие, а вот грамотно представить данные так, чтобы были видны их особенности и закономерности - нет. Качественная визуализация позволяет быстро погрузиться в область задачи и понять её особенности.

Советую очень хороший сайт, который даёт кучу примеров визуализации в разбиении по типам данных:
https://www.data-to-viz.com/

Ещë немного про #kaggle - как это помогает в карьере и помогает ли вообще?
Рассказывает Паша Плесков, один из мировых лидеров по соревнованиям в области машинного обучения.
https://youtu.be/fXnzjJMbujc

#алгоритмы
Тем, кто уже разобрался с основами, и хочет глубже погрузиться в один из самых распространëнных методов:
https://youtu.be/UYDwhuyWYSo

Тут Анна Вероника рассказывает про многие полезные особенности CatBoost'а. Но лекция непростая, поэтому лучше на входе иметь чёткое представление относительно того, что из себя представляет бустинг

#интересное
Крутое выступление, которое позволит понять кто же такие DS'ы:
https://youtu.be/Cs3ae65tmKA

Тут Валера говорит про то, что на самом деле непосредственно Data Scientist'ов не существует, но зато есть более точные роли - ML Engineer, Data Analyst, Data Engineer, ML Researcher, Analyst, DevOps.
Проблема в том, что на практике большинство компаний под DS'ами подразумевают некоторую совокупность этих ролей с более-менее определенными коэффициентами. Кто-то хочет чтобы вы умели и сбор таблиц настраивать, и модельки делать, кто-то - чтобы вы умели напрямую взаимодействовать с бизнесом, строить модели и оценивать бизнес-эффект от них.
Эти пропорции важно понимать на этапе общения с представителями компании, чтобы не строить ложных надежд. Потому что согласитесь - печально устроиться DS'ом и сутками ковырять эксельки (а о таких случаях в некоторых компаниях я слышал)

#python
Шпаргалка по основам Python

#python
Мини-шпаргалка по Pandas

#python
Как быстро въехать в Python? Практика и только практика!
А где её найти? Чтобы было много разных заданий, да ещё и с качественными примерами решений?
https://py.checkio.org/
В своё время я постигал язык с помощью этой игры. Она позволяет поработать с питоном с разных сторон. + ко всему после прохождения задания вы можете посмотреть решения других пользователей. Это порой помогает взглянуть на задачу с другой стороны :)

#python
Вот тут: https://tproger.ru/translations/hitchhikers-guide-to-ml/ здорово разобраны базовые алгоритмы машинного обучения с точки зрения их использования в Python

#статистика
Ссылка: https://disk.yandex.ru/i/PMGHlkVApxm1gA
Часто спрашивают хорошую русскую литературу по статистике. Вот книжка, которая мне в своё время очень помогла с подготовкой к собесам. Ключевое отличие от других - тут всё разбирается на примерах (отталкивается от них).
Но, тем не менее, суровой математики тут тоже немало. Так что очень советую выделять определенное количество времени (например, по часу) и подробно сидеть разбираться в интересующих вас главах.

Особенно советую:
•Часть III - Проверка гипотез
•Часть V - Анализ многомерных данных (фактически - базовые алгоритмы ML)

#kaggle
За время знакомства с машинным обучением вы точно не раз услышите что-то вроде "этот чувак тащит кэгл" или "я зарешал несколько соревнований на кэгле и влетел в DS".
Вот эта статья позволит вам немного разобраться в том, что же такое Kaggle:
https://tproger.ru/translations/kaggle-competitions-introduction/

Окончательно понять зачем оно нужно можно лишь начав решать соревнования :)

Всем привет!
Я достаточно часто в последнее время общаюсь с ребятами, которые только начинают карьеру. Поэтому решил сделать канал, куда буду выкладывать полезные материалы и где буду отвечать на часто задаваемые вопросы :)