Аналитика данных / Data Study

Индексы в БД

🔎 Индексы - структура данных в базе, которая позволяет определить положение необходимых данных в базе с более высокой скоростью выполнения запросов к БД.

Пример для понимания: представьте, что вы ходите по торговому центру с целью найти магазин X. Если вы будете обходить весь торговый центр в поисках, пытаясь найти магазин по вывеске, это будет очень долго. Гораздо проще иметь в торговом центре карту или схему расположения магазинов с номерными знаками каждого магазина. Вот эти номерные знаки на карте магазинов возле их названия и будут подобием индексов в базе данных.

Зачем нужны индексы:
- более быстрый поиск необходимых данных внутри таблицы
- фильтрация данных по столбцу с индексом происходит быстрее
- объединение данных из таблиц, если в условиях объединения есть столбцы с индексами
- сортировка выборок данных также может ускориться при помощи сортировки по полю с индексом

Синтаксис создания индекса:
CREATE INDEX index_name ON table_name (column_name)

📍Это один из частых вопросах на собеседованиях, поэтому нужно понимать что такое индексы и как их можно применять

Полезные ссылки для знакомства с индексами:

- Что такое индексы (статья)
- Как создавать индексы в PostgreSQL (статья)
- Индексы (видео)
- Индексы для оптимизации SQL запросов (статья)

Привет!

Давно не выходил на связь, буду исправляться)

Нашел статью с подборкой огромного количества материалов для развития soft-skills. Каждый может найти для себя что-то полезное, я вот выписал себе несколько книг и прочитал уже парочку статей про эмоциональный интеллект и управление ресурсами.

Ресурсы в статье:
📍Деловое общение
📍Клиентоцентричность
📍Когнитивная гибкость
📍Коммуникация
📍Управление командой, проектом, процессом
📍Креативное мышление
📍Критическое мышление
📍Наставничество/менторинг
📍Презентация и ораторское искусство
📍Решение проблем и принятие решений
📍Системное мышление
📍Стресс-менеджмент
📍Управление ресурсами
📍Целеполагание
📍Эмоциональный интеллект

Ссылка на статью

Привет!

Осваиваю технологию Docker, т.к. до этого с ней руками сам не работал а только от коллег разработчиков и DevOps-инженеров слышал про контейнеры и образы 😃. А тут стало интересно, как можно разворачивать приложения локально без установки кучи сторонних библиотек и отслеживанием зависимостей их версий и совместимости.

В общем, аналитикам может это и не нужно знать на твердом уровне hard навыка, но минимум принцип работы понимать необходимо. А если захочется установить open source инструмент себе локально и поиграться с ним, то Docker в этом может очень сильно помочь. Делюсь ссылочкой на видео, которое я смотрю ⬇️

Видео по Docker

Привет!
Делюсь небольшой, но полезной шпаргалкой по PySpark и Spark SQL. Позже обязательно расскажу подробнее про PySpark и его области применения 😉

Привет!

Пока я тут гуляю в Питере и наслаждаюсь прекрасной погодой, хочу все же поделиться полезным материалом.

Есть вот такой глоссарий, который мне раньше очень сильно помогал не запутаться в лексике и разговаривать с коллегами на одном языке. Посмотрите, если на проекте чувтсвуете, что часть терминов вам не знакома.

Глоссарий терминов IIBA на основе профессионального стандарта

Читаю статью про настройку маркетинговой аналитики, сейчас для проекта на работе очень даже актуально. Здесь расписаны основные этапы работы с данными

Читать статью

😅

🚀 @machinelearning_interview - в Канале собраны все возможные вопросы и ответы с собеседований по Аналитике данных и Машинному обучению. Вопросы для всех уровней дата саентистов.

Материалы канала реально помогут подготовиться к data science собеседованию.

👉Перейти

Привет!

Вчера была очень полезная встреча. Обменивались с коллегами опытом первого трудоустройства в IT. Расскажу подробнее ⤵️

Мы организовали встречу между учениками моих курсов и ребятами, которые недавно устроились на позиции стажёров/джунов.

Каждый рассказал свою историю обучения, поиска работы и трудоустройства. Это огромная ценность, когда ты можешь в подробностях узнать истории других людей про их путь.

Истории у всех разные и это круто

Кто-то учился самостоятельно, читал много книг, читал много книг/статей, смотрел бесплатные материалы. Другие брали курсы, учились с менторами.

Но в любом случае каждый из ребят горел желанием найти свою первую стажировку/работу в IT
📍во время учебы в университете
📍или сменив вид деятельности и освоив новую профессию

На мой взгляд встреча была очень полезной и я сделал для себя следующие выводы:

1. Обмен опытом имеет огромную ценность
Разговаривая с другими людьми (друзья, знакомые, менторы, коллеги) ты понимаешь, что кто-то уже проходил этот путь до тебя, и самому необязательно изобретать велосипед. В сообществе всегда есть возможность задать все интересующие вопросы и побороть страх неизвестности.

2. Обучаться самостоятельно или с преподавателем/ментором - решает каждый сам. Но второе как правило сокращает период обучения.
У каждого человека свои предпочтения к формату обучения. Кому-то комфортно изучать все самостоятельно, а кто-то предпочитает черпать знания от других людей на живых курсах. Любой курс (бесплатный или платный, но главное качественный) помогает структурировать информацию и ваши знания, когда как просто чтение разных источников может вас только больше запутать. Также это важно при изучении сложных тем, которые тяжело даются самостоятельно.

3. Кто сам горит желанием чего-то достичь, тот в любом случае добьётся желаемого результата
Можно сказать и по-другому: Кто ищет, тот всегда найдет
Если у человека есть желание выучиться и найти работу в новой профессии, он обязательно будет добиваться этого самостоятельно. Даже если это займет несколько месяцев поиска вакансий и прохождения десятков интервью ➡️ в конечном итоге оффер (и даже не один) будет ваш
Примеры ребят это только подтверждают. Даже не дожидаясь обещанной поддержки при трудоустройстве на известных курсах, ребята в середине обучения начинают проходить собеседования и находят работу в крупных IT компаниях.

✏️ Не переставайте учиться и развиваться

А для получения знаний в области бизнес-анализа в IT приходите на курс ⬇️ Старт обучения - 10 августа, запись в группу только по предоплате

Записаться на курс

Питер Брюс, Эндрю Брюс / Практическая статистика для специалистов Data Science

"Книга рассчитана на специалистов в области Data Science, обладающих некоторым опытом работы с языком программирования R и имеющих предварительное
понятие о математической статистике. Подробно раскрыты темы: разведочный анализ данных, распределения данных и выборок, статистические эксперименты и проверка значимости, регрессия и предсказание, классификация, статистическое машинное обучение и обучение без учителя."

Скачать книгу

Привет!

У меня есть новость, которой хочу поделиться)
На днях я получил статус индивидуального предпринимателя (ИП) 🥳

Я давно хотел оформить свою активность создания курсов и обучения в отдельный проект. Все началось с самозанятости. Это конечно хорошо, никаких проблем с отчетностью и страховыми взносами. Но сейчас нужно двигаться дальше.

ИП дает дополнительные возможности в образовательной деятельности.

Data Study - образовательный проект по развитию аналитических навыков и компетенций в сфере IT.
Я буду дальше продолжать развивать свои курсы и образовательный контент, которым делюсь с вами.

Что же эта новость дает моим ученикам?

1. Возможность получения сертификата о прохождении курсов

Для многих важно получить сертификат, чтобы улучшить свое портфолио и добавить дополнительную строчку в резюме.

Для вас хорошая новость: Ученики курса по бизнес-анализу получат свои сертификаты по окончанию обучения

P.S. Все же считаю, что самое главное в обучение - это знания и навыки, которые вы приобретаете. Сертификат это всего лишь небольшое приятное дополнение

2. Возможность оформления налогового вычета до 13% с суммы обучения

Более детально почитать об этом можно здесь

Что вы получите после курса:
✅ теоретические знания бизнес-анализа
✅ умение готовиться к интервью и проводить его
✅ оформлять все виды требований
✅ оформление диаграмм бизнес-процессов
✅ работа с задачами в таск-трекере
✅ работа в команде и решение бизнес-кейса
✅ умение презентовать результаты и готовить презентации
✅ знание методологий ведения проекта и разработки ПО
✅ оформление продающего резюме
✅ доступ в Analyst's Club для учеников курсов с закрытыми встречами 15% скидкой на другие курсы

Кто еще думает записаться на курс и внести предоплату для брони места в группе, не откладывайте. Время уходит также как и возможность попасть в группу на отличное обучения. Пишите мне @daniildzheparov для записи или заполняйте форму ⬇️

Записаться на курс

Внимание внимание ‼️

Ищу джунов/стажеров аналитиков, кто за последние полгода нашёл себе работу/стажировку и готовов поделиться своим опытом трудоустройства (оформление резюме, тестовые задания, собеседования...).

Идея: провести созвон в формате беседы и обмена опытом с моими учениками, кому ещё предстоит найти работу в аналитике. Ориентировочно встреча будет во вторник (2 августа) в 19:00. Будем уточнять более удобное время, если нужно.

Также будет интересно пообщаться с HR специалистами по опыту отбора кандидатов аналитиков)

Кто может и готов рассказать о своём опыте поиска работы/стажировки, пишите мне @daniildzheparov

Немного юмора субботним вечером 😁

Написание требований по EARS

🔎 The Easy Approach to Requirements Syntax (EARS) - эффективный стандарт написания требований, который существует с 2009 года. EARS стандарт включает в себя 6 разных паттернов написания требований:

📍Ubiquitous Requirements
Такие требования универсальные, т.е. действуют в системе всегда без каких-либо дополнительных условий или триггеров

Формат: The <system name> shall <system response>

📍Event-Driven Requirements
Данный формат требований действует только тогда, когда есть определенный триггер. Другими словами, описывается реакция системы на сработавший триггер.

Формат: When <trigger> <optional precondition> the <system name> shall <system response>

📍Unwanted Behavior Requirements
Требования в таком паттерне описывают реакцию системы на нежелательные триггеры, ошибки, сбои.

Формат: If <unwanted condition or event>, then <the system name> shall <system response>

📍State-Driven Requirements
Требования действуют все время пока система пока система работает в определенном состоянии

Формат: While <system state>, <the system name> shall <system response>

📍Optional Feature Requirements
Такие требования выполняются только в том случае, если есть специальная функция в системе

Формат: Where <feature is included>, <the system name> shall <system response>

📍Complex Requirements
Данный паттерн требований может включать в себя гибридные вариации других описанных паттернов

Привет!

Вчера поступило много вопросов по процессу обучения на курсе по бизнес-анализу и процессу оплаты. Расскажу сейчас все в деталях ⬇️

❓Для кого подходит курс

Курс построен так, чтобы донести весь материал до людей, которые не имеют опыта в бизнес-анализе, имеют минимальный опыт, либо хотят освежить свои знания и структурировать их после долгой паузы или смены деятельности
- для людей, кто хочет сменить сферу деятельности
- для студентов, кто хочет попасть на стажировку/работу, но не получает достаточно практики в университете или учиться по другой специальности
- для начинающих аналитиков или менеджеров, кто хочет повысить свой уровень и качество знаний

❓Какая нагрузка в течение курса

Продолжительность курса 2 месяца. Занятия идут 2 раза в неделю
- Среда 19:00 по МСК
- Суббота 10:00 по МСК

Все занятия записываются. После каждого урока я отправляю запись в чат учеников, плюс высылаю конспект урока. Записи и конспекты уроков остаются у вас НАВСЕГДА

❓Стоимость курса

Полная стоимость курса составляет 25000 рублей
Учитывая живой формат обучения, практику, количество занятий и их продолжительность по 1-2 часа, то это очень хорошая стоимость. За качество обучения я ручаюсь сам, ведь это мой курс и моя главная цель - дать людям полезные и практические знания.


❓Как происходит оплата

Оплата происходит в 1 или 2 этапа на ваше усмотрение:
- оплата полной стоимости курса сейчас
- 50% оплаты курса сейчас, 50% оплаты после 1-го или 2-го занятия

Предоплата показывает мне и вам, что вы готовы проходить курс и готовы занять место в группе. После старта курса попасть в группу и оплатить курс уже не получится, т.к. группы будут сформированы.

Я понимаю, что в каждом продукте и услуге должна быть своя ценность, которую приобретают клиенты.

Поэтому хочется более детально рассказать в чем заключается ценность курса по бизнес-анализу:

1. Знания
Все уроки четко структурированы по темам, с которыми в любом случае столкнется каждый аналитик или менеджер проекта. Чтобы упростить своим ученикам опыт работы на начальных этапах, я рассказываю обо всех стадиях проекта по порядку с нюансами

2. Практика
Без практики ваши знания очень быстро забываются, если их не закреплять на реальных кейсах и задачах.
Практической части уделяется особое внимание, чтобы ученики умели самостоятельно выполнять задачи аналитика по написанию требований.

3. Обратная связь
Я провожу живые уроки, где можно задать вопросы и переспросить непонятный материал.
Гибкость уроков по времени. Например, практику по курсу по анализа данных мы часто разбирали по 2 часа.

4. Опыт работы с программными инструментами
На уроках мы будем использовать те инструменты, которые я сам часто применяю на работе:
- Miro
- таск-трекер с Kanban/Scrum досками
- инструменты рисования диаграмм бизнес-процессов

5. Доступность материалов
Многие курсы ограничивают свои материалы на месяц или полгода после обучения.
Я сохраняю материалы в чате учеников, где они остаются НАВСЕГДА для вас.

6. Моделирование ситуации заказчик - аналитик
Чтобы на все 100% почувствовать себя в роли аналитика, мы будем решать кейс с моделированием ролей. Я буду в роли заказчика и некого ментора, а ученики в роли аналитиков.

7. Доступ в Analyst's Club
Это чат выпускников моих курсов
Цели создания клуба: усиливать сообщество аналитиков, проводить внутренние встречи/воркшопы для обмена знаниями и опытом, нетворкинг, рекомендация учеников по интересным вакансиям, бонусы на обучение (15% скидка на все другие и будущие мои курсы)
Попадают только те ученики, кто сдает все домашние задания.

8. Подготовка качественного резюме
На последнем уроке мы будем разбирать все типовые ошибки в оформлении резюме.
У каждого ученика посмотрим его текущее резюме, где я дам рекомендации по улучшению.


Если хочешь попасть на обучение по бизнес-анализу, пиши мне или заполняй форму 😉

Запись на курс

Привет!

Этим летом погода в Москве просто балует 😍
Солнце, жара, от дома еще совсем близко большой парк для прогулок, вообще замечательно)

Но многие дни я все таки провожу перед экраном ноутбука...

Последние 3 месяца я особенно много времени выделяю для своего образовательного контента

Я занимаюсь полноценным курсом по бизнес-анализу

Раньше это был тренинг из 4 занятий с теоретической частью и практической основой. Сейчас курс включает в себя:

✅ 8 теоретических занятий (бизнес-анализ + развитие soft-skills)
✅ 6 практических занятий в формате решения и разбора бизнес-кейсов (пример настоящего проекта)

Помимо тем по бизнес-анализу сделан большой акцент на soft навыки аналитиков, которые многие забывают улучшать.

Я посмотрел рынок доступных курсов и понял, что я хочу сделать по-другому

Большинство курсов по бизнес-анализу дают знания про требования только на уровне бизнес-цели и бизнес-задач. Много где идет привязка или углубление в специфику доменных областей: финансы, маркетинг, продажи

Для бизнес-аналитика со стороны IT или при работе с IT-продуктами важно детализировать требования до уровня пользовательских сценариев и системных требований

Еще один большой point - коммуникация между бизнес-заказчиками и IT командой разработки.

ОЧЕНЬ важно
- иметь инструменты по сбору требований в своём багаже со стороны бизнеса
- уметь их описать понятным языком для IT

Чтобы научиться всему этому в курс включены следующие темы:

1. Вовлечение стейкхолдеров и общение с заказчиками
2. Выявление бизнес-цели и формулировка бизнес-требований
3. Написание user story и работа с системными требованиями
4.Работа с диаграммами бизнес-процессов
5. Навыки презентации себя, проекта и результатов
6. Agile & Waterfall, Scrum & Kanban - методологии разработки и ведения проектов
7. Личная и командная коммуникация, решение конфликтных ситуаций
8. Как писать и оформлять качественное резюме

Это 8 теоретических уроков, на базе которых строится практика 🔥🔥🔥

А знаете почему именно эти темы нужно изучать?

Потому что по анализу вакансий для профессии аналитика самым востребованными являются как раз они, если посмотреть их частоту упоминания в вакансиях.

Практика будет идти как на настоящем проекте

- все вместе познакомимся в группе, расскажем пару слов о себе и своих целях обучения
- изучим бизнес-кейс
- запишем все наши идеи на доску Miro для всей команды
- создадим бэклог задач в таск-трекере, будем работать на Kanban доске
- промоделируем интервью с заказчиком (я буду заказчиком, а ученики в роли аналитиков будут задавать подготовленные вопросы для уточнения требований)

Как итоговый результат практики у каждого ученика будет полный документ проектной спецификации:

📍бизнес-цель
📍бизнес-задачи
📍бизнес-требования
📍диаграмма бизнес-процессов
📍пользовательские сценарии
📍системные требования

Все это будет оформляться по лучшим практикам, которые сейчас применяются в компаниях. Итог практики = презентация учеников с их проектной документацией

BPMN, UML, работа с требованиями, написание use cases/user story, составление диаграмм бизнес-процессов, составление проектной презентации - все это мы будем проходить на курсе.

Старт и первое занятие будет 10 августа

- обучение идет 2 месяца
- уроки 2 раза в неделю (Среда 19:00, Суббота 10:00 по МСК)
- группа по 5-6 человек максимум (коммуникация в Telegram)
- онлайн уроки с живым общением
- все записи уроков и конспекты высылаются в чат и остаются у вас навсегда
- оплата бьется на 2 части (до старта и в начале обучения)

Все вопросы вы можете писать также мне лично @daniildzheparov. Также на вопросы по курсу готова ответить ученица, которая проходила прошлую версию курса (кто хочет задать ей вопросы, ее контактом я поделюсь в личных сообщениях)

Запись на курс

Гид по оформлению дашборда

У нас в Институте есть своеобразный гид по стилю. Это рекомендации по оформлению дашборда в целом. Благодаря им дашборды смотрятся аккуратно.

Решил, что эти рекомендации будут полезны всем. Сегодня делюсь рекомендациями по шрифтам:

1. Общий заголовок дашборда (28-32 пт)
2. Заголовки в карточках (14 -16 пт). Если карточек много, то могут быть меньше. Лучше, чтобы подписи умещались в одну строку, чем чтобы они были сформулированы развернуто
(сокращать слова можно и нужно).
3. Карточки КРI: числа (24—28 пт)
4. Заголовки диаграмм и таблиц (14-16 пт)
5. Числовые подписи на диаграммах и в матрицах (11-12 пт)
6. Шапки таблиц и матриц (11-12 пт)
7. Подписи категорий в диаграммах и таблицах, легенды (9-10 пт)
8. Подписи осей Х в диаграммах динамики и других столбчатых гистограммах, где много категорий (8 пт).

Не стоит эти рекомендации воспринимать как единственно верную истину и строго соблюдать их везде. Это просто внутренние стандарты,
которые мы стараемся соблюдать.

Оформили эти рекомендации в виде чек-листа.

СКАЧАТЬ ЧЕК_ЛИСТ

Привет!

Сегодня от подписчика получил вопрос в формате "Как долго ты искал свою первую работу? Поделись своим опытом"

Я начал искать первую стажировку в IT когда учился на 3 курсе университета

Зарегистрировался на hh.ru, заполнил свое первое резюме внутри их конструктора. Ну и начал откликаться на все вакансии и стажировки почти подряд 😅 (сейчас то уже понятно, что это неправильный подход. каждая вакансия индивидуальна и нужно на нее откликаться с подготовленным под нее резюме)

Первые пару дней было затишье

Никто не писал, не звонил, было неприятно поэтому. Ведь при поступлении в ВУЗ говорили, что нас как выпускников с руками и ногами работодатели будут отрывать

Через несколько дней после откликов пошли первые звонки от HR. В некоторые моменты я сидел на парах, приходилось выходить в коридор, чтобы пообщаться и назначить время собеседования.

Было около 9-11 компаний, которые мне позвонили

Часть из них сразу отпала, потому что они не хотели брать студента на работу только на 20 часов в неделю. Полный день я не был готов посвящать стажировке, хотелось не забрасывать учебу.

В итоге, на собеседование мы договорились с 6 компаниями

Перед первым собеседованием было очень волнительно, потели ладошки.

Было непонятно как начинать разговор, что будут спрашивать. 2 собеседования отменили HR, потому что в процессе уже закрыли позиции. И такое тоже нормально, все рассматривают на одну позицию сразу несколько кандидатов параллельно.

3 собеседования я проходил очно, 1 онлайн

Как правило меня не спрашивали о предыдущем опыте, потому что я был студентом. Давали решать тестовые задания или кейсы.

Что в итоге:

❌ 1 отказ, т.к. не проходил по уровню владения языками программирования и не знал Java
❌ 1 отказ, т.к. не смог рассказать полный цикл разработки ПО
❌ 1 игнор без обратной связи
✅ 1 предложение на стажировку (которое пришлось отклонить, т.к. не устроили условия)

Что делать дальше?

Конечно же идти и искать другие вакансии)
А какой есть еще вариант, если мне хочется найти работу и получать опыт уже в студенчестве.

Откликнулся еще на несколько вакансий, одна из которых была в Леруа. Процесс отбора туда был выстроен в несколько этапов:
📍тестовое задание
📍несколько интервью с разными командами

✅ выполнил тестовое задание
✅ прошел 2 разных интервью с 3 командами

И наконец-то через пару дней я получил долгожданный звонок от HR и слова "Готовы выслать тебе оффер на почту для ознакомления"

С оглядкой назад хочется сказать, что я много вкладывал и вкладываюсь в свои знания

Я научился правильно выбирать то, что мне необходимо изучать, чтобы усиливать свои компетенции. Это конечно же дает свои плоды ка в карьерном пути, так и в своем развитии в целом.

Если посмотреть на мои текущие активности, то их достаточно много и все они связаны с областью аналитики

📍Работа Senior аналитиком
📍Внутренний онбординг и обучение коллег-аналитиков
📍Ведение блога и телеграм-канала
📍Написание статей про аналитику
📍Разработка собственных курсов и обучение учеников
📍Проведение консультаций опытным и начинающим аналитикам
📍Создание и развитие аналитического сообщества Analyst's Club

Большим набором знаний я делюсь бесплатно в своем блоге, отвечаю на личные вопросы подписчиков.

Часть ценных и практических знаний я даю на обучениях. Это невероятное удовольствие быть причастным к обучению большого количества числа людей, делать полезный материал и инструментарий, который люди используют потом на практике.

Шаблоны по оформлению Use Case (пользовательских сценариев)

Можно посмотреть различные варианты, скачать шаблон и применять его на проекте с нужным редактированием.

Смотреть шаблоны