Я – Дата Инженер | Евгений Виндюков

Москва! Подскажите!

Если у вас было желание дать мне по морде, завтра есть большая вероятность это осуществить

Завтра на День России в МСК кто куда движет? Есть какие-то интересные места может?

Я захожу на КудаГо и опять ничего не выбираю от кол-ва предложений..

Запись СТРИМА по BootCamp!

Смотри тут ➡️YOUTUBE

Запись со стрима про Буткемп для Дата Инженеров!

Мы с @ShustDE запускаем буткемп для DE с реальными задачами. Залетай, пока не поздно!

Подробности можно посмотреть в нашем чате, посвященном BootCamp
Вступай!

🔴 Сегодня Созвон в 20:00 МСК

Обсудим сценарий BootCamp. Проблемы, с которыми сталкиваешься на работе и как не спалиться в том, чего не знаешь. И надо ли?

Ссылка встречу

Мы придумали не курс, мы создали вам еще одну работу. Не нужно читать книжки, если вы еще не тыкали инструмент вживую. Это бесполезная трата времени. Мы даем вам возможность положить прод, а уже потом разбираться в чем причина. Как правило, именно в таких условиях мы и учимся.

Мы переворачиваем формат обучения. Никаких презентаций с историей о Дата Инжиниринге, никаких теорий о том, как развивался фреймворк. Если вам нужна работа, значит вы учитесь работать с инструментом сразу. Про все тонкости, истории происхождения языков программирования и так далее читайте, пожалуйста, без нас на досуге.

Достаточно продающий текст?

Bootcamp чат для ВСЕХ!

Открыли чат с программой Буткемпа для ВСЕХ!

ссылка на чат

Заходите все, кто думает пройти буткемп, залететь наконец-то в IT или просто из интереса. Внутри есть программа обучения. Мы ждем пожелания и боли от вас. Программу возможно скорреткируем, если увидим конкретные хотелки!

Это не курс, здесь не будет никаких нудных и душных лекций. Мы вычеркиваем очень много бесполезной инфы.

Смело задавайте свои вопросы, а мы будем на них отвечать.

Цель буткемпа - как можно скорее запрыгнуть в поезд IT!

В IT только по призванию!

Итак, наваливаю вам базы! Мы, люди, живем слишком короткую жизнь и если вам какой-то умник затирает про призвание в жизни, разворачивайтесь и уходите. Значит, спускаемся с небес на землю. Речь не идет о становлении математиком, чтобы доказать теорему Пуанкаре. Вы тупо можете освоить базовые профессии, где можно лутать норм бабки. Для этого не надо быть гением. Для этого надо вовремя и правильно поставить цель и ежедневно заниматься, осваивая только ТО, ЧТО ТРЕБУЕТ РЫНОК.

Когда IT схлопнется и SkyNet наконец-то заменит программистов, я переучусь на СВАРЩИКА ИЛИ ТОКАРЯ и также заведу канал Я – Токарь или Я – Фермер (как в Интерстелларе). Но, к сожалению, AI еще настолько тупой, что походу не скоро я еще смогу начать выращивать кукурузу!

Ближе к делу. В видосе можете услышать главную идею: Стать можно кем угодно в этой жизни, если вы раскачаете нужные навыки. Здесь нет ни слова про генетику или божий дар. Мы говорим с вами про профессию наемного сотрудника... Это просто БАЗА.

▶️ ссылка на видос

Бот для просмотра YouTube
@NamelessNetwork_bot

⚡️Пошаговый план: как стать аналитиком данных в 2025

Хотите попасть в аналитику, но теряетесь в море информации и не понимаете, какие навыки действительно важны? Боитесь, что без опыта вас не возьмут на работу? И да, ещё один популярный вопрос — а что, если мне 30/40/50+ лет?

Андрон Алексанян — эксперт по аналитике с 8-летним опытом и по совместительству CEO Simulative — покажет рабочие схемы и чёткий план, как устроиться в аналитику быстрее, даже если у вас нет опыта

Что будет на вебинаре?

🟠 Разберёте полный роадмап: что учить, в каком порядке, до какого уровня;
🟠 Лайфхаки трудоустройства:
— покажут реальные примеры, как оформить резюме и портфолио, чтобы привлекать внимание;
— обсудите, какие отклики работают, а какие сразу отправляют в корзину;
— изнанка найма: инсайдерский взгляд на процессы отбора
🟠 Практические техники для новичков: разберёте, как компенсировать недостаток опыта и быстро закрывать пробелы в знаниях

🕗 Важно досмотреть вебинар до конца, чтобы получить бонус от Simulative, который поможет бустануть карьеру

😶Зарегистрироваться на бесплатный вебинар

#SravniTechPodcast

Стажировок мало, а джуны должны уметь всё: как становятся ИТ-специалистом в 2025 году❓

В новом выпуске Sravni Tech Podcast этот вопрос детально обсудили наши гости-эксперты:

🗣Наталья Рыжова, руководитель Центра карьеры в МГТУ им. Баумана
🗣Евгений Виндюков, дата-инженер и автор телеграм-канала о том, как попасть в ИТ

В выпуске:

- Карьера в ИТ «с нуля». Пет-проекты заменяют реальный опыт?
- Пойти на стажировку vs попробовать сразу устроиться джуном
- Пожарный хочет стать айтишником. Когда карьерный переход имеет смысл?
- Успешный старт в компании: софт-скиллы, онбординг, наставники

Посмотреть подкаст можно здесь:

✅YouTube
✅RUTUBE
✅VK

А послушать — здесь:

✅Mave
✅Плеер в ТГ

Оставляйте реакции, делитесь ссылкой (не только с пожарными)! 📣

У ML-инженеров одна из самых высоких зарплат на старте — 80-100 тысяч рублей в месяц. И спрос на специалистов хороший. Но есть нюанс — чтобы в нынешних реалиях уверенно стартовать в профессии, надо уметь немного больше, чем джуны-конкуренты.

Мы в karpovꓸcourses знаем, чего хотят эйчары, поэтому для старта в инженерии машинного обучения рекомендуем брать дуэт курсов: «Инженер машинного обучения» и «Симулятор A/B-тестов».

На практике научитесь:

Строить ML-модели, отвечающие задачам бизнеса;
Запускать и анализировать A/B-тесты;
Работать с метриками, гипотезами и бизнес-целями.

Погрузитесь в полный цикл работы ML-инженера. Выполните более 600 заданий и реальный проект для портфолио. Получите карьерную помощь в поиске первой работы.

До 31 мая стоимость двух курсов на 15% ниже. Воспользуетесь выгодой для уверенного старта в IT.


Реклама. ООО «Карпов Курсы», ИНН: 7811764627, erid: 2VtzqwXtTGg

Какой комп лучше?

Ваш комп не будет запускать расчеты локально, поэтому достаточно, чтобы тянул несколько открытых Pycharm, dbeaver, docker и много вкладок браузера.

Рекомендую MacBook Pro или Air m1 и выше (14 диагональ 16 Gb). Эту диагональ удобно таскать с собой, при этом в ней все еще можно работать с кодом.

Если на работе выдают такие компы, отлично, вам повезло.

Но есть варианты, когда вам будут выдавать просто винду (хуавей, асус или леново). В целом ок, если там дорогой ноут с хорошим экраном. Конечно, я всегда подключаю второй монитор, но и мелким экраном тоже пользуюсь.

Самый худший вариант - это выдача дешевого ноута с подключением удаленного рабочего стола и с кучей запретов на пользование chat gpt, телеги и так далее.

Это наверное самое неудобное. Хотя если за страдания доплачивать, то мб и норм)

А за сколько тогда человек готов будет на глиняных табличках например работать? )

🐯 Ищем Data-инженера в Outlines Tech

Outlines Tech — аккредитованная IT-компания и технологический партнёр для бизнеса. Разрабатываем ПО и поставляем IT-ресурсы. Получили награды как одни из лучших работодателей по версиям Forbes, РБК и hh.ru. Больше информации о нас — в карточках ☝️

Ищем Data-инженера с опытом работы в финансах или в казначействе в команду ценообразования кредитных предложений для розничного бизнеса 🔎

🐯 Задачи:
— Внедрять новые алгоритмы фондирования
— Работать с новыми источниками данных
— Документировать алгоритмы и бизнес-процессы
— Сопровождать задачи: от постановки и разработки до тестирования и вывода в прод
— Разбирать текущую методологию и участвовать в улучшении бизнес-процессов
— Контролировать сроки и качество выполнения задач

💼 Узнать, что предлагаем и откликнуться можно на hh.ru

А если вакансия для вас неактуальна, то поделитесь постом с друзьями. За трудоустройство по вашей рекомендации выплатим 70 000 рублей! 👉 Подробнее

Больше вакансий и отзывы о компании найдете здесь 👉 Здесь

Запуск буткемпа!

Вообще, основная цель буткемпа — оффер через 3 месяца

И для этого совсем не нужно учить весь Python или проходить тонну теории, как на курсах. Мы специально вырезаем весь лишний и ненужный материал, который не пригодится ни на собесах, ни на работе.

Что нужно для оффера?
🔵Резюме, которое проходит фильтры HR
🔵Пет-проект с нормальным ETL-пайплайном: батч, стриминг, API
🔵Понимание, как выстроить процесс от начала до конца: от источника до витрины
🔵Умение работать с Airflow, Spark, Greenplum, ClickHouse, Python, SQL (базово!)
🔵Навыки работы с Docker и командной строкой
🔵Умение отвечать на типичные вопросы с собесов

Все.
Остальное — избыточный багаж. Например, зачем учить MapReduce, если ты никогда не будешь это писать? Это легаси, которое давно уже закрыто фреймворками.

Мы смотрим на буткемп, как на симуляцию первой работы.
Представь, что ты уже устроился, и у тебя есть тимлиды. Мы и есть эти тимлиды. Мы даём задачи, показываем, как их решать, помогаем, если что-то не работает. Ты не учишься — ты работаешь.

Это важный момент: на первой работе от тебя никто не будет ждать глубоких теоретических знаний. Все, что нужно — это писать базовый код, запускать пайплайны и уметь решать реальные задачи. Вот этому мы и учим.

У всех Data Engineers задачи примерно одинаковые. Мы всё равно тянем данные, обрабатываем, кладем в хранилище. Отличия — только в стекe и мощности серверов.

🔴 В скором времени скину ссылку на чат ДЛЯ ВСЕХ, где можно будет посмотреть на ПЛАН БУТКЕМПА, задать вопросы, накидать идей, если у вас есть конкретная боль.

👍 Обновляю Пет Проект!

Неплохо так пересобрал свой ETL pipeline и теперь там есть Streaming + Batch. Это я собираю новую архитектуру с этого стрима и скорее всего она и будет в БУТКЕМПЕ в итоге!

На какой стадии сейчас:
🔵 В postgres автоматически наполняются таблицы + сами обновляют строки. Debezium считывает все изменения и закидывает в Kafka. Оттуда уже Spark Streaming льет в S3 бакет и раскладывает по партициям. Настроены heartbeat + signal таблицы.
🔵Почти тоже самое со второй таблицей, но уже настроен просто забор данных батчом.
🔵Появились prometheus и grafana для отслеживание метрик (но пока еще не настроил)
🔵Автоматизировал создание БД и табличек на стадии docker-compose (чтобы все ставилось с одной кнопки)
🔵Хранилище в реальном MinioS3 (раньше просто сохранялось в файловую систему)

Хочу сделать:
🔵 Добавить слои clean и mart в S3(сейчас только raw слой)
🔵 Написать spark джобы для построения витрин и складывания их в Clickhouse
🔵 Переписать старые airflow dags на новую архитектуру
🔵 Добавить Trino от CedrusData (у них есть free docker image)
🔵 Добавить Iceberg, либо продумать иной вариант обновления строк

Эта версия пока доступна в соседней ветке
✅ Кто хочет, может внести свои правки и идеи, если есть желание. Более менее финальную версию дропну позже.

⚡️Анализируем продажи на Wildberries с помощью Python

С каждым днем все больше бизнесов выходят на маркетплейсы, а значит еще более ценными становятся аналитики, которые умеют с ними работать. Хотите за несколько часов собрать интересный кейс для своего портфолио?

Андрон Алексанян - эксперт по аналитике с 8 летним опытом и по совместительству CEO Simulative в прямом эфире проанализирует продажи на Wildberries с помощью Python.

Что будет на вебинаре:

🟠Напишем скрипт на Python, который каждый час собирает статистику о ранжировании карточки на WB по ключевым запросам;
🟠Построим наглядные визуализации для отслеживания динамики ранжирования.

Важно досмотреть вебинар до конца, чтобы узнать как упаковать этот кейс в портфолио своих проектов.

😶Зарегистрироваться на бесплатный вебинар