дата инженеретта

Кто на ит-пикнике - давайте знакомиться!

Коллеги, всем привет!
Я уже на ИТ-пикнике, кто тоже тут - приходите познакомиться!🤍
Уже нафармила три пачки наклеек, пряник, мини-колонку и смузи)

❔Вопросы подписчиков

Мне недавно задали вопросы по DE в Варшаве, и я решила привлечь своего знакомого дата человека, чтобы узнать зарубежную точку зрения.
Его зовут Aaron, лет 35, из Канады, PhD, пилит ПО в DS для стартапов.

🌸- это моё мнение
🍊- это его мнение
Решила не переводить, так что качайте аглицкий in action.

1️⃣Дата инженеры ближе к backend или аналитике?

🌸 Мне попадались совершенно противоположные мнения: на одних собесах складывалось впечатление, что де - это недопитонист, на других - что полноценный разработчик. От компании может сильно отличаться, как повезет.

🍊Data engineers share some programming skill with backend engineers, and data engineers share some data skills with analysts.

2️⃣Как Вы считаете, они являются разработчиками, только с другой специализацией?

🌸 Я думаю, что нужно постараться, чтобы стать норм разработчиком, т.к. ЯП используются не до такой глубины.

🍊Yes: software engineers that specialize in data tools.

3️⃣Возможен переход на более технические позиции в тот же бекэнд и/или внедрение практик разработчиков для более качественной работы?

🌸 Думаю, что возможен. Кстати, вчера сходила на внутренний менторинг по питону, и мы накидали темы, которые нужно качать.

🍊Most web service backend development really just demands general computer science and programming background with only a small amount of specialized knowledge in individual languages or frameworks. Really much more drastic changes are also possible if you’re sufficiently motivated and capable.

4️⃣С какими командами внутри компании чаще всего взаимодействуют?

🌸 Основное - DA. DS могут, но сильно меньше. Если бизнес - это уже не DE-шные эдхоки. Поставщики данных (внутренние, внешние).

🍊Probably the data consumers and the engineers who maintain the APIs/data sources.

5️⃣Обязанности под одним и тем же титулом не всегда одинаковые в разных компаниях (т.е на позиции data engineer могут быть требования как к аналитику). Насколько ок/не ок?

🌸 Мне такое вообще не нравится :/ Время идет, а навыки не прогрессируют.

🍊Yeah, this is a red flag. I have seen it happen with a «data scientist» position that had an analyst job description.

6️⃣Насколько это даёт мобильность в будущем при переходе на другие должности? Или стоит работать на условно первой работе дата инженером ради титула и опыта, даже если это аналитик под титулом инженера, параллельно изучать новые технологии и идти дальше?

🌸 Строчка DE определенно открывает много дверей) Но нужно быть готовым, что потом ты все равно попадешь на джуна, если не сможешь доказать обратное. А не имея практического опыта, это сделать будет тяжело. А еще можно попробовать проявить инициативу и внедрять дата инженерские штуки на своем месте.

🍊I would take this option. Stay in your job and keep getting paid while studying. When you interview for real data engineering jobs, you can be honest, but emphasize what parts of actual data engineering you got exposure to, and what parts you have studied for.

7️⃣И немного про стек:

🌸 У нас это Hadoop, Yandex/VK Cloud, Spark, SQL, Greenplum, Clickhouse, Postgres, Python/Scala, Airflow/Dagster, Kafka, Docker - самые основные.

🍊I think most DE work would not be in Python, FWIW, from what I've seen.
Python will still be important, but also SQL, Java, and a bunch of DSLs (e.g. Hashicorp Config Language)
Also you'll probably need to know cloud tools which you'll configure either through a web console or APIs
Some overlap with devops, basically

🌸: Is Hadoop dead?
🍊: I think so. I haven't seen it since 6 years ago.

Посещение офиса Тинька

🗝 Как попала?
Зарегалась и пришла на митап тимлидов

🐾 Где?
Офис на Белорусской, размеры оцените по фоторепортажу) Я была совсем с краешка и прошлась только по 2му этажу.

🎤 Что было?
Три спикера, которые рассказывали что-то про эффективность, процессы, ревью, ресурсы, работу команд. Также узнала, что в точке холакратия - власть в руках команд, а не управления. И тебя выгонит сама команда, когда она поймет, что пора очиститься. Так-то.

Вообще показалось скучновато 😐 Но вот несколько мыслей, которые я записала:

💬 Мы не можем все бежать, как стартап, если мы не стартап.

💬 Быстро - это медленно, но без остановок.

💬 Поощрить вклад в сиюминутный результат.

💬 Хоть перформанс ревью и порождает конкуренцию, но цель у всех одна.

💬 Если любишь - отпусти (чел не будет хорошо работать без заинтересованности, пусть лучше приносит выгоду где-то ещё).

💬 С изменениями не надо бороться, надо работать с ними.

💬 Достигнуть целей, которые даже не ставил.

🎙Что думаете?
🎙А сколько у вас уходит времени в неделю на созвоны?

Дожила - букирую себе обеды

✨ Недавно снизошло такое озарение:
чёрный ящик -> собес -> светло-серый ящик
Ещё осознала, что вопросы ради вопросов - это скучно, и у каждого должна быть своя цель.

📝Выявила для себя (не знаю, как у других) такие категории вопросов:
- это база, ну просто нельзя не спросить
- на опыт прохождения собесов (то, что все у всех спрашивают)
- на подумать
- на уровень начитанности
- на душноту
- на практический опыт
- на то, что нужно нам

Заметила, что люди сыпятся на опыте. Вроде есть умное слово в резюме, но начинаешь спрашивать детали - становится все понятно. Прикапываюсь к каждому слову, которое не прозвучало в рассказе о себе, но было в резюме 🥰

🔍А мы все еще продолжаем собесить и искать ДЕ к себе в команду.

Тем, кто писал раньше - я должна была вернуться да/нет или hr с деталями. Простите, если затянулось, но мои предложения хр задвинули подальше🌚 Но я настроила пусть побыстрее через PO (Product Owner)

✏️Так что если ещё хотите или если вы остались без ответа, отпишитесь плиз

🎤 IT stand-up 🎤

Очень хотела пойти на IT stand-up от яндекса, даже зарегалась за 3 недели, но мою заявочку отклонили(

Зато наконец-то нашла, куда они это все выложили✨
Ну и народу там, конечно... 😮
Всё, пойдёмте смотреть, пока ютуб работает

Тык

dbt meetup 13.08 19:00

Намечается онлайн-митап по дбт!
Я бы послушала про data mesh in action, запускают ли другие dbt в airflow через BashOperator, про Dagster, т.к. с ним не работала, и метаданные + AWS.

Потом можно обсудить, если будет что обсуждать)

https://space307.team/dbt-meetup

Начинаю серию постов про офисы. Телефон переполняется фоточками, поэтому настала пора рассказать и поудалять)

Сегодня про Авито

🗝 Как попала?
Просто увидела в ит-чатиках приглос и заполнила гугл-формочку.

🐾 Где?
Офис на Белорусской, занимают 5 этажей.

🎤 Что было?
Всего было человек 15, для нас устроили экскурсию по всем этажам. Втихаря со стойки утащила ленточку для пропуска с лого 😅

Каждый этаж имеет свою тематику: шведские острова, деревянный этаж, этаж переработанных штук, деревенский стайл. Переговорки в честь городов и языков программирования.

🧩 Есть IT Bar, куда можно прийти за техникой, спортзал, бильярдный стол, муз. инструменты и комната с настолками. Мерч покупается за всякие активности типо провести экскурсию, сделать что-то крутое.

Фото 4: место, где можно поспать
Фото 5: лампа из ручек
Фото 7: скрытый коридор
Фото 8: купленное на авито

В конце был квиз на скорость, где я выиграла бутылочку и наклейки 🙂

Нашла ещё больше крутых фоток тут