DataGym Channel [Power of data]

#events : Q&A #1 на DataFest
Когда: 11 июня, 12:00–16:30

Уже в эту субботу устроим совместный просмотр 4 докладов и нетворк со спикерами этих докладов

Расскажем как применить трансформер на событиях от пользователей, поговорим о прогнозе времени проезда по маршруту, обсудим особенности внедрения ранжирования в уже существующий проект в продакшне и поделимся решением задачи о построении рекомендаций видео по тексту.
А после докладов мы встретимся с командой CatBoost.

Ссылка на подробности -> https://ods.ai/events/yandex-df2022-11-06-2022
А еще для удобства сделали событие, которое можно добавить в ваш календарь.

#events : Data Fest Online 3.0
Когда: прямо сейчас!
Неожиданно, как снег в январе, пришел 3 online Data Fest
В этом году я поучаствовал в создании >20 докладов.
Еще, из интересного, можно узнать о переезде сообщества ods.ai из Slack в скором будущем.
Но все можно посмотреть потом и в записи, а сейчас лучше воспользоваться возможностью и прийти на нетворк в спейшл-чат

Регистрируйтесь на фест -> https://ods.ai/events/datafestonline2022/join

Заходите на неторк сессию -> https://live.ods.ai/
Пароль: followthepinkparrot
Почти весь день буду в комнате Яндекс-а

Друзья из hh весной провели конкурс по анализу отзывов на компании.

Сегодня через 3 часа пройдет онлайн-митап с разбором конкурса и топовых решений, а также доклад от ребят из ХХ про их новый подход в матчинге вакансий на резюме.

#реклама

Вебинар Бесплатный ML Space на базе инструментов Intel oneAPI для всех желающих.

У нас отличные новости, инструменты Intel® oneAPI на облачной платформе ML Space стали доступны для физических лиц. Это значит, что любой желающий может бесплатно использовать набор программных инструментов для ускорения машинного обучения, анализа данных, разработки ПО.

На вебинаре вы узнаете:

— подробности об инструментах Intel® oneAPI;
— сценарии применения этих инструментов для построения ML-моделей;
— как получить бесплатный доступ к инструментам на платформе ML Space.

Вебинар будет полезен всем, кто интересуется data science.
Регистрируйтесь по ссылке.

Вебинар пройдёт — 14 октября 2021, четверг, 12:00

*SberCloud — облачный провайдер услуг и сервисов для физлиц, бизнеса и государственных организаций.

Data Science MeetUp (онлайн + офлайн)

29 сентября встречаемся в Иннополисе, чтобы поговорить об использовании алгоритмов ML в производстве и обработке данных с самолетов и полетов. Бонус: кое-что про космос ✨

Узнаем:
- как экономить на производстве с помощью машинного обучения;
- как прогнозировать техническое обслуживание самолетов с помощью данных;
- как машинное обучение помогает оптимизировать обслуживание воздушных судов;
и многое другое 🔥

Спикеры:
- Александр Стрельников, Lead Data Scientist, Accenture/Applied Intelligence
- Андрей Жуков, CTO S7 Techlab
- Валентин Азанов, Lead Data Scientist, S7 Techlab
- Любовь Рожкова, Middle Data Scientist, S7 Techlab

Модератор: Василий Сафронов - немного data scientist, немного technical engineer, немного product manager

Для кого: разработчикам и ML-аналитикам, а так же всем интересующимся самолётами и производством

🕑 29 сентября, 17ч (мск)
📍г.Иннополис, Технопарк им. Попова, 2 этаж, конференц-зал

Онлайн-трансляция

Регистрация и подробности докладов

#реклама

24 сентября будет облачно, потому что пройдет Yandex Scale (крупнейшая конференция платформы Yandex.Cloud)

За весь день планируются более 30 докладов в 5 потоках: Infrastructure, Data Platform, Security, Cloud-native, ML & AI
Поделюсь заинтересовавшими меня докладами:

- Облачное поколение ноутбуков — от тетрадок к сфере данных: ребята расскажут про DataSphere, у меня тут есть много вопросов спикеру, держитесь =)
- Программа содействия образованию и науке в области Computer Science: это очень круто, такое есть у многих облаков, но всегда есть вопросы, а достучаться до Яндекса явно проще
- Рекомендательная система на базе DataSphere: прям интересно, какую рек.систему можно построить и показать за 40 минут
- Расскажите какие доклады и почему заинтересовали вас в комментах к посту

Мы на нескольких проектах уже перешли или задумываемся над переходом на Yandex.Cloud. Недавно даже протестировали часть задач на GPU в DataSphere. Потому я обязательно зайду задать вопросы и узнать о новостях и скорейших релизах.

Конференция пройдет онлайн, участие бесплатное. Программа и регистрация тут: https://scale.yandex.ru/
За новостями и деталями можно следить на официальном канале конференции @yandexscale.

Сегодня вышел подкаст со мной.
Я рассказал, как попал в DS, почему работа с данными не только работа, но и веселое хобби, чем комьюнити может помочь, как "пользоваться" ODS для новичков и несколько кулстори.
Послушать можно на подкаст платформах или Ютубе.
Записывали почти месяц назад и мои предсказания про очные мероприятия можно пока серьезно не рассматривать.

MLOps - то что захватывает меня последнее время, но у меня много претензий к текущим решениям и продуктам.

Расскажите про ваши открытия и библиотеки, даже если они давно известны, в комментарии к этому посту.

А в четверг будет онлайн-митап. Если у вас нет MLOps или вы уже опытный в этом, подключайтесь посмотреть. Уверен, что будет интересно. А мой коллега, Роман, расскажет про MLOps в Lamoda.

Утомил вас переписыванием новостей DataFest, но следующий доклад также из моей секции.

Сегодня в 19:00 по МСК Дмитрий Аникин расскажет об эволюции инфраструктуры разработки моделей ML в Касперском, как модели проходят путь от notebook до production

Весь путь от модели до сервиса, с болью и проблемами: CI/CD, мониторинг, алертинг
Если вы из разработки, вам тоже будет интересно: как "Data Scientist-ы которые не умеют программировать" прошли этот путь, что им удалось перенести из разработки, а что не вышло из-за специфики.

Встречаемся в комнате SysML в Spatial Сhat, актуальный пароль на странице феста в разделе Нетворкинг.
Как обычно, будут проблемы с получением пароля, приходите в комменты. До встречи!

Сегодня в 19:00 по МСК в рамках Data Fest-а доклад Дмитрия Дремова. Он расскажет, как модель может реагировать на каждое пользовательское действие, но использовать только offline предсказания

Вчера я рассказал про важность нетворкинга. С Димой мы познакомились как раз благодаря сообществу. Мы работали с ним на нескольких проектах, а сейчас трудимся в одной команде. Меня до сих пор поражает его основательный подход в решении задач и его порой нетривиальные взгляды на задачи. Потому для меня стало честью помочь ему с докладом.

В докладе Дима как раз расскажет про подход к ранжированию (сортировке) контета у нас в компании, а потом ответит на любые вопросы по своему докладу.

Встречаемся в комнате SysML в Spatial Сhat, актуальный пароль на странице феста в разделе Нетворкинг.
Будут проблемы с получением пароля - приходите в комменты. Увидимся там.

К недавнему посту, который начинался как "Я в ПК многих конференций, а где то организую целые митапы сам..." пришел (заслуженно) от товарищей стеб про Успешный успех.
Сегодня ds-контента не будет, потому расскажу зачем я во всем этом участвую.

Я люблю нетворкинг. Хорошие знакомства помогают найти интересные предложения о работе, экспертизу в решении задач, которые самостоятельно решить не получается.
Когда я начинал перекатываться из разработки в анализ данных (2010г) источников было мало, я катался по разным российским академическим конференциям (Диалог, ромип/russir, AIST, AINL), знакомился с опытными, задавал глупые вопросы (в чем преуспел) и черпал идеи. По опыту it-конференций (студень от Яндекса, YAC, хайлоад), я видел, что ребята на таких мероприятиях охотно идут на контакт: так на Студне я отловил Сегаловича, спрашивал его про реализацию шинглов, а потом он учил меня жонглировать. Расположенность к тебе участников дата-конференций была и остается на том же уровне.

Участие в мероприятиях даже слушателем дало мне много знакомств, некоторые из которых не просто остались до сегодня, а даже окрепли и перетекли в дружбу семьями.
Когда я начал работать в ds-сфере, меня начали звать выступать (тогда людей было меньше и получить такое предложение было проще), а потом и модерировать. Но мне по прежнему нравилось слушать.

И тут подумалось, если я буду организатором или в программном комитете, то смогу отбирать те доклады, которые важны и интересны мне (не в ущерб контенту). А если за тобой известный бренд конференции, то ты можешь написать даже "богу машинного обучения", и вероятность, что тебя проигнорируют, гораздо меньше. Так по конференциям-секциям-митапам, где я участвовал, можно проследить зону моего интереса в области.

Если вы хотите выступить на конференции/митапе, но не знаете в каком, пишите тему, я вас сориентирую и мы подберем для вас подходящий митап.
Хорошего вечера!

Пока на улице жара, остыньте дома под PyData секцию ДатаФеста в Spatial Сhat
Встречаемся через 15 минут

🔸12:00 Влад расскажет про библиотеку Inferoxy, ещё один движок для инференса нейронных сетей
🔸14:00 Воркшоп по AutoML от создателей библиотеки LightAutoML

Встречаемся в комнате PyData в Spatial Сhat, актуальный пароль на странице феста в разделе Нетворкинг.

api-ка

import requests
import json

headers = {
    'Accept': '*/*',
    'Content-Type': 'application/json',
    'Origin': 'https://yandex.ru',
    'Content-Length': '45',
    'Accept-Language': 'ru',
    'Host': 'zeapi.yandex.net',
    'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_6) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/14.0.3 Safari/605.1.15',
    'Referer': 'https://yandex.ru/',
    'Accept-Encoding': 'gzip, deflate, br',
    'Connection': 'keep-alive',
}

data = json.dumps({"query":"Заходит ","intro":0,"filter":1})

response = requests.post('https://zeapi.yandex.net/lab/api/yalm/text3',
                         headers=headers,
                         data=data)

В комментарии к посту выше,заметили, что выпилили чувствительные темы

Зелибоба вернулась и стала Балабобой (неужели проблема с копирайтом была?!)
https://yandex.ru/lab/yalm

3 раза в неделю по пн-ср-пт в 9:30 (мск) мы проводим Дата Завтраки Online
Они более 4 месяцев стабильно проходят в ClubHouse (What Is Dead May Never Die), завтраки живее всех живых
Мы общаемся, пока собираемся или едем на работу, просыпаемся или настраиваемся на рабочий лад.
Мы обсуждаем все, что связанно с данными. Но у нас нет четких тем: мы обсуждаем новости, отвечаем на вопросы и готовы выслушать.
Приходите послушать или поговорить. Ссылка на комнату мы кидаем в отдельный телеграм канал

Через 5 минут (8 июня в 19:00) пройдет ML Party — регулярный митап Яндекса о разных применениях машинного обучения в IT.

В этот раз про CV, speech и про то, что иногда вместо огромных тяжелых моделей приходится обучать более эффективные и не менее качественные.

https://events.yandex.ru/events/ml-party/08-06-2021

В русском ютубе вышло видео об Искусственном Интеллекте
На вопросы отвечают Крайнов, Лемпицкий, Ханин и другие
Распознавание лиц, роботы, дипфейки и вот это вот все

Как раз то видео, что можно отправить маме со словами "я занимаюсь вот этим" (но на деле я продаю труселя с использованием данных)

Яндекс открыл демку своей GPT-3
Посмотреть можно тут https://yandex.ru/lab/yalm
А кратко как работает тут https://yandex.ru/lab/yalm-howto