Big Ledovsky | AI изнутри

Про вторсырье

Возможно вы знаете, что у меня есть хобби - раздельный сбор мусора и сдача его на вторсырье. Почему хобби? Ну, я понимаю, что переработка бытового мусора у нас составляет лишь небольшой процент, и мой вклад мало на что влияет. Тренд на экологию не новый, набирает популярность он медленно, и сдвинуть рост могут только государственные реформы.

Однако мне доставляет моральное удовольствие сам процесс. Это как чистить зубы или убираться в комнате. Это как в походе 🏕, где после сбора лагеря не должно остаться следов человека. В общем, собираю я вторсырье, складываю его в кладовке и раз в два месяца заказываю Собиратор, чтобы приехала машина и все забрала.

Почему решил про это написать. Недавно мы сходили на экскурсию в экоцентр. Было прям очень прикольно. Нам рассказали, как перерабатываются разные виды вторсырья, и показали, что происходит на разных этапах обработки. Там еще есть разные станки, и мы выплавляли значки из крышек. Несколько инсайтов

- В России оказывается 2.5 тысячи перерабатывающих заводов от небольших до огромных. Удивление, ибо я думал, что их несколько десятков

- Крафтовая "эко" бумага в некоторой степени обман 🤥. Она на 50% делается из переработанной целюлозы, а на 50% из новой. Обычные белые листы из 100% новой можно пеработать 17 раз. А из крафтовой бумаги уже ничего не пеработаешь, максимум коробку для яиц. Т.е. 50% новой целлюлозы идут в топку

- Топ 🔍 инсайт: чем отличаются PET бутылки, сданные нормально от тех, которые закидывают в синий контейнер. См. фото. PS. Синие контейнеры - шляпа. Не зря в Германии бутылки в специальные автоматы принимают.

#lifestyle

Пытаюсь держать темп постов раз в 2 недели) Тем более за последнее время было много всего

Насколько точно носимые устройства определяют фазы сна

Я уже почти 5 лет использую часы Garmin Forerunner 945. Бегом не занимаюсь, но трекаю часами шаги, сон, количество калорий на тренировках и треки ходьбы, лыж и походов. А сон - это вообще мое слабое место. Не в смысле, что я люблю поспать, а в смысле, что мне очень трудно заставить себя идти спать и выдерживать режим.

Какое-то время назад я начал чуть пристальнее смотреть на метрики сна. Помимо отслеживания общего времени сна, времени засыпания и пробуждения, гармин измеряет фазы сна и в итоге для каждой ночи дает единую метрику - sleep score. Но вопрос, можно ли ей доверять?

На самом деле саму метрику оценить наверное невозможно, т.к. непонятно какой она должна быть. Если очень хочется, можно сравнить с собственными ощущениями в течении дня. Но по крайней мере можно оценить точность измерения фаз сна, т.к. кажется если они измеряются неточно, то и смысла в sleep score тоже нет.

Чем я люблю интернет, что он полон душных людей. В Австрии есть один постдок (вроде, биолог), который сделал youtube канал, на котором он независимо тестирует трекинг сна всех популярных девайсов. Вот какие выводы можно сделать

* Лучшие девайсы дают совпадение в среднем 90% и для худшей фазы около 70%. Это кажется весьма хорошим качеством и по таким данным можно строить метрики.
* Неожиданно, но среди всех устройств лидирует Apple Watch
* Лучше Apple Watch работает только один девайс - это экспериментальное приложение Nukkuaa, разработанное в университете Зальцбурга, использующее сенсоры Polar (= студенты собрали из того, что было)
* Также, в лидерах по трекингу сна недорогие браслеты fitbit, кольцо Oura Ring, нагревающийся матрас Eight Sleep Pod 3 (за 3к долларов)) - мечтаю о таком!) и Whoop
* Garmin (не самые дешевые) находятся где-то посередине с 70% среднего совпадения и 50% по худшей фазе
* Самый худший трекинг у Xiaomi и Huawei. Увы, китайская культура производства пока концентрируется на внешней красоте, а не на реальном качестве.

Насколько я видел обзоры, Garmin плохо определяет именно REM (rapid eyes movement) фазу сна. В процентном соотношении это не очень много. Непонятно, насколько точность в 50% в REM фазе - это ок. Но, стоит все-таки заметить, что измерения фаз сна - это вполне работающая технология и значит на данные метрик вполне можно опираться. По крайней мере трекать динамику sleep score на мой взгляд можно.

Вообще, на рынке не хватает новых более открытых игроков, которые бы строили свои метрики на основе публикаций и позволяли бы внешним разработчикам писать свои алгоритмы на основе датчиков устройств.

#lifestyle

Про карты

Получил наконец-то зарубежную карту! Все это время я жил и путешествовал без зарубежной карты. Как-то справлялся, но иногда очень страдал.

Поделюсь, как делал, может быть кому-то пригодится. К тому же свежая информация по таким темам всегда полезна. За рекомендацию спасибо Вите 🙏

💎 Есть такой сервис, travelbelka. Они предлагают удаленное оформление карт в банках Киргизии и Казахстане. Я взвесил плюсы и минусы всех предлагаемых карт и выбрал карту киргизского Бакай Банка. Стоит удовольствие в копеечку, но все равно гораздо дешевле, чем ехать лично. И никакой головной боли: не нужно думать какие документы предоставить, откроют вам или не откроют и так далее.

💎 После оплаты мне прислали образец доверенности, которую нужно было заверить у нотариуса. Доверенность вместе с копиями паспортов я выслал СДЕКом. В течении нескольких дней мне открыли счет и выслали карту СДЕКом обратно.

💎 На сайте предлагают много разных карт. Критериев для выбора много, я думал какое-то время. На что стоит обратить внимание

- К какой сим-карте привязывается счет. Бакай Банк привязывает мобильное приложение к РФ номеру телефона. Для Казахстана где-то открывают местную симку и присылают вместе с картой. Мне не хотелось возиться с дополнительной иностранной симкартой, хотя кто-то говорил, что можно легко сделать esim. Хотя сейчас я вижу, что в платежных данных часто просят телефон, и может быть местная симка - это не так уж и плохо.

- Определяется ли карта как кредитная. Плохо в этом понимаю. Для аренды машины, нужно чтобы карта определялась, как кредитная, хотя я арендовал как-то машину в Европе и все по дебетовой делал. Пишут, что часть предлагаемых карт якобы определяются как кредитные (хотя по факту являются дебетовыми) и подходят для аренды.

- Мультивалютность. Мне лично была не нужна. В Бакай Банке мне на самом деле открыли целых две карты: Visa в долларах и некую Элкард в сомах. Для пополнения счета нужно перевести деньги из приложения РФ банка как раз на эту Элкард. Далее нужно сконвертировать сомы в доллары и положить уже на визу. Как работает в других банках не знаю, но думаю, что как-то похоже.

- Надежность банка и качество приложения. Тут смотрите сами. Приложение Бакай Банка выглядит как альфа версия, но вполне рабочее. Удивительно, но оно очень хорошо русифицировано, даже реклама на русском.

💎 Вот такой экспириенс. Как известно, спрос рождает предложение.

PS. Хочу оформить Youtube Premium, но не разобрался, как это сделать. Кто-нибудь знает?)
PPS. Если заходите оформить, можете мне написать, у меня есть промокод)

#lifestyle

Возвращаем рубрику мемов! #memes

Инсайты об участии в конференциях

Хорошая новость - мой доклад приняли на конференцию I'ML. Это новая конфа, похожая на Practical ML, которая обещает быть очень годной! Но этот пост не про мой доклад, а в целом.

Участие в конференциях вызывает у меня противоречивые чувства. С одной стороны, хочется выступать, потому что выступления являются проверкой и объективным подтверждением твоей компетентности. Ты можешь быть самым крутым инженером на кухне своего этажа, но это ничего не значит 🤹. Проводя аналогию с моим хобби, настольным теннисом, это как заниматься с тренером, играть с друзьями, но не ходить на турниры. Публичные выступления оголяют тебя и твою работу перед окружающими, однако в случае хорошего доклада дают уважение профессионального сообщества.

С другой стороны, всегда есть ощущение, что выступать не с чем 😕, что ты не готов и нужно еще полгода или год работы над проектом, чтобы материалы стали достаточно качественными. Нередко возникает синдром самозванца, что то, что сделано у тебя, хуже, чем у других и так далее.

💎 Мои рекомендации, что делать с подобными мыслями

- Во-первых, примите, что с уровня синьора выступать просто нужно, хотя бы внутри компании. В Авито это даже в матрице компетенций закреплено. Суть опытных сотрудников не только в том, что они хорошо делают задачи, но и развивают других. И даже если про рабочие проекты никак не рассказать, то есть множество других вариантов. Например рассказать про технологию или поучаствовать в обучающем курсе

- Во-вторых, помните о когнитивном искажении. Вам может казаться, что ваша работа тривиальна и недостойна доклада. Но на самом деле для большинства людей это будет выглядеть сложно и интересно. На конференции так или иначе приходит много начинающих и им вообще все кажется 🚀 космосом.

- В-третьих, вы должны уметь собирать в доклад то, что у вас есть здесь и сейчас. Через полгода у вас не появится ощущения готовности материала. Неоднократно проверял это на собственном опыте. Поэтому откладывать смысла нет 🙂

А какое мнение у вас? Знакомы ли вам такие проблемы?

#productivity #worklife

Спасибо большое еще раз всем, кто дал фидбек по этому каналу! Все супер полезно. Первая рекомендация, которой я воспользуюсь - постараюсь перейти на регулярный режим публикаций. Причем я читал мнения, что важно даже не то, как часто появляются посты, а само наличие графика. Попробую график среда/суббота несколько недель и посмотрю, не пропадет ли у меня удовольствие от процесса.

Меня спрашивали: Как же так, можно добавиться в розыгрыш книги не отправив форму обратной связи? Это правда, и мне самому было интересно, какая получилась доля таких людей) Итак, момент истины..

Оставило фидбек - 29 человек
Зарегистрировалось на розыгрыш книги - 22 человека

Оказалось, часть подписчиков была готова оставить фидбек просто так, от души. Это очень приятно 💗

А теперь время определить победителя. Я выбрал его генерацией случайного номера в гугл таблицах среди вписавшихся в форму. Им стал.. подписчик с ником @Mc_artifact ⬅️

Поздравляем тебя с победой!) Приз тебя уже ищет 🔥

Хочу поделиться, что сейчас смотрю.

Мне прям зашел канал Редакции Плюс (хотя основную Редакцию я не смотрю). Тематика - что-то про массовую культуру. С огромным удовольствием посмотрел историю Мистера Биста и про K-Pop.

Недавно я осуждал наплыв ютуб видео энциклопедического толка. История еды Минаева вынесла совсем. "Что ели в 19 веке?" Да какая нахер разница? Почему это смотрят?

Но на самом деле энциклопедизм затягивает, нужно просто найти свою нишу. Я - человек, восхищающийся принципом Шерлока Холмса выкидывать из головы бесполезные знания. Но ниша нашлась и на меня.

Спасибо всем, кто уже оставил обратную связь. Там прям очень много хороших советов! Я буду собирать ее до субботы и в субботу разыграю книгу

А вот и сам приз. Он будет разыгран случайно среди прошедших обратную связь. Буду рад вручить его лично в Москве или отправить доставкой по России 🙂

Новости канала и розыгрыш книги

Всем привет!

Первая крутая новость, что нас стало более 500 🎆в этом канале. Мне невероятно приятно писать для вас, видеть, что вам это интересно, и конечно участвовать в обсуждениях. Спасибо вам большое!

Вторая крутая новость, которая отчасти следует из первой, состоит в том, что пора собирать обратную связь. Я буду ооочень вам благодарен, если вы ее мне дадите.

💎 А чтобы было интереснее, среди тех, кто ее пройдет я разыграю замечательную книгу, про которую я как-то писал пост: Лю Цысинь, Задача Трех тел

➡ Ссылка на анонимный опрос из 5 вопросов

Статья про метрики рекламных CTR моделей

У меня довольно давно было желание создавать технический контент на английском. В процессе рисеча у меня начал накапливаться годный материал, и это вылилось в статью про метрики рекламных CTR моделей (те, которые предсказывают вероятность клика по рекламному объявлению/баннеру)

В качестве площадки я выбирал между Medium и Substack. Свой сайт я не рассматривал, т.к. крупные площадки помогают с охватом.

Medium на мой взгляд скатился с точки зрения качества контента. И еще там нет поддержки LaTeX для написания формул. Поэтому завел блог на Substack. Может быть через какое-то время опубликую русскоязычную версию на Хабре

https://ledovsky.substack.com/p/metrics-for-ads-ctr-models

#tech

3 месяца на контейнерах

Прошло 3 месяца как я сижу на grow food, контейнерной еде. Хочу поделиться как это было.

🎮 Введение

Особо худеть я не планировал. Думал подскину пару килограмм. Это был не первый опыт контейнеров. Лет 5 назад мы половиной команды на них сидели, причем я ел 2500 в день. Помню еще, как Лёша Попов, Саша Ковальчук и Жора Таранов худели на спор с приличными суммами денег на кону. Но опыт на мой взгляд был сомнительным.

В общем grow food я опять начал есть практически случайно, в рамках небольших улучшений своего режима жизни. Долго сидеть на нем не планировал.

В итоге прошло 3 месяца. После первого ко мне присоединилась Аня. Я похудел на 9 килограмм. Слезать с контейнеров не собираюсь, разве что планирую больше доедать сверху.

🎮 Немного подробностей о рационе

- Я выбрал 1800 ккал в день
- Контейнеры рассчитаны на 6 дней в неделю, суббота выходной.
- Еду привозят 3 раза в неделю. Время доставки стоит на одно и то же время из недели в неделю, так что я привык ее встречать
- Я регулярно доедаю белок, т.к. обычных 70 грамм в день мне не достаточно. Я пью протеин и ем протеиновые печенья (их сейчас очень много разных)
- Если в этот/прошлый день была тяжелая тренировка, то я доедаю 200-400 ккал, если нет, то до 200. Несколько раз доедал больше, когда было ощущение голода в течении дня

🎮 Впечатления

- По сравнению с версией 5-летней давности, grow food заметно прибавил разнообразия в еде. У меня нет нехватки вкусовых впечатлений и я не мечтаю, когда же контейнеры уже закончатся, и я наконец буду нормально есть
- Несмотря на стабильную потерю веса, я не чувствовал постоянного голода и вообще не страдал
- Убеждаюсь, что с меньшим весом и функциональным телом я ощущаю себя наиболее комфортно. Безумно уважаю культуристов за их личные качества, но искренне не понимаю зачем носить на себе огромную мышечную массу

🎮 Итог

Я убежден, что похудение - это не про изнуряющие диеты, а про образ жизни. Преодоление себя должно быть в меру, ведь жизнь - это марафон.

#lifestyle

Как разобраться в трансформерах

Я писал, что я DS общего профиля и в нейронках крутым специалистом не являюсь. Честно сказать, периодически переживаю по этому поводу: на каждом шагу говорят о Chat-GPT, телеграм каналы пестрят разборами свежих архитектур, коллеги вокруг обучают с нуля сложные модели и так далее. А я нахожусь как бы вне этого тренда.

Поэтому какую-то часть свободного времени я трачу на прокачку скиллов. И хочу с вами поделиться своим рецептом, как реально разобраться в GPT-like моделях. Реально разобраться - это чтобы ощущение магии ✨ происходящего было ограничено разумными пределами. Нужно, чтобы у вас за плечами был базовый курс машинного обучения.

На мой взгляд, самый эффективный способ, чтобы в разобраться в ML - это написать какое-то количество внутреннего кода самому. Не самый простой пусть, скажете вы 🤨. Но просто слушая лекции и вызывая fit-predict, разобраться еще сложнее.

У ШАДа есть отличный публичный курс по NLP от Елены Войты. Там много всего интересного, но есть неделя про трансформеры, которую можно пройти отдельно от всего остального.

➡Что я предлагаю

- Сперва читаете учебник. Именно учебник, а не лекцию, т.к. только в нем подробно с примерами разбираются ключевые компоненты трансформеров
- Затем решаете семинар, держа учебник "на коленках"
- Ну и в завершение домашка на дообучение модели

В семинаре нас сперва немного обучают применять готовые модели, а затем предлагают самим написать GPT-2! С нуля это было бы очень сложно, но заботливые авторы написали часть кода за нас и добавили тесты. А нам нужно дописать сутевые части. Далее в написанный нами GPT-2 подгрузятся предобученные веса и мы сможем погенерить этой моделью текст.

Работает GPT-2, конечно, не так круто, как GPT-4, но все равно вам понравится =)

А для тех, кто хочет изучить базовые нейросети, у меня есть рекомендация похожей ШАДовской домашки, где нужно написать сверточную сеть без использования готовых слоев. Домашки нет в свежих версиях курса, но она осталась в архивных ветках. Напишите в комментариях, если интересно =)

upd: Написал про другую крутую домашку в комментариях

#tech