🍳 Датазавтраки ☕️ НСК (Академ)

На датазавтраке обсуждали книгу "как измерить что угодно" https://www.ozon.ru/product/kak-izmerit-vse-chto-ugodno-otsenka-stoimosti-nematerialnogo-v-biznese-habbard-duglas-u-2869587911/

Она есть на английском сами знаете где

Вот статья к библиотеке MAPIE https://arxiv.org/abs/2207.12274

Вот библиотека для конформного прогнозирования поверх другого классификатора https://mapie.readthedocs.io/en/stable/

Сборник ссылок про конформное прогнозирование от автора книги выше https://github.com/valeman/awesome-conformal-prediction

Рассказывал про конформное прогнозирование. Вот книжка на русском https://dmkpress.com/catalog/computer/data/978-5-93700-341-6/

с третьего не осталось видеозаписи, только слайды, по четвертому материалы выгружу к следующему датазавтраку

вот второй воркшоп, тоже черновик https://kolodezev.ru/causal-inference-workshop-02.html

Обещал отправить ссылки на воркшопы по causal inference - вот первый, черновик, постепенно приведу в порядок https://kolodezev.ru/causal-inference-workshop-01.html

Как получается регуляризация из байесовского приора https://alexanderdyakonov.wordpress.com/2018/07/30/%d0%b1%d0%b0%d0%b9%d0%b5%d1%81%d0%be%d0%b2%d1%81%d0%ba%d0%b8%d0%b9-%d0%bf%d0%be%d0%b4%d1%85%d0%be%d0%b4/ см у Дьяконова

Напишите, пожалуйста, в комментариях про что говорили. Пришлите ссылки, я их тоже сюда опубликую

Рассказывал про работы Lesley в Ливерморском вычислительном центре про оптимизацию скорости обучения, размера батча и тд https://arxiv.org/abs/1803.09820 например. Работы старые 2018 года, Лесли придумал автоматический поиск скорости обучения и проч, но он:
1) Работал с SGD со ступенчатым отжигом
2) Считал сверточные сетки

т.е. его результаты не обязательно сработают у вас с Адамом и LLM

Рисовал по памяти картинку https://arxiv.org/abs/2503.04715 из статьи

Разбирали вторую версию шпаргалки про оценку (она еще доработается) https://kolodezev.ru/ai-value-estimation.html

Еще раз обсуждали методику оценки эффекта от внедрения AI https://a-ai.ru/wp-content/themes/Alliance/static/files/fin_eff.pdf

Обсуждали кейс AES тоже про энергетику https://h2o.ai/case-studies/aes-transforms-energy-business-with-ai-and-h2o/

На датазавтраке обсуждали кейс фотоэлектрической станции https://www.ijfmr.com/papers/2024/6/30731.pdf

на позапрошлом датазавтраке говорили про анализ утечек через релеевское рассеивание в оптоволоконном кабеле- а у мтс про это есть продукт, оказывается ( за ссылку спасибо @madrugado)

МТС внедряет технологию оптоволоконной сенсорики в решениях умного офиса и города

Результаты первых пилотных проектов показывают, что применение технологии оптоволоконной сенсорики позволяет примерно на треть сократить затраты на оборудование и монтаж по сравнению с традиционными решениями

В технологии оптоволоконной сенсорики анализируется распространение световых импульсов в оптическом кабеле: компактный прибор — когерентный рефлектометр — посылает в оптоволокно и принимает рассеянные в нём модулированные импульсы света

Любое внешнее физическое воздействие на кабель — температура, вибрация, звук, натяжение — меняет характеристики света в волокне, который анализируется в виде цифровой рефлектограммы с помощью алгоритмов цифровой обработки сигналов и ИИ

Таким образом оптический кабель, проложенный вдоль контролируемых пространств или поверхностей на несколько километров, выступает по всей своей длине как распределенный датчик и проводник сигналов, а анализ рефлектограммы позволяет снимать данные с любой точки оптоволокна

Технология имеет ряд преимуществ — дешевый оптоволоконный кабель заменяет различные датчики, требующие электропитания; он компактен и прост в монтаже, не подвержен электромагнитным помехам и устойчив к высоким температурам

Аппаратная часть в виде оптоволоконного кабеля с рефлектометром универсальна, а различные сценарии использования определяются программными настройками

Оптоволоконная сенсорика широко используется в мире и нашей стране в нефтегазовой отрасли для мониторинга эксплуатации трубопроводов и скважин. В последние годы появляются всё более успешные коммерческие кейсы для охранных и противопожарных систем, диагностики состояния транспортной и промышленной инфраструктуры. Среди российских операторов связи мы первыми взялись за исследования и пилоты в этом перспективном направлении и первыми в стране реализовали проекты по мониторингу температуры в зданиях. В этом нам помогли обширные компетенции МГТС — крупнейшего инфраструктурного телеком-оператора Москвы — в строительстве и эксплуатации инфраструктуры ВОЛС

Перспективные сферы применения оптоволоконной сенсорики:

◾️мониторинг помещений и коммуникаций внутри зданий (обнаружение утечек водоснабжения, термометрия, пожарная сигнализация);
◾️обнаружение протечек трубопроводов городских коммуникаций;
◾️термометрия силовых кабелей систем электроснабжения;
◾️противопожарные системы в туннелях и подземных сооружениях;
◾️система мониторинга дорожной обстановки с использованием подземной кабельной канализации;
◾️мониторинг целостности строительных конструкций (зданий, мостов, эстакад, тоннелей в метрополитене) за счет установки деформационных датчиков;
◾️системы контроля работы промышленного оборудования, механизмов и машин (комплексный автоматизированный мониторинг температуры, пожаров, вибрации, шумов, протечек);
◾️мониторинг условий работы дата-центров (климатика, термометрия оборудования);
◾️охрана периметров объектов от несанкционированного доступа;
◾️мониторинг шумовой обстановки на улицах и стройплощадках с помощью оптоволоконных микрофонов

Telegram | Дзен | MAX

На прошлом датазавтраке обсуждали ситуации, когда центральная предельная теорема будет слишком сильным утверждением. Выше обзор от перплексити, но вообще типичный случай - зависимые точки в данных, т. е когда сегодняшние расходы клиента зависят от вчерашних. Или, например, когда у нас смешаны два сильно различающихся распределения