Inside Yandex Cloud

💛 «Биллинг – сердце бизнеса»

В свежем выпуске «Как мы делаем Yandex Cloud» разбираемся в работе команды биллинга вместе с её лидом Кириллом Плотниковым.

Обсудили карьерный путь лида, опыт переобучения разработчиков с Python на Go, а также планы по развитию архитектуры биллинга.

📌 Смотрите на YouTube, Rutube и VK Видео.
📌 Слушайте на Яндекс музыке и на любой удобной подкаст-платформе.

🔘 Крупнейший в мире датасет для умных касс и систем учёта в магазинах

Научить ИИ отличать яблоко от перца — простая задача. Но стоит завернуть их в пакет, как точность определения падает. Часто датасеты состоят из идеальных картинок на белом фоне, которые не имеют ничего общего с реальностью супермаркета.

Наш коллега Сергей Нестерук, руководитель команды безопасности искусственного интеллекта Yandex Cloud, вместе с исследователями из Сколтеха и ГУАП создали PackEat.

Это крупнейший в мире открытый датасет для обучения компьютерного зрения в ритейле. Благодаря нему ИИ учится распознавать товары в полиэтиленовых пакетах, при плохом освещении и даже когда одни продукты перекрывают другие.

Датасет размещён на платформе Zenodo, а код и примеры моделей — на Kaggle. Вы можете использовать их в своих проектах и сравнивать получающиеся решения с результатами авторов.

👉 Подробнее про разработку датасета читайте в статье.

❤️ – невероятная работа!

📖 Где гулять в Москве, что слушать и читать?
О своих предпочтениях каналу Sachok рассказывает Юрий Наместников, руководитель Security Operation Center в Yandex Cloud.

Может быть это будет вашим планом на новогодние каникулы.

😊 Что вдохновляет вас в работе?

Нас — возможность развивать повседневные вещи с помощью ИИ-технологий. В этом году мы говорим про нейросети больше, чем когда либо. Потому что их влияние становится всё более значимым. Например, мы собрали датасет и разработали модель, которая ускорила расшифровку МРТ у младенцев с нескольких дней до минут. 

Об этом и других новых ИИ-проектах команды Яндекса рассказывают в YaC AI Edition. Вы узнаете, в чём источник магии, вместе с сотрудниками разберётесь, чем агент отличается от ассистента, и увидите, как ИИ решает задачи людей разных профессий.

➡️ ИИ перестал быть просто трендом — он становится инструментом, который решает реальные задачи и встраивается в повседневность. Смотрите, как это работает на yandex.ru/yac, «Кинопоиске», VK Видео и YouTube.

✏️ Планируем GPU-нагрузку в Kubernetes: от стандартных механизмов до кастомных решений

Стандартный планировщик Kubernetes создавался для общих задач балансировки. Он отлично справляется с CPU и RAM, но, когда дело доходит до дорогих GPU, его базовых возможностей часто не хватает. Становится сложно утилизировать видеокарты полностью, бороться с фрагментацией ресурсов и выставлять приоритеты для критичных ML-задач.

В карточках разбираем эволюцию инструментов шедулинга, которые решают эти проблемы. А в статье собрали юзкейсы и рекомендации по выбору оптимального стека.

😊 Первая, но не последняя: атмосфера и итоги Kuber Conf by AOT

4 декабря случилось то, чего мы давно ждали — первая Kuber Conf от Ассоциации облачно-ориентированных технологий (АОТ). Получилось супер: много гостей и живого общения на технические темы.

Вот что успели обсудить и показать на площадке, совместив технологии будущего и немного фана:

▶️ Михаил Петров разложил по полочкам CNI chaining. Разобрали конвейер плагинов и реальные кейсы из прода.

▶️ Показали демо Yandex Cloud Stackland. Это решение для управления микросервисами и AI-нагрузками, которое выйдет в 2026 году.

▶️ Проверили свою экспертизу в Kubernetes победили Chaos Monster и восстановили систему в игре «Спасение Контейнерленда».

Пообщались с участниками и спикерами Kuber Conf, чтобы узнать какое отношение к конференции имеют паруса и в чём сила DevOps-инженера. Смотрите ролик, чтобы узнать ответы.

Спасибо всем, кто заглянул на стенд и был с нами на одной волне. Ищите себя на кадрах с мероприятия.

❤️— я был, как всегда — супер!

☁️ Подробный гайд по наследнику Greenplum

Если данные больше не помещаются в одну машину, а тяжёлые hash join-ы требуют линейного ускорения за счёт добавления CPU, то вам нужен распределённый Postgres.

В таких случаях стоит присмотреться к Cloudberry — MPP-системе нового поколения, которая даёт привычный опыт Postgres на больших объёмах, а заодно служит отличной заменой Oracle и MSSQL.

Мы подготовили подробный гайд в двух частях, который будет полезен дата-инженерам и аналитикам:
🔵 В первой части мы разбираем архитектуру, векторизованный движок и инновационный формат PAX. 

🔵 Во второй — переходим к advanced-возможностям, включая унифицированную архитектуру Lakehouse, интеграцию pgvector для ML/AI и мощную центральную консоль для мониторинга.

➡️ Читайте на Хабре: первая и вторая часть.

🍿Встретимся на трансляции Капа из Стамбула?

Yandex Cup — международный чемпионат по программированию от Яндекса. В этом году он проводится в восьмой раз.

За призовой фонд в 12 млн рублей поборются 200 финалистов. Среди них разработчик из команды Deploy & Runtime Yandex Cloud Алишер Кабардияди. Он прошёл отборочный тур в направлении «Бэкенд» и вышел в офлайн-финал чемпионата в Стамбуле.

Задали ему несколько вопросов о предстоящем финале — ответы читайте в карточках.

И подключайтесь поддержать его 6 декабря на трансляции:
🔵 в YouTube
🔵 ВКонтакте

❤️— чтобы пожелать Алишеру удачи