Postgres Professional

📍Оптимизируем время и стоимость выполнения аналитического запроса через выбор порядка колонок в выражении GROUP BY

Аналитические запросы предполагают сортировку и группировку данных по разным правилам. Cократить время и стоимость выполнения таких запросов позволяет оптимизация вычисления агрегатов и сортировок.

На Хабре рассказали про оптимизацию с GROUP BY:

✔️Как сейчас работает экономия вычислительных ресурсов в PostgreSQL, какие есть методы для группировки таблиц  

✔️Немного истории о том, как развивались стратегии оптимизации запроса в СУБД

✔️В чем особенности реализации ускорения оператора GROUP BY от Postgres Professional, насколько быстрее становится выполнение запроса

Читать статью ⚡️

Ретроспектива PGConf.СПб 2024 и PGCONF.ACADEMY 2024

Для всех, кто пропустил, в статье на Хабре рассказываем про две конференции от Postgres Professional, которые прошли в октябре: 

✔️PGConf.СПб 2024 — встреча специалистов по PostgreSQL, которая во второй раз прошла в Санкт-Петербурге и собрала 1000+ участников

✔️PGCONF.ACADEMY 2024 — первая конференция для преподавателей от Postgres Professional, где доклады представили эксперты ИТМО, НГУ, СПбПУ, ГУАП, СибГУ имени М.Ф.Решетнева, САФУ имени М.В.Ломоносова, а также специалисты Postgres Professional

Специалист образовательного отдела Postgres Professional Игорь Левшин провел разбор докладов с конференций и поделился материалами для тех, кто хочет глубже изучить темы выступлений. 

Читать статью

Кейсы миграции на СУБД Postgres Pro — на сайте Postgres Professional 

Собрали кейсы перехода на СУБД Postgres Pro в специальном разделе нашего сайта. Читайте о результатах внедрения в «Росатоме», «Росагролизинге», «Газпром инвест», «Банке Финсервис», «Авито», Федеральном казначействе, «НИКИЭТ» и других компаниях и государственных структурах. 

Коротко о главном в проектах миграции на Postgres Pro — в наших постах по тегу #кейс_pgpro 

⚡️Прямо сейчас проект миграции системы электронного документооборота «Дело» на СУБД Postgres Pro Enterprise в АО «НИКИЭТ» участвует в конкурсе «Проект года». Голосуйте за него на сайте Global CIO!

📍Ранжирование — уникальная разновидность задач в машинном обучении

Продолжаем изучение нейронных оптимизаторов запросов в PostgreSQL (если пропустили — здесь первая статья цикла, вот тут вторая). Сегодня говорим про ранжирование — этот тип задач обособлен и от классификации, и от регрессии.

Рассматриваем ранжирование в целом, а также адаптацию методов поиска оптимального плана исполнения запроса.

В материале:

✔️Задачи и метрики ранжирования: DCG@k, NDCG@k, P@k(q), AP@k(q), MAP

✔️Подходы к научению модели: Pointwise, Pairwise, Listwise, LambdaRank, SoftRank, LambdaLoss

✔️Схема LTR-подхода, формирование датасета, кодирование признаков, инференс ранжирования и результаты

Читать статью

Postgres Pro Standard 17.0.1 — первая российская СУБД на базе PostgreSQL 17

Выпускаем мажорное обновление, которое дает заказчикам доступ ко всем возможностям открытой PostgreSQL 17 в проверенной российской СУБД Postgres Pro. Система включает 40+ усовершенствований и функций по сравнению со свободно распространяемой СУБД. 

В релизе: новая система управления памятью для VACUUM; поддержка стандарта SQL/JSON; улучшения производительности запросов; поддержка инкрементального бэкапа pg_basebackup; улучшения в логической репликации.

✔️Изменения и усовершенствования, доступные только в Postgres Pro Standard:

🔹Добавлены подкоманды SPLIT PARTITION и MERGE PARTITIONS в команду ALTER TABLE 
🔹Добавлено расширение pgpro_autopart 
🔹Удалено признанное устаревшим расширение pg_pathman

✔️Обновили большинство решений, дополняющих базовую функциональность PostgreSQL:

🔹Модуль для адаптивной оптимизации запросов aqo — до версии 3.0
🔹Модуль pgpro_pwr — до версии 4.7 
🔹Расширение pgpro_stats — до версии 1.8

🔥Кроме этого, обновления получили: драйвер ODBC, расширения oracle_fdw, PLV8 и tds_fdw, модули orafce, pg_repack, утилиты pgpro_controldata и pg_filedump,  приложение pg_probackup.

Подробности про Postgres Pro Standard 17.0.1

PostgreSQL 18 — какие нововведения ждать в новой версии СУБД? 

Открываем цикл статей с обзором коммитфестов новой версии PostgreSQL и рассказываем про возможности, которые попали в июльский коммитфест. 

🔹Планировщик: поддержка правого полусоединения хешированием; материализация внутреннего набора строк для соединения вложенными циклами в параллельном плане; вспомогательные функции для generate_series
🔹Функции: min и max для составных типов, pg_get_acl, имена параметров для функций regexp*
🔹EXPLAIN (analyze): статистика рабочих процессов узла Parallel Bitmap Heap Scan
🔹Режим отладки в pgbench
🔹pg_get_backend_memory_contexts: столбец path вместо parent и новый столбец type
🔹pg_upgrade: оптимизация работы pg_dump
🔹Предопределенная роль pg_signal_autovacuum_worker

Читать подробности в статье

Postgresso #9 (70) — о главных новостях PostgreSQL

В традиционном выпуске новостей из мира открытой СУБД рассказали про:

✔️Релиз PostgreSQL 17: какие фичи сообщество приняло в 17-ю версию, новые замечания к выпускам, статьи и эфиры с обсуждением обновления, список тех, кто работал над релизом

✔️Конференции, митапы и воркшопы — прошедшие и предстоящие встречи, посвященные СУБД, а также мероприятия, где можно пообщаться со специалистами Postgres Professional 

✔️Статьи: материалы про миграцию, ИИ, иерархии, новые расширения и многое другое

Читать Postgresso ⚡️

Вузы и ссузы получили лицензию на СУБД Postgres Pro Standard

Мы предоставляем образовательным организациям академическую лицензию на СУБД Postgres Pro Standard — использование системы делает учебу эффективнее, помогает студентам осваивать навыки на практике.

⚡️Академическую лицензию уже получили:

🔹Новосибирский национальный исследовательский государственный университет
🔹Национальный исследовательский Томский политехнический университет
🔹Санкт-Петербургский государственный морской технический университет
🔹Хакасский государственный университет им. Н.Ф. Катанова
🔹Международная академия информационных технологий «ИТ ХАБ»
🔹Санкт-Петербургский государственный университет аэрокосмического приборостроения
🔹МИРЭА – Российский технологический университет
🔹Московский финансово-промышленный университет «Синергия»

🔥Ранее мы выдали лицензию Орскому гуманитарно-технологическому институту (филиал Оренбургского государственного университета) и Новокузнецкому горнотранспортному колледжу им. В.Ф. Кузнецова.

Чтобы получить академическую лицензию Postgres Pro Standard, направьте запрос от образовательной организации на academy@postgrespro.ru.

Подтвердили совместимость СУБД Postgres Pro с продуктами «1С-Битрикс»

СУБД Postgres Pro в редакции Standard (версии 12, 13, 14, 15, 16) и «Битрикс24», а также «1С-Битрикс: Управление сайтом» корректно работают вместе — совместимость систем подтверждает сертификат, выданный Postgres Professional. 

🔥С Postgres Pro совместимы уже 330+ решений разного назначения, включая все самые популярные операционные системы, серверы приложений, СЭД, ERP, PLM, АБС, ГИС. 

Чтобы подтвердить корректную работу решения с СУБД Postgres Pro, напишите на info@postgrespro.ru — расскажем о том, как получить сертификат совместимости. 

Все совместимые решения
#pgpro_совместимость

Обсудим импортозамещение в сфере ПО на вебинаре Axoft

14 ноября встретимся с экспертами Basis, МТС Web Services, Axoft и Content AI и обсудим изменения на ИТ-рынке в 2025 году, их влияние на развитие отечественного ПО и темпы импортозамещения.

На вебинаре выступит заместитель коммерческого директора Postgres Professional Леонид Росляков. 

Темы встречи: 

✔️Какие препятствия возникают для своевременного импортозамещения (проблемы с миграцией)?
✔️Какую помощь вендоры предлагают для миграции и поддержки клиентов?
✔️Как решается проблема недостаточной функциональности по сравнению с зарубежными аналогами?
✔️Как обеспечить безопасную интеграцию отечественного ПО для заказчиков?
✔️Какая прослеживается тенденция перехода на отечественные облачные сервисы?

📍14 ноября, 11:00-12:30, онлайн. Участие бесплатное, необходима регистрация. 

Зарегистрироваться на вебинар

Релиз Postgres Pro Shardman версий 14.13.2 и 14.13.3  

Улучшена производительность, добавлены новые возможности и исправлены некоторые ошибки. 

✔️Среди ключевых изменений версии 14.13.2:

🔹Управление обработкой событий чтения теперь имеет переключаемые режимы, которые можно задать через shardman.silk-flow-control. Поддерживаются режимы: none, round_robin и shortest_job_first
🔹Добавлены новые параметры конфигурации — shardman.sync_cluster_settings, shardman.sync_cluster_settings_blacklist, а также enable_sql_func_custom_plans
🔹Добавлена команда shardmanctl psql, которая без заданных параметров по умолчанию создаёт подключение к первому доступному главному узлу
🔹Добавлен метод сжатия lz4 для параметра default_toast_compression

✔️Для версии 14.13.3:

🔹Добавлены параметры конфигурации, позволяющие управлять сбором информации о сбоях сервера
🔹Исправлена ошибка переключения с главного сервера на реплику в случае, когда не удаётся получить параметры конфигурации сервера

Подробности — на сайте

📍Давайте знакомиться!

Telegram-каналу Postgres Professional уже больше года, пришло время познакомиться ближе!

👇Расскажите, чем вы занимаетесь и какие темы вам интересны — ответы помогут нам улучшить контент и публиковать больше полезных материалов.

Что правда, а что ложь про архитектуру мультимастера в PostgreSQL?

Об этом на HighLoad++ 2023 рассказали специалисты Postgres Professional: руководитель команды производительности Михаил Жилин и руководитель кластерной группы Павел Конотопов. 

⚡️ В докладе «Мифы и реалии архитектуры мультимастера в реляционной СУБД PostgreSQL»:

✔️Что такое мультимастер, история его развития, теория и архитектура 

✔️Реализации технологии, преимущества и недостатки 

✔️Применение мультимастера и производительность технологии на практике 

🔥Если хочется копнуть глубже и не только посмотреть, но и прочитать про особенности мультимастера в PostgreSQL — welcome в наш блог на Хабре! Павел и Михаил подготовили цикл из трех статей о технологии (1 часть, 2 часть, 3 часть). 

📺 Смотрим!

🔥Олег Бартунов вдохновляет аудиторию МТС True Tech Champ на разработку системного ПО.

Хотите разрабатывать востребованный софт? Присоединяетесь к команде Postgres Professional, вакансии — на нашем карьерном сайте.

⚡️Соснователь и генеральный директор Postgres Professional Олег Бартунов выступит с докладом про развитие СУБД PostgreSQL на всероссийском чемпионате по алгоритмическому и робототехническому программированию True Tech Champ 2024.

📍Сегодня в 14:45-15:15. Cмотрите трансляцию по ссылке. Позже поделимся записью — следите за обновлениями.

📍Как разграничить права администраторов СУБД?

Объясняем в наших обучающих роликах из серии How-To. Старший технический консультант Postgres Professional Андрей Гусаков рассказал про информационную безопасность в СУБД. 

✔️Как минимизировать угрозы со стороны суперпользователя? (YouTube, Rutube) 

В первой части разбираемся с правами суперпользователя в СУБД. Рассказываем про решение Postgres Professional для снижения вероятности совершения несанкционированного действия — разрешительный подход и его реализацию на практике.

✔️Как ограничить доступ привилегированных пользователей к данным?  (YouTube, Rutube) 

Во второй части рассказываем про реализацию роли администратора без доступа к данным, показываем создание защищенной схемы и ее работу, перенос данных в такую схему и др.

Чтобы самостоятельно пройти сценарии из роликов, установите Postgres Pro Enterprise версии 16 и воспользуйтесь SQL-скриптами по ссылке.

⚡️ Роль «Администратор без доступа к данным» и другие функциональные возможности доступны в Postgres Pro Enterprise, начиная с 16-й версии. Подробнее о СУБД — в статье. 

Нужна консультация по Postgres Pro Enterprise? Оставляйте заявку или пишите на presale@postgrespro.ru