Postgres Professional

Postgresso #7 (68) и #8 (69) — о главных новостях PostgreSQL за предыдущие два месяца Разбираемся, что произошло в мире открытой СУБД PostgreSQL в июле и августе. Как всегда, подробности собрали в нашем ежемесячном дайджесте Postgresso.  В выпусках рассказали про: ✔️Релизы и обновления: PostgreSQL 17, Postgres Pro Enterprise, PPEM, Shardman и другие ✔️События в сообществе: новый сайт, посвященный вкладу в разработку; победа Postgres в 2024 Stack Overflow Developer Survey ✔️Статьи: про миграцию, расширения, мониторинг и многое другое ✔️Новости образования: обновления курсов, заметные публикации, активности компании ✔️Мероприятия: международные конференции PGConf и PGDay, митапы, мероприятия сообщества постгрес в России  Читайте подробности в седьмом и восьмом выпусках 🔥

«Стачка» 2024: 850+ человек на стенде Postgres Pro, 600+ участников квиза, 50+ слушателей на демонстрации Postgres Pro Shardman. А ещё — 3 доклада и секция «Базы данных»! И все это — только разогрев перед самой большой встречей постгресистов в Петербурге! Увидимся на PGConf.СПб 2024 1 октября!

Начинаем второй день «Стачки»!  Александр Фатин, менеджер по работе с сообществами Postgres Professional, разбирает, как выбрать дата-центр для своего проекта, спойлер: нюансов много.  🔥Впереди — выступление Екатерины Соколовой, разработчика ПО Postgres Professional, в секции «Базы данных» с докладом «Дело о пропавшей производительности в PostgreSQL». 

👆Завершаем день докладом Михаила Жилина, руководителя группы производительности Postgres Professional, в секции «Базы данных». Разобрались, что делать с проблемами производительности PostgreSQL 🐘

🔥 Специальный гость «Стачки» — Александр Друзь. А вы знали, что он не только известный игрок «Что? Где? Когда?», но и разработчик — программировал на языках как C++, Pascal, Fortran, Algol! А еще — долгое время работал с базами данных, поэтому мы не могли не вручить ему наш мерч! И, конечно, взяли автограф!

👆Павел Конотопов, руководитель кластерной группы Postgres Professional — о распределенной СУБД Shardman. Заглядывайте на наш стенд, завтра проведем еще две демонстрации: ✔️12:00 — демонстрация и обзор распределенной СУБД Postgres Pro Shardman. Система подходит для крупнейших инсталляций до ста и больше ТБ! ✔️14:00 доклад про особенности SQL в распределенной СУБД Postgres Pro Shardman Подробнее о Shardman — на сайте. 

Приехать на «Стачку» и показать, что такое реальная мощь СУБД — это база! Сегодня и завтра мы участвуем в XII Международной IT-Конференции «Стачка»: рассказываем гостям о СУБД Postgres Pro Shardman, разыгрываем мерч, модерируем секцию «Базы данных» и выступаем с несколькими докладами.  ⚡️Кадры с места событий — в нашем видео. 

Только что вышла PostgreSQL 17 🔥 В карточках — самое главное о новой версии открытой СУБД. Обзор подготовил Павел Лузанов, руководитель отдела образовательных программ Postgres Professional.  ⚡️ Большой доклад со всеми деталями релиза ждет вас на PGConf.СПб 2024! Еще можно успеть на онлайн-участие вот тут. А прямо сейчас можно изучить: ✔️Запись апрельского выступления Павла Лузанова на PGConf.Russsia 2024 про изменения PostgreSQL 17. Смотрите на Rutube или YouTube ✔️Подробный обзор изменений в новой версии по коммитфестам — в блоге на Хабре

Решаем проблемы с выполнением запросов   В большинстве клиентских приложений существуют ключевые запросы, время выполнения которых не может превышать критических значений. Но часто оптимизатор Postgres не может найти оптимальный план, что приводит к недопустимым задержкам.  Исправить такие ошибки со стороны клиентского приложения сложно или невозможно, так как запросы создаются автоматически. Что делать в такой ситуации расскажет Александр Котин, старший технический менеджер продукта Postgres Professional, на PGConf.СПб 2024.  👉 Разберемся, как решать такие проблемы со стороны СУБД. Александр покажет, как с помощью набора инструментов Postgres Pro: ✔️Идентифицировать такие запросы ✔️Исправлять и фиксировать планы ✔️Переносить планы на реплики в автоматическом режиме ✔️Осуществить перенос планов при апгрейде с 15-й версии 🔥PGConf.СПб 2024 пройдет в Санкт-Петербурге уже 1 октября. Специалисты представят технические доклады, пройдут демонстрации решений на базе Postgres Pro, участники обменяются опытом и пообщаются с сообществом.  Регистрация на PGConf.СПб 2024

Какие патчи приняты в PostgreSQL 17 в ходе мартовского коммитфеста? В статье на Хабре разбираем последний коммитфест в новую версию опенсорс-СУБД, которая выйдет уже 26 сентября. Всего в блоге вышло 5 статей про коммитфесты PostgreSQL 17, вместе материалы представляют детальный обзор новой версии СУБД. Впереди — обзоры коммитфестов PostgreSQL 18.  🔥 1 октября на PGConf.СПб 2024 Павел Лузанов, руководитель отдела образовательных программ Postgres Professional, проведет обзор PostgreSQL 17. Регистрируйтесь на конференцию, чтобы не пропустить этот и другие доклады.  Читать статью

Миграция с Oracle на PostgreSQL: переносим крупные базы данных при помощи oracle_fdw На PGConf.СПб 2023 Владимир Хаймин, администратор БД PostgreSQL Банка ВТБ, рассказал о том, как значительно ускорить миграцию БД, используя oracle_fdw отдельно, либо в сочетании с ora2pg. Из доклада узнаете: в каких случаях стоит использовать oracle_fdw, как значительно ускорить миграцию БД используя это расширение, какой инструмент выбрать при переносе метаданных для сокращения времени простоя. 🔥1 октября снова встретимся в Питере на PGConf.СПб 2024! Регистрируйтесь и участвуйте в крупнейшей конференции по PostgreSQL в Санкт-Петербурге. 👉 Смотрите доклад: Rutube, Дзен, ВК, YouTube

Нейронные оптимизаторы запросов в реляционных базах данных Чем сложнее запрос — тем больше вариантов его исполнения внутри системы. Для снижения вариативности используются эмпирические правила, они сокращают пространство поиска на несколько порядков. Но с такими правилами есть риск отсечь оптимальный план выполнения запроса.  С развитием ML появляются новые решения при работе над оптимизацией выполнения запроса — нейронные оптимизаторы, которые сами находят закономерности в выполнении сложных планов.  В статье на Хабре — о трех таких решениях:  ✔️MSCN (2018) — модель для оценки кардинальности запросов;  ✔️DQN (2018) — модель построения плана выполнения запроса;  ✔️NEO (2019) — end-to-end-подход, объединивший в себе как обучаемую функцию оценки скорости выполнения заданного плана, так и само его построение 🔥Это первая часть разбора нейронных оптимизаторов, позже продолжим рассказывать о решениях, следите за обновлениями. Читать статью

🔥Профессиональная сертификация на PGConf.СПб 2024! 1 октября проведем профессиональную сертификацию по PostgreSQL в Санкт-Петербурге — узнаете больше о СУБД из докладов на конференции PGConf.СПб 2024, и подтвердите свой уровень знаний! Тестирование пройдет по PostgreSQL версий 10 (DBA2, DBA3, QPT) и 13 (DBA1, DBA2, DBA3, QPT, Expert 10 → 13).  Чем полезна сертификация:  ✔️Подтверждает уровень знаний специалиста ✔️Дает преимущества при поиске работы  ✔️Помогает понять, куда расти профессионально и какие темы стоит изучить подробнее  Обладатели уровня «Эксперт» по PostgreSQL 10 смогут сдать переходный тест «Эксперт 10 → 13» и получить сертификат «Администратор PostgreSQL 13. Эксперт» по упрощённой системе.  📍Конференция пройдет в гостинице «Санкт-Петербург» + в онлайн-формате (тестирование проходит только очно).  ⚡️Чтобы пройти сертификацию, нужно записаться в личном кабинете сайта Postgres Professional. Количество мест ограничено.  Регистрация на PGConf.СПб 2024

Как сжатие работает в резервном копировании? В докладе на PGConf.СПб 2023 — о важности работы компрессии в резервном копировании: ✔️Как использовать доступные алгоритмы: pglz, zlib, zstd, lz4 — в разных редакциях pg_probackup? ✔️Как сделать инкрементальное копирование и восстановление еще быстрее с PTRACK и CFS — сжатым табличным пространством в СУБД Postgres Pro?  ✔️Какие есть планы разработки и интеграции с СРК-системами? 1 октября снова встретимся в Питере на PGConf.СПб 2024! Регистрируйтесь и участвуйте в крупнейшей конференции по PostgreSQL в Санкт-Петербурге.  👉 Смотрите доклад: Rutube, Дзен, ВК, YouTube

Postgres Professional — на «Cтачке» 2024! 27-28 сентября мы будем в Санкт-Петербурге на международной IT-конференции «Cтачка»: ✔️Расскажем о Postgres Pro Shardman — распределенной реляционной СУБД, которая справится даже с самой большой нагрузкой. Сначала демонстрация решения, затем — ответы на вопросы о СУБД ✔️Проведем секцию «Базы данных», где выступят наши эксперты и специалисты К2Тех, Unison Technologies, Базис-Центр, КБ Панорама и коммитеры PostgreSQL ✔️Выступим с несколькими докладами: «Лечим PostgreSQL под высокими нагрузками»; «Дело о пропавшей производительности в PostgreSQL»; «Как выбрать датацентр для своего любимого проекта?»  ✔️Организуем квиз и представим масштабный стенд!  📍27-28 сентября, Санкт-Петербург, гостиница «Cosmos Прибалтийская». Билеты — на сайте. Следите за обновлениями — будем делиться кадрами с конференции!

Возможности системы резервного копирования WAL-G, полезные для администраторов данных На PGConf.СПб 2024 Андрей Бородин, руководитель подразделения разработки РСУБД с открытым исходным кодом, Yandex Cloud, расскажет про несколько полезных функций WAL-G. Эту систему резервного копирования Андрей разрабатывает с 2017 года!  ✔️Настройка троттлинга для изменения обычного режима «дешевое резервное копирование — быстрое восстановление» ✔️Расширенные возможности мониторинга согласованности для обеспечения надёжности резервных копий ✔️Catchup для быстрого сокращения лага и другие функции кластера высокой доступности ✔️Методы извлечения набора изменений для инкрементного резервного копирования ⚡️Также Андрей расскажет о планах разработок, среди которых — создание согласованных резервных копий для шардированных кластеров и использование расширенных возможностей S3. 🔥PGConf.СПб 2024 пройдет в Санкт-Петербурге уже 1 октября. Специалисты представят технические доклады, пройдут демонстрации решений на базе Postgres Pro, участники обменяются опытом и пообщаются с сообществом PostgreSQL.  Регистрация на PGConf.СПб 2024

Провели второй поток Летней школы Postgres Professional! Пять недель 23 студента изучали теорию на лекциях и применяли ее на практике, работая над задачами с наставниками — специалистами Postgres Professional.  ✔️В этом году студенты прошлого потока Летней школы, стажеры Postgres Professional, стали кураторами новичков и провели семинары по темам своих проектов. ✔️Среди тем лекций: разработка расширений PostgreSQL, выполнение OLAP-запросов, профилирование, основы фаззинга, разработка высоконагруженных сетевых приложений ✔️Во время учебы студенты проводили исследования, результаты которых представили на отчетной конференции ✔️После Школы студенты с лучшими результатами продолжат работу в научном пространстве PGLab-НГУ — проекте для вовлечения студентов в разработку СУБД «Подготовка системных разработчиков – это ювелирная работа, которую нужно вести в самой тесной связи вуза и бизнеса. Только так сегодняшний студент в будущем станет высококлассным профессионалом, готовым к реальным задачам и вызовам», — отметил заместитель генерального директора Postgres Professional Иван Панченко.  🔥Летняя школа Postgres Professional — единственная в отрасли СУБД программа, где студенты учатся с наставником на реальных проектах, а далее продолжают обучение в научной лаборатории. Детали о прошедшей учебе — в ролике. Подробности о Летней школе 2024