Data Science. SQL hub

💻Postgres Message Queue (PGMQ) Легковесная очередь сообщений Как AWS SQS и RSMQ, только на Postgres Запустить, используя Docker: — docker run -d --name postgres -e POSTGRES_PASSWORD=postgres -p 5432:5432 quay.io/tembo/pgmq-pg:latest 🖥 GitHub 🟡 Доки @sqlhub

⚡️ Redka (Red is re-implemented with SQLite) Выпущена новая версии Redka 1.0. В ней реализованы строки, списки, сеты, хэши, отсортированные сеты, а также управление ключами и транзакциями. ▪Github @sqlhub

💻 pg_cron — отличный scheduler для PostgreSQL pg_cron — простой планировщик заданий на основе cron для PostgreSQL (10+), который запускается внутри БД в качестве расширения. pg_cron использует тот же синтаксис, что и обычный cron, но позволяет планировать команды PostgreSQL непосредственно из базы данных. Написан на чистом C 🖥 GitHub @sqlhub

Изучите применение ChatGPT в рабочих целях, чтобы получить от этого прибыль. Сейчас самое время начать использовать искусственный интеллект. Здесь вы узнаете, почему стоит освоить ChatGPT. Это поможет вам: - Использовать ChatGPT в вашей профессиональной сфере. - Предлагать компаниям разработку индивидуально дообученного ChatGPT по заказу. - Увеличить свой доход, освоив навык создания индивидуально дообученного ChatGPT. Зарегистрируйтесь на бесплатный вебинар, чтобы узнать больше деталей. Реклама. ООО "ТЕРРА ЭЙАЙ". ИНН 9728019395. erid: LjN8KNGEs

💻 StarRocks — высокопроизводительная БД для аналитики StarRocks, проект Linux Foundation, — это база данных MPP OLAP нового поколения с быстрой обработкой данных для сложных аналитических кейсов, включая многомерную аналитику, аналитику в реальном времени и не только. Быстрый старт с помощью Docker:

docker run -p 9030:9030 -p 8030:8030 -p 8040:8040 -itd \
--name quickstart starrocks/allin1-ubuntu

🖥 GitHub 🟡 Доки @sqlhub

🦆 Традиционные базы данных требуют предварительно определенную схему таблицы и не поддерживают работу с CSV файлами, без их предварительной обработки. #DuckDB позволяет напрямую считывать файлы CSV , устраняя необходимость в явном создании таблицы и загрузке данных. ▪️Github @sqlhub

💻 YDB — open-source распределенная СУБД, которая сочетает в себе высокую доступность и масштабируемость с высокой согласованностью и соответствием ACID

mkdir ~/ydbd && cd ~/ydbd
curl https://install.ydb.tech | bash
./start.sh ram

# или ./start.sh disk

# или ./start.sh drive "/dev/$DRIVE_NAME"

YDB — это отказоустойчивая распределенная СУБД SQL. YDB обеспечивает высокую доступность, горизонтальную масштабируемость, строгую согласованность и поддержку транзакций ACID. Запросы выполняются с помощью диалекта SQL (YQL). YDB позволяет одновременно работать с транзакционными (OLTP), аналитическими (OLAP) и потоковыми нагрузками. Вместо полноценной установки (выше), можно запустить YDB используя Docker:

mkdir ~/ydbd && cd ~/ydbd
mkdir ydb_data && mkdir ydb_certs

docker run -d --rm --name ydb-local -h localhost \
  --platform linux/amd64 \
  -p 2135:2135 -p 2136:2136 -p 8765:8765 \
  -v $(pwd)/ydb_certs:/ydb_certs -v $(pwd)/ydb_data:/ydb_data \
  -e GRPC_TLS_PORT=2135 -e GRPC_PORT=2136 -e MON_PORT=8765 \
  -e YDB_USE_IN_MEMORY_PDISKS=true \
  cr.yandex/yc/yandex-docker-local-ydb:latest

🖥 GitHub 🟡 Доки @sqlhub

IT — не только программирование Если вы недавно в программировании, если вам интересно работать с Python, но хочется не только писать код, но и решать интересные задачи, то рекомендуем посмотреть в сторону профессии аналитика: - Согласно докладу Всемирного экономического форума, эта профессия является одной из самых востребованных как зарубежом, так и в России. - По данным Хабр Карьера junior аналитик в среднем получает 88к рублей, а senior может рассчитывать на 260к и выше. Есть аналитики, которые переводят с языка цифр на язык бизнеса: видят тренды, прогнозируют и помогают принимать верные решения. Попробуйте себя в новой профессии на бесплатном онлайн-курсе «Аналитика за шесть уроков» от Changellenge >> Education: ✔️Изучите азы основных аналитических программ; ✔️Решите задачи от экспертов-практиков Excel, SQL и Python; ✔️Разберетесь с направлениями и выберите подходящее для себя; ✔️Получите сертификат о прохождении курса и пошаговый план по переходу в новую профессию. Для участников курса действует дополнительная скидка 10 000 руб. на образовательные программы Changellenge >> Education. Регистрируйтесь по ссылке. Реклама. ООО «Высшая школа аналитики и стратегии». ИНН:7716917009 erid: 2VtzqvYL32b

💻 SQLx — набор инструментов на Rust для SQL SQLx — это набор асинхронных инструментов для SQL на чистом Rust, обеспечивающих проверку запросов во время компиляции без DSL. — Асинхронный. Создан с нуля с использованием async/await для максимального параллелизма — Проверяемые во время компиляции запросы — Поддерживаются PostgreSQL, MySQL, MariaDB, SQLite — Драйверы Postgres и MySQL/MariaDB написаны на чистом Rust с использованием безопасного кода. — Независимость от времени выполнения. Работает на различных средах исполнения (async-std / tokio / actix) и TLS-бэкендах (native-tls, rustls). 🖥 GitHub 🟡 Доки @sqlhub

6 июня состоится Firebird Conf 2024, ежегодная конференция для разработчиков, администраторов и пользователей СУБД Firebird 🕊Firebird Conf — ежегодная практическая конференция для разработчиков и администраторов баз данных, активных пользователей СУБД Firebird и тех кто хочет узнать про неё подробнее. Уже второй год конференция Firebird Conf становится местом для нетворкинга, обмена опытом и формирования связей для реализации совместных проектов. Доклады конференции посвящены техническим аспектам работы с Firebird: 🔴Новые возможности в СУБД Firebird 6.0 и Ред База Данных 6.0 🔴Firebird в высоконагруженной системе мониторинга сети 🔴Особенности миграции с MS SQL Server и Oracle на СУБД Firebird 🔴Средства разработки для СУБД Firebird 🔴Полнотекстовые движки в СУБД Firebird Полная программа доступна на сайте мероприятия. Среди спикеров — представители ИТ-сообщества, бизнеса, люди с опытом разработки и реализации собственных уникальных проектов, а также сами контрибьюторы Firebird. Также предусмотрены активности за пределами конференц-зала. 📌Важное объявление по стоимости билетов: действие промокода FBCONF30 на скидку 30% заканчивается 26 мая, далее билеты можно будет приобрести только за полную их стоимость. Промокод можно активировать на сайте при покупке билета. Реклама. ООО «РЕД СОФТ». ИНН: 9705000373. erid: 2Vtzqw3YsNj

💻 pg_timetable — гибкий планировщик заданий PostgreSQL c большим количеством функций pg_timetable — это продвинутый автономный планировщик заданий для PostgreSQL, имеющий множество преимуществ перед традиционными планировщиками, такими как cron или pgAgent. pg_timetable позволяет планировать выполнение команд PostgreSQL, системных программ и встроенных операций. 🖥 GitHub 🟡 Описание устройства pg_timetable @sqlhub

💻Postgres.js — быстрый полнофункциональный клиент PostgreSQL для Node.js, Deno, Bun и CloudFlare 🖥 GitHub 🟡 А вот сравнение с другими клиентами @sqlhub

Вебинар «Как создавать высокопроизводительные очереди сообщений с различной архитектурой» 6 июня в 16:00 МСК на вебинаре вы узнаете, как повысить отказоустойчивость и масштабируемость ИТ-систем с помощью Tarantool Queue Enterprise — распределенной in‑memory системы очередей сообщений. Будет рассмотрен кейс применения системы очередей Tarantool Queue Enterprise как интеграционной шины в микросервисной архитектуре. В программе: • Как реализовать очередь сообщений с типом взаимодействия Publish/Subscribe для работы в real-time и обработки пиковых нагрузок. • Как организовать очередь задач с типом взаимодействия Put/Take для обработки асинхронных задач. • За счет каких технологий и инструментов повышается пропускная способность, масштабируемость и надежность очередей на базе Tarantool Queue Enterprise. Вебинар будет полезен CTO, архитекторам и разработчикам высоконагруженных систем. Регистрация

💻 pgrx — фреймворк, который позволяет разрабатывать расширения PostgreSQL на Rust — cargo install --locked cargo-pgrx pgrx поддерживает Postgres 12 — Postgres 16 🖥 GitHub 🟡 Доки @sqlhub

Приходите на High SQL — митап ЮMoney о работе с базами данных 😎 Встречаемся 28 мая в 19:00 (мск). Можно прийти в наш офис в Петербурге или подключиться к онлайн-трансляции. На встрече эксперты ЮMoney и приглашённый спикер расскажут, как строят и развивают базы данных. Темы докладов ⤵️ 🟣SQL Agent Jobs As Code: подход ЮMoney к хранению и деплою заданий для Microsoft SQL Server. 🟣Декомпозиция монолита в DWH: когда делить базу на множество компонент. 🟣Телеметрия в реальном времени и в экстремальных условиях: всё про архитектуру отправки данных. Участие бесплатное. Чтобы попасть на митап, нужно зарегистрироваться. Все подробности — на сайте High SQL ❤️

💻Knex.js — конструктор SQL-запросов для PostgreSQL и других СУБД — npm install knex --save — npm install pg --save Knex.js спроектирован как гибкий и портативный инструмент. В нем есть как традиционные колбеки, так и интерфейс промисов для более чистого управления потоком async, потоковый интерфейс, полнофункциональные конструкторы запросов и схем, поддержка транзакций (с точками сохранения), пул соединений и стандартизированные ответы между различными клиентами. Knex можно использовать в качестве конструктора SQL-запросов как в Node.JS, так и в браузере, ограничиваясь возможностями WebSQL (например, невозможностью дропать таблицы или читать схемы). Составлять SQL-запросы в браузере для выполнения на сервере крайне не рекомендуется, так как это может стать причиной серьезных уязвимостей в безопасности. 🟡 Доки 🖥 GitHub @sqlhub

Академия Аналитиков Авито открывает новый набор. Учись у практиков. Решай задачи бигтеха. Прокачайся как аналитик данных или DS-инженер. Такая строчка в резюме = буст к карьере.

🌟 fselect — поиск файлов при помощи SQL-like запросов — brew install fselect Хотя fselect не стремится полностью заменить традиционные find и ls, у fselect есть несколько приятных особенностей: — SQL-подобная грамматика, легко понятная человеку — возможность составлять сложные запросы агрегатные, статистические, даточные и другие функции поиск в архивах — поддержка .gitignore, .hgignore и .dockerignore — поиск по ширине и высоте изображений, метаданным EXIF — поиск по информации о MP3 — поиск по расширенным атрибутам файлов — поиск по хэшам файлов — поиск по типу MIME — имеет интерактивный режим — различные форматы вывода (CSV, JSON и другие) Любители SQL оценят) 🖥 GitHub 🟡 Примеры запросов @sqlhub

Онлайн-день AvitoTech на Data Fest | 26 мая с 13:00 до 18:00 В программе: • Общение с рекрутерами и лидами Авито в Spatial Chat; • Участие в ML System Design Game с Михаилом Каменщиковым, руководителем команды рекомендаций в Авито. Воркшоп поможет получить опыт работы над крупными проектами и подготовиться к собеседованиям, а также развивать свои идеи в интерактивном формате. Регистрация на онлайн и офлайн-активности по ссылкам. И помните, 1 июня ожидается большой офлайн-день в московском офисе Авито. Подробности программы здесь.

💻Citus — расширение для шардирования PostgreSQL Citus — это расширение для PostgreSQL, которое превращает Postgres в распределенную базу данных, что позволяет добиться высокой производительности в любом масштабе. 🖥 GitHub 🟡 Страничка Citus @sqlhub