Data Science. SQL hub

💻 pg_activity — инструмент командной строки для мониторинга активности сервера PostgreSQL — sudo apt install pg-activity pg_activity сканирует представление pg_stat_activity с заданным временем обновления, от 0.5 до 5 секунд. pg_activity работает как локально, так и удаленно. При локальном выполнении, чтобы получить достаточные права для отображения системной информации, системный пользователь, запускающий pg_activity, должен быть тем же пользователем, который запускает сервер postgresql (postgres по умолчанию), или иметь больше прав, например root. Пользователь PostgreSQL, используемый для подключения к базе данных, должен быть суперпользователем, чтобы получить как можно больше данных. В противном случае pg_activity может работать хуже — например системная информация или данные временных файлов не будут отображаться. 🖥 GitHub @sqlhub

Яндекс поддерживает исследователей, которые занимаются искусственным интеллектом 👾 Компания проводит международную научную премию Yandex ML Prize уже в шестой раз. Её вручают за достижения в области компьютерного зрения, машинного перевода, распознавания и синтеза речи, анализа данных, генеративных моделей. В экспертном совете премии — ведущие российские исследователи в сфере ИИ, в том числе эксперты Yandex Research, Яндекс Погоды, Школы анализа данных. Многие сервисы компании основаны на технологиях машинного обучения, поэтому Яндекс готов поделиться своей экспертизой, поддержать молодых учёных и помочь им остаться в науке. Лауреаты-исследователи получат по 500 тысяч рублей, научные руководители и преподаватели — по 1 миллиону. А ещё — гранты от Yandex Cloud для облачных вычислений на платформе, обработки экспериментов и обучения ML-моделей. Заявки принимаются до 21 июня, а победители будут объявлены осенью.

💻 SirixDB — это open-source гибридная система баз данных, ориентированная на работу с дисками и памятью SirixDB имеет облегченный буфер-менеджер, способный хранить ссылки на страницы in-memory. SirixDB представляет собой структурированное хранилище временных документов и хранит истории всех ресурсов в компактной форме. Процессор запросов поддерживает сложные запросы, связанные с разными временными диапазонами. 🖥 GitHub 🟡 Доки @sqlhub

Вакансии для дата-инженеров Т-Банк растет и зовет сильных дата-инженеров в команду. Условия — мед: задачи нескучные, коллеги недушные. Есть над чем подумать и когда отдохнуть. Приходите прокачивать навыки, развивать финтех и работать в команде единомышленников. Посмотреть вакансии и откликнуться, если у вас больше двух лет опыта, можно здесь Реклама. АО «Тинькофф Банк», ИНН 7710140679

💻 OctoSQL — работа с разными БД и файлами посредством единого интерфейса — brew install cube2222/octosql OctoSQL — CLI-инструмент, который позволяет работать с множеством баз данных (и файлов) с помощью SQL через единый интерфейс и выполнять JOIN между ними. Например, OctoSQL может помочь объединить JSON-файл с таблицей PostgreSQL. В то же время OctoSQL — это легко расширяемый движок потока данных, и его можно использовать для добавления SQL-интерфейса в свои собственные приложения. 🖥 GitHub @sqlhub

💻OrientDB — многомодельная СУБД OrientDB — это open-source многомодельная СУБД NoSQL, которая объединяет возможности графов и документов в одну масштабируемую, высокопроизводительную базу данных. OrientDB была разработана с нуля с упором на производительность, она быстро выполняет операции чтения и записи. OrientDB эффективно использует оперативную память, позволяет делать обход частей или целых деревьев и графов за миллисекунды. При этом скорость обхода не зависит от размера базы данных. 🖥 GitHub 🟡 Доки @sqlhub

💻 ParadeDB — open-source альтернатива Elasticsearch, построенная на базе Postgres В настоящий момент у пользователей Postgres, которым нужен механизм поиска и аналитики, есть два варианта: использовать внешние сервисы вроде Elasticsearch, которые мощны, но их сложно запускать, настраивать и синхронизировать, или использовать встроенный поиск и агрегацию Postgres, которым не хватает важных функций и которые плохо работают с большими массивами данных. ParadeDB предоставляет удобный компромисс, предоставляя разработчикам привычный Postgres и производительность специализированной поисковой и аналитической базы данных. Быстрый старт с помощью Docker: docker run --name paradedb paradedb/paradedb 🖥 GitHub 🟡 Доки @sqlhub

💻Infinity — современная база данных, по максимуму использующая возможности AI

sudo dpkg -i infinity-0.1.1-x86_64.deb
sudo systemctl start infinity

Infinity предоставляет широкий спектр возможностей поиска по таким типам данных, как векторы и структурированные данные. Она обеспечивает надежную поддержку таких приложений как AI-поисковики, рекомендательные системы, чатботы и приложения RAG. 🖥 GitHub 🟡 Доки @sqlhub

💻 GQL — Git Query Language Git Query Language — это SQL-подобный язык для выполнения запросов к файлам .git с поддержкой большинства функций SQL, таких как группировка, упорядочивание и агрегация. Зачем нужен GQL? — GQL выполняет запрос "на лету" без необходимости создавать базы данных или конвертировать .git-файлы в любой другой формат — довольно удобно 🖥 GitHub @sqlhub

Канал для аналитиков уже в Telegram! Его ведет Влад Князев, аналитик из финтеха, который ярко и с юмором пишет заметки и проводит эфиры о том, как выйти на новый уровень в карьере в IT. Начинай прокачивать насмотренность системно уже сейчас👇 Подпишись на @godnolytika

💻 DuckDB 1.0 — первый стабильный релиз DuckDB Представлен выпуск СУБД DuckDB 1.0, позиционируемой как вариант SQLite для аналитических запросов. DuckDB сочетает такие свойства SQLite, как компактность, возможность подключения в форме встраиваемой библиотеки, хранение БД в одном файле и удобный CLI-интерфейс, со средствами и оптимизациями для выполнения аналитических запросов, охватывающих значительную часть хранимых данных, например, выполняющих агрегирование всего содержимого таблиц или слияние нескольких больших таблиц. 🖥 Исходный код DuckDB написан на языке С++ и распространяется под лицензией MIT @sqlhub

🔥 SQL задачи и вопросы с собеседований

🔥 SQL задачи и вопросы с собеседований

💻 FerretDB — open-source альтернатива MongoDB FerretDB была основана, чтобы стать фактической заменой MongoDB с открытым исходным кодом. По сути FerretDB представляет собой прокси, конвертирующий запросы протокола MongoDB 5.0+ в SQL — с использованием PostgreSQL или SQLite в качестве движка базы данных. Быстрый запуск FerretDB с PostgreSQL на бекенде:

docker run -d --rm --name ferretdb -p 27017:27017 ghcr.io/ferretdb/all-in-one

🖥 GitHub 🟡 Доки @sqlhub

Онлайн-обучение SQL для начинающих от НИУ ВШЭ Дистанционный курс «SQL для начинающих» разработан для всех, кто хочет освоить язык запросов SQL с нуля, оптимизировать повседневную работу с данными и подготовиться к собеседованию. За 2 месяца вы освоите язык SQL: основные запросы, группировку таблиц и агрегатные функции, работу со строками и датами, оконные функции и освоите мощный инструмент для анализа данных. Старт: 25 июня Продолжительность: 2 месяца Подробнее об обучении на онлайн-курсе: по ссылке. erid:2SDnjdSD8Ts Реклама Закрытое акционерное общество «Группа компаний АККОРД» ИНН 7709797580

💻 Directus — инструмент для управления содержимым БД SQL в режиме реального времени Directus — это интуитивно понятное open-source приложение, предоставляющее REST+GraphQL API для совместной работы с данными без кода для любой базы данных SQL. Directus позволяет выполнять CRUD-операции, назначать роли с полностью настраиваемыми правами, создавать сложные и детализированные запросы, настраивать управляемые событиями веб-хуки и автоматизацию задач и многое другое Сочетая удобство headless CMS с мощью BaaS, Directus обрабатывает API, Auth, Admin и многое другое, чтобы можно было сосредоточиться на создании приложений и сайтов. 🖥 GitHub 🟡 Доки @sqlhub

Как настроить репликации в PostgreSQL 123? Узнайте на открытом практическом уроке от OTUS. На вебинаре опытный эксперт разберет:  - основные понятия репликации; - её виды и преимущества; - процесс настройки в PostgreSQL 123.  💻 Занятие будет полезно начинающим DBA, DevOps и всем, кто работает с базами данных. 🔥 Спикер Андрей Поляков — старший разработчик в международной финтех-компании.   Встречаемся 10 июня в 20:00 мск в рамках старта большого курса «Highload Architect». Все участники вебинара получат специальную цену на обучение и консультацию от менеджеров OTUS! 🔴 Ссылка для регистрации: https://otus.pw/SQlF/?erid=LjN8KZdiq

💻 TimescaleDB — база данных временных рядов TimescaleDB — это open-source БД, разработанная для того, чтобы сделать SQL масштабируемым для данных временных рядов. TimescaleDB разработана на основе PostgreSQL и упакована как расширение PostgreSQL, обеспечивая автоматическое разделение по времени и пространству (ключ разделения), а также полную поддержку SQL. 🖥 GitHub @sqlhub