SQLpedia | Базы данных

​​Партиционированный Postgres: немного о проблемах с лимитами В то время, как пользователи видят позитивные стороны технологий, мы, разработчики, обычно сталкиваемся с ограничениями/недоработками/багами и видим наш продукт с совсем другой стороны. Перейти к статье | SQLpedia

Не зря вкалывали весь год

​​Как в Sidec благодаря exactly-once сократили потребление ресурсов без потери производительности Автор расскажет как решили задачу объединения двух топиков с соотношением один ко многим и почему не устроило решение на Kafka-streams (kafka docs) и RocksDB (github). Перейти к статье | SQLpedia

​​Знакомство со слоем абстракции Netflix для хранилищ данных типа «ключ-значение» "Наша компания — Netflix — способна организовывать бесперебойную, высококачественную потоковую передачу видео миллионам пользователей благодаря своей надёжной глобальной серверной инфраструктуре." Перейти к статье | SQLpedia

​​Катастрофическое падение производительности из-за hyperthreading На системах с hyperthreading 50% cpu по метрикам означает, что большая часть ресурсов сервера уже использована. То есть cpu>50% - это уже "желтая зона", и мы ожидаем замедление всего, чего можно. Но я никогда не думал до экспериментов, что падение производительности может быть столь катастрофическим. Перейти к статье | SQLpedia

​​Postgres Professional выпустила новую версию Postgres Pro Standard 17.0.1 Компания Postgres Professional представила новую версию СУБД, созданную на базе Postgres Pro Standard 17.0.1. Перейти к статье | SQLpedia

​​Оптимизация хранения данных в PostgreSQL Сегодня поговорим о том, как оптимизировать хранение данных в PostgreSQL, снизив объем дискового пространства, потребляемого таблицами и ускорить выборку данных. Перейти к статье | SQLpedia

​​Динамические SQL-запросы в PostgreSQL: когда, зачем и как Сегодня поговорим о мощной штуке в PostgreSQL, которая одновременно помогает и открывает портал в ад: динамические SQL‑запросы. Динамика — это когда SQL собирается на лету, а не пишется заранее статичным текстом. Звучит неплохо, но при неправильном подходе легко превращается в катастрофу. Перейти к статье | SQLpedia

⚡️ Успей принять участие в идеатоне Форума Инновационных Центров 2024! Мы продлили регистрацию до 28 ноября 23:59! 🔥 🔭 Если ты специалист по data science, веб-разработке, аналитике данных, кибербезопасности, DevOps или архитектуре ПО, то советуем принять участие в кейсе №2: Архитектура высоконагруженного распределенного веб-приложения. В нём тебе предстоит: ⚙️ Разработать концептуальную архитектуру веб-приложения, способного обслуживать не менее 100 000 одновременных пользователей, с учетом требований к безопасности, защитой от кибератак, масштабируемости и высокой доступности на всей территории России. Ожидаемые результаты: 📌 Аналитический отчет по архитектурному решению 📌 Визуализированные схемы архитектуры и диаграммы. 📌 Документация по выбору технологий, существующих платформ и баз данных по каждому из финальных решений. 📌 Рекомендации по обеспечению безопасности и защиты от кибератак. Идеатон проходит в 2 этапа: отборочный этап — онлайн, финал — оффлайн. ❗️Важно: участие можно принять ТОЛЬКО командой, от 2 до 6 человек. 🏆Призовой фонд: 6 000 000 руб. 🔥Окончание регистрации: 28 ноября, 23:59 📅Даты отборочного этапа: 29 ноября - 2 декабря 🦾Даты финала: 3 - 4 декабря 🔗 Регистрируйся по ссылке: https://фиц2024.рф/hackathon/#idcase2

​​Firestore и NoSQL — Основы структурирования данных Инструменты Firebase уже больше десятилетия помогают разработчикам быстрее создавать приложения, начиная с push-уведомлений и аутентификации и заканчивая базой данных Firestore. В этом году на Google I/O было анонсировано, что Firestore теперь поддерживает SQL в форме Data Connect, наконец позволив разработчикам выбирать между NoSQL и SQL. Перейти к статье | SQLpedia

​​Транзакции в базах данных на примере PostgreSQL Транзакция - это набор операций с базой данных. В этот набор может входить как одна операция, так и несколько. Операции внутри транзакции либо выполняются все и полностью, либо ни одна операция не выполняется. Перейти к статье | SQLpedia

​​Оптимизация динамического SQL в SQL Server: ключ к высокой производительности Предлагаю вместе изучить лучшие приемы оптимизации динамического SQL. Я расскажу, как использовать его с максимальной эффективностью, чтобы ваши запросы не только летали, но и были безопасны, а код легко поддерживался. Перейти к статье | SQLpedia

Вебинар «Анализируем транзакции в реальном времени»  Приходите на бесплатный вебинар и узнайте, как обрабатывать высокие транзакционные и аналитические нагрузки в гибридной in-memory СУБД.  Дата и время: 28 ноября, 16:00. Программа 🔹 Ускорение аналитических расчетов и аналитика на самых свежих данных с помощью HTAP-систем. 🔹 Основные архитектурные характеристики гибридных транзакционно-аналитических СУБД (HTAP).  🔹 Повышение отказоустойчивости транзакционно-аналитических решений, настройка под разные профили нагрузки и интеграция с другими компонентами ИТ-ландшафта.  Проведем демонстрацию возможностей продукта Tarantool Column Store в работе с объектами и данными. Расскажем, как формировать отчетность в реальном времени и рассчитывать агрегаты в антифрод-системах с помощью продукта Tarantool Column Store.   Вебинар будет полезен архитекторам, дата-инженерам, DevOps-инженерам и разработчикам аналитических систем.     Регистрируйтесь, и вам придет ссылка на трансляцию в день мероприятия.

​​7 продвинутых приемов pandas для науки о данных Pandas — это основная библиотека для работы с данными. Вот несколько приёмов, которые я использую, чтобы быстрее и проще выполнять повторяющиеся задачи по работе с данными. Перейти к статье | SQLpedia

Станьте дата-инженером и получите первый оффер уже через 5 месяцев, обучаясь на реальных задачах бизнеса Основная проблема обучений — оторванность от задач реального бизнеса. На курсе учили складывать 2+2, а на работе — сразу отправляют считать интегралы. Курс-симулятор от Simulative построен так, что вы сразу погружаетесь в настоящую работу. Например, вы будете: 🟣проводить RFM-анализ клиентской базы 🟣формировать продуктовые рекомендации для клиентов 🟣настраивать ETL о пользователях соцсетей ... и решать другие задачи реального бизнеса Обучение охватывает весь стек, который нужен специалисту: SQL, Python, Metabase, Linux, Docker, Airflow, Clickhouse, Hadoop и Spark. А также готовит к любому собеседованию: в курс включены тестовые задания, пробные интервью и многое другое. С трудоустройством помогут. А на VIP-тарифе преподаватели и HR спроектируют вам персональный трек обучения и за руку доведут до оффера: часть стоимости курса вы оплачиваете только когда найдете работу. Первый поток стартует 15 ноября. Успейте залететь на курс со скидкой 27% в честь Черной пятницы 🛍 🔗 Оставляйте заявку на сайте Simulative.

​​Триггеры в PostgreSQL: основы Начнём с базы: триггер в PostgreSQL — это такая функция, которая запускается автоматически при определённом событии в таблице. С триггерами можно автоматизировать массу рутины и освободить приложение от сложных проверок и вычислений, но это палка о двух концах. Перейти к статье | SQLpedia