Data Science. SQL hub

⚡️ Центр непрерывного образования ФКН НИУ ВШЭ приглашает на летнюю школу по аналитике и Data Science! Вас ждут лекции и мастер-классы от спикеров из таких компаний, как: Яндекс, Ozon, X5 Group, VK, Ecom.Tech (ex Samokat_tech), МТС, Авито, Альфа-Банк, Купер, Wildberries, Raiffeisenbank, Вкусно и точка, Эйч. Приглашаем всех, кто хочет разобраться: ➖➖➖➖➖➖ Зачем переходить в IT: ▫️Зачем бизнесу нужны дата-аналитики и дата-сайентисты в эпоху ИИ? ▫️Какие направления стоит изучать уже сейчас? Как построить карьеру аналитика данных: ▫️Кто такой «хороший аналитик данных»? ▫️Что должен знать аналитик данных сейчас? ▫️Как учат аналитиков в Центре непрерывного образования? Что могут специалисты по Data Science: ▫️Как и для чего начинать изучать машинное обучение? ▫️Какое применение находит ML в различных индустриях? Школа подойдет как тем, кто только решил освоить новую профессию, так и начинающим специалистам. Когда: 24-25 августа Где: Культурный Центр НИУ ВШЭ, г. Москва, Покровский бульвар, 11 Участие бесплатное для всех желающих, необходимо зарегистрироваться: по ссылке. Реклама | Федеральное государственное автономное образовательное учреждение высшего образования «Национальный исследовательский университет «Высшая школа экономики» (НИУ ВШЭ)| ИНН 7714030726 | Erid: 2SDnjeWSshL

💻 GreptimeDB — облачная распределенная БД временных рядов с открытым исходным кодом; поддерживает PromQL/SQL/Python GreptimeDB — это open-sorce БД временных рядов, ориентированная на эффективность, масштабируемость и аналитические возможности. Особенности GreptimeDB: — оптимизированная колоночная структура для работы с данными временных рядов; сжатие и хранение в различных системах хранения данных, в частности в облачных объектных хранилищах — полностью открытая архитектура распределенного кластера, использующая мощь облачных вычислительных ресурсов — встроенный SQL и PromQL для запросов, возможность использовать сценарии Python для решения сложных аналитических задач Быстрый старт с Docker: docker run --rm --name greptime --net=host greptime/greptimedb standalone start 🖥 GitHub 🟡 Доки @sqlhub

7 базовых функций SQL, первый код с нуля за полтора часа и практика на настоящих данных? Сделаем бесплатно! Если вы всегда хотели попробовать SQL, но не знали, с чего начать, начните с бесплатного мастер-класса с Серафимом Фролкиным, инженером данных VK и экспертом программ школы аналитики Changellenge >> Education. Без лишней теории про историю создания и количество проданных в мире учебников Серафим на примерах покажет 7 базовых функций SQL, а затем вы сразу же решите практический кейс, чтобы повысить свои шансы при трудоустройстве. Присоединяйтесь онлайн из любой точки на глобусе 15 августа в 19:00 Мск. И да, у нас приятные карьерные бонусы всем зарегистрировавшимся и участникам! Участие бесплатно, но подарки получат только зарегистрированные участники. Регистрируйтесь и получайте подарки по ссылке >> Реклама. ООО "ВЫСШАЯ ШКОЛА АНАЛИТИКИ И СТРАТЕГИИ". ИНН 7716917009. erid: 2VtzqxT5BHE

💻Antares SQL — удобный и простой open-source SQL-клиент — sudo apt install antares Antares SQL — это современное приложение, созданное с упором на простоту и UX, про производительность тоже не забыли 🟡 GitHub @sqlhub

Готовы узнать, как настроить мониторинг RabbitMQ с помощью Telegraf, InfluxDB и Grafana? 🚀Ждем вас на открытом вебинаре 13 августа в 20:00 мск, где вы разберете: - как настроить Telegraf для сбора метрик RabbitMQ; - конфигурацию InfluxDB для хранения и обработки метрик; - создание и настройку дашбордов в Grafana для мониторинга RabbitMQ; - персонализацию дашбордов для отображения нужной информации; - практическое руководство по работе с Grafana для визуализации данных. 👨‍💻🛠👨🏻‍💻  Урок будет полезен backend- и fullstack-разработчикам, DevOps-инженерам, архитекторам ПО и специалистам по мониторингу и анализу данных. Спикер — эксперт по тестированию, работает в компании-разработчике инструмента нагрузочного тестирования, один из администраторов крупнейшего канала нагрузочных тестировщиков. 🔴 Ссылка для регистрации: https://otus.pw/ymI7/?erid=LjN8JuEMo

💻EventStoreDB — open-source БД, в основе которой событийно-ориентированный подход Благодаря событийно-ориентированному подходу EventStoreDB позволяет извлекать больше пользы из данных, видеть больше связей и закономерностей EventStoreDB позволяет создавать кластеры в AWS, Azure и GCP и безопасно подключать их к собственным облачным ресурсам. Быстрый старт с Docker: docker run --name esdb-single-node -it -p 2113:2113 -p 1113:1113 eventstore/eventstore:latest --insecure --run-projections=All --enable-atom-pub-over-http 🖥 GitHub 🟡 Доки @sqlhub

🖥 Уязвимость в PostgreSQL, позволяющая выполнить SQL-код с правами пользователя, запускающего pg_dump Сформированы корректирующие обновления для всех поддерживаемых веток PostgreSQL 16.4, 15.8, 14.13, 13.16, 12.20, в которых исправлено 56 ошибок, выявленных за последние три месяца. Cреди прочего в новых версиях устранена уязвимость (CVE-2024-7348), помеченная как опасная (уровень опасности 8.8 из 10). Уязвимость вызвана состоянием гонки в утилите pg_dump, позволяющем атакующему, имеющему возможность создания и удаления постоянных объектов в СУБД, добиться выполнения произвольного SQL-кода с правами пользователя, под которым запускается утилита pg_dump (обычно pg_dump запускается с правами суперпользователя для резервного копирования СУБД). Для успешной атаки требуется отследить момент запуска утилиты pg_dump, что легко реализуется через манипуляции с открытой транзакцией. Атака сводится к замене последовательности (sequence) на представление или внешнюю таблицу, определяющих запускаемый SQL-код, в момент запуска pg_dump, когда информация о наличии последовательности уже получена, но данные ещё не выведены. Для блокирования уязвимости добавлена настройка "restrict_nonsystem_relation_kind", запрещающая раскрытие не системных представлений и доступ к внешним таблицам в pg_dump. @sqlhub

🖥 RethinkDB — база данных, ориентированная на работу в реальном времени. Она поддерживает хранение данных в формате JSON любой структуры (NoSQL) и позволяет "слушать" стримы данных как с помощью Python, так и непосредственно с фронтенда. Упрощает создание: ▪приложений для совместного редактирования документов (например, Google Docs, Trello), мультиплеерных игр (например, для мгновенного ▪оповещения игроков о действиях других), маркетплейсов (биржи, ставки), ▪дешбордов с данными в реальном времени, ▪систем для общения между IoT-устройствами: обмен сообщениями, сигнализация, запуск действий через прослушивание одного источника. https://github.com/rethinkdb/rethinkdb @sqlhub

Как бизнесу сохранить производительность высоконагруженных решений при работе с отечественными СУБД. Приходите на бесплатный вебинар от СберТеха. 20 августа в 11:00 приглашаем на вебинар «Что нового в Platform V Pangolin 6.3.0: сохраняем производительность высоконагруженных решений». Platform V Pangolin – это целевая СУБД в Сбере и в ряде крупных компаний. В конце июля вышел новый релиз продукта, который включает множество улучшений: · оптимизации для повышенных нагрузок при работе с платформой 1С; · улучшения производительности, важные для внедрения продукта в высоконагруженных системах; · доработки для соответствия новым требованиям ФСТЭК к отечественным СУБД; · дополнительные инструменты и расширения: колоночное хранение данных и использование распределенных таблиц, инструменты для подготовки тестовых сред. На встрече выясним, как новые возможности продукта могут стать полезны вашему бизнесу. Регистрация открыта

Как сохранить производительность высоконагруженных решений при работе с отечественными СУБД? 20 августа в 11:00 приходите на бесплатный вебинар СберТеха для бизнеса и узнаете, с какими нагрузками может работать отечественная СУБД Platform V Pangolin. Это целевая СУБД в Сбере и в ряде крупных компаний, которая создана для высоконагруженных систем. В конце июля вышел новый релиз Platform V Pangolin 6.3.0 с оптимизациями производительности СУБД при работе с «1С:Предприятие», доработками в области безопасности под актуальные требования ФСТЭК и другими полезными изменениями. На встрече выясним, как новые возможности продукта могут стать полезны вашему бизнесу и ответим на все вопросы. Регистрация уже открыта

💻Doris — простая в использовании, высокопроизводительная и универсальная аналитическая БД

wget https://apache-doris-releases.oss-accelerate.aliyuncs.com/apache-doris-2.0.3-bin-x64.tar.gz
tar zxf apache-doris-2.0.3-bin-x64.tar.gz
mv apache-doris-2.0.3-bin-x64 apache-doris

JAVA_HOME=/home/doris/jdk8

./bin/start_fe.sh --daemon

Если кто ещё не сталкивался, существует Doris — быстрая БД на основе MPP. При запросах к большим массивам данных она возвращает результаты за пару секунд. С использованием Doris можно создавать приложения для анализа поведения пользователей, платформы для A/B-тестирования, анализа логов и заказов в e-commerce. 🖥 GitHub 🟡 Доки @sqlhub

Как бизнесу сохранить производительность высоконагруженных решений при работе с отечественными СУБД. Приходите на бесплатный вебинар от СберТеха. 20 августа в 11:00 приглашаем на вебинар «Что нового в Platform V Pangolin 6.3.0: сохраняем производительность высоконагруженных решений». Platform V Pangolin – это целевая СУБД в Сбере и в ряде крупных компаний. В конце июля вышел новый релиз продукта, который включает множество улучшений: · оптимизации для повышенных нагрузок при работе с платформой 1С; · улучшения производительности, важные для внедрения продукта в высоконагруженных системах; · доработки для соответствия новым требованиям ФСТЭК к отечественным СУБД; · дополнительные инструменты и расширения: колоночное хранение данных и использование распределенных таблиц, инструменты для подготовки тестовых сред. На встрече выясним, как новые возможности продукта могут стать полезны вашему бизнесу. Регистрация открыта

Аналитики-разработчики, станьте частью команды GigaChat 10 августа! 💻 Всего за один день вы пройдёте все этапы интервью, познакомитесь с командой и даже получите заветный оффер. Gigachat — мультимодальная языковая модель, способная генерировать тексты любой сложности и стиля, а также создавать изображения. Какие задачи решает команда GigaChat 👇 ✔️ Research: исследование и реализация перспективных подходов обучения, синтеза и фильтрации данных, конструирование метрик и бенчмарков LLM, разработка пайплайнов для решения продуктовых кейсов с помощью больших языковых моделей. ✔️ Code: реализация prod-ready кода по работе с LLM, БД, API. ✔️ Markup: формирование и контроль пайплайнов разметки данных. ✔️ Pretrain: повышение качества pretrain набора данных. ✔️ RL: эксперименты с RL, Reward и DPO подходами. Оставляйте отклик здесь, и до встречи на One Day Offer 10 августа! 😉

💻 WrenAI — open-source инструмент, который делает имеющуюся БД готовой к работе с RAG — curl -L https://github.com/Canner/WrenAI/releases/latest/download/wren-launcher-darwin.tar.gz | tar -xz && ./wren-launcher-darwin WrenAI позволяет преобразовывать текст в SQL, изучать данные из БД без написания SQL, и делать многое другое 🖥 GitHub 🟡 Доки @sqlhub

Кринж побеждает фишинг. Как IT-компания решила привлечь внимание к проблеме неоднозначным клипом. В 2024 году Aston, как и сотни других компаний, столкнулась с реальной фишинговой атакой. Сотни сотрудников получили письма от лица CEO с сообщениями, которые он не отправлял. Катастрофы удалось избежать, но угроза не исчезла. Поэтому компания решила рассказать о ней с помощью рэпа: https://youtu.be/Aczvu4t4xhY Делитесь клипом со своими сотрудниками и клиентами, чтобы напомнить, почему не стоит открывать подозрительные письма и кликать по ссылкам в них. Работает лучше, чем внутренние инструкции. Проверено! Как и эта ссылка. Реклама. ООО «Астон», ОГРН 1197746397045, ИНН 9715350151, erid=2VtzqvfoMgx

💻 Kuzu — это встроенная СУБД графов, созданная для обеспечения скорости запросов и масштабируемости — pip install kuzu Kuzu оптимизирована для выдерживания больших нагрузок и обладает следующим набором основных функций: — гибкая модель данных Property Graph и язык запросов Cypher — колоночное хранилище — быстрые алгоритмы объединения данных — многоядерный параллелизм запросов — последовательные ACID-транзакции 🖥 GitHub 🟡 Доки @sqlhub

Заканчивается приём научных статей по искусственному интеллекту и машинному обучению для публикации в журнале конференции AI Journey. Автор лучшей статьи получит приз в размере одного миллиона рублей. Лучшие статьи будут опубликованы в специальном выпуске журнала «Доклады Российской академии наук. Математика, информатика, процессы управления» и его англоязычной версии Doklady Mathematics. Эти издания выходят в рамках международной конференции AI Journey, представлены на ведущих мировых электронных библиотечных платформах, а также индексируются в крупнейших библиографических базах данных научного цитирования. Заявки принимаются до 20 августа на сайте AI Journey. Статьи должны быть оформлены в соответствии с правилами отбора, написаны на русском или английском языках и содержать ранее не опубликованные материалы. Решение о публикации и определении победителя принимает экспертная комиссия. Не упустите шанс представить свои исследования на международной платформе AI Journey 2024 и побороться за денежное вознаграждение! Ознакомьтесь с правилами и подайте заявку на сайте AI Journey.

ТОП 30 статей для изучения языка T-SQL - Уровень «Начинающий» 📌 Ссылка @sqlhub

💻 node-postgres — удобный клиент PostgreSQL для Node.js — npm install pg node-postgres представляет собой набор модулей Node.js для взаимодействия с PostgreSQL. В node-postgres есть поддержка колбеков, промисов, async/await, пула соединений, курсоров, привязки к C/C++ и многого другого. node-postgres написан на чистом JavaScript 🖥 GitHub 🟡 Доки @sqlhub