DATABASE DESIGN

ClickHouse в мире IoT В этой статье мы рассмотрим использование ClickHouse для хранения данных, поступающих по протоколу MQTT. Данный протокол был специально разработан для приложений IoT и предназначен для обеспечения эффективной и надежной связи между устройствами. В MQTT используется облегченная модель публикации‑подписки, обеспечивающая бесперебойную передачу данных даже в условиях ограниченных ресурсов. Низкие накладные расходы и поддержка потоковой передачи данных в реальном времени делают протокол MQTT идеальным выбором для сбора и передачи данных IoT с различных конечных устройств на платформы обработки данных. Читать: https://habr.com/ru/companies/otus/articles/888252/ #ru @database_design | Другие наши каналы

Зачем бизнесу нужно DWH и как обосновать необходимость проекта? Можно ли оценить окупаемость хранилища? Проекты внедрения DWH относятся к трудоемким и всегда требуют вложений, стоимость проектов начинается от 1,5 млн руб. К проекту необходимо привлекать системных аналитиков, архитекторов DWH, разработчиков, DevOps, дата-инженеров. Кроме затрат на ФОТ, нужны бюджеты на инфраструктуру и технологии, так как готового решения DWH из "коробки" не существует. Как при таких затратах аргументировать для бизнеса необходимость внедрения DWH? Какие бизнес-задачи может решить хранилище данных? Можно ли оценить окупаемость и эффективность внедрения? Читайте в статье. Читать: https://habr.com/ru/articles/888952/ #ru @database_design | Другие наши каналы

Бизнес-сериал: формируем BI-систему в строительстве почти в прямом эфире. Часть III Привет, Хабр! Продолжаем серию статей о создании BI-системы в компании Sminex. Сегодня поговорим об автоматизации и оптимизации работы инженеров данных и BI-разработчиков. Работа с данными всегда требует поиска баланса между удобством, скоростью и качеством. В этой статье мы сосредоточимся на удобстве. Читать: https://habr.com/ru/companies/sminex_developer/articles/888920/ #ru @database_design | Другие наши каналы

OpenDJ: Доступ к LDAP каталогу через REST интерфейс В статье мы настроим доступ к LDAP каталогу с открытым исходным кодом OpenDJ через REST интерфейс и настроим права доступа к нему Читать: https://habr.com/ru/articles/888062/ #ru @database_design | Другие наши каналы

Почему Redis работает так быстро, несмотря на то, что он однопоточный? Redis — это высокопроизводительное хранилище «ключ-значение» в оперативной памяти, известное своей невероятной скоростью. Фактически, один сервер Redis может обрабатывать до 100 000 запросов в секунду (QPS). Такая скорость часто удивляет, особенно если учесть, что Redis в основном работает по однопоточной модели обработки запросов. Так почему же Redis работает так быстро, несмотря на однопоточный подход? Давайте рассмотрим ключевые факторы, влияющие на производительность Redis. Читать: https://habr.com/ru/articles/888404/ #ru @database_design | Другие наши каналы

10 подсказок юриста для стабильной работы бизнеса в 2025 году 2025-й в самом разгаре, но это не значит, что предупреждать бизнес о том, что его ждет в этом году, поздно. Под таким предлогом мне задали 10 вопросов, и я не смогла отказать в ответах. Делюсь с вами, потому что знаю, что эти рекомендации точно пригодятся, на каком этапе развития ни находился бы ваш бизнес. Узнать, что ждет бизнес в 2025 году Читать: https://habr.com/ru/articles/888552/ #ru @database_design | Другие наши каналы

Новые возможности MongoDB Atlas на Azure и Google Cloud MongoDB Atlas теперь предлагает улучшенные возможности безопасности и масштабируемости на Azure и Google Cloud. С помощью Azure Private Link разработчики могут обеспечивать приватное подключение, минимизируя риски. На Google Cloud доступны функции Data Federation и Online Archive, что упрощает хранение и анализ данных. Узнайте больше об этих нововведениях! MongoDB усиливает защиту данных MongoDB продолжает улучшать безопасность для корпоративных пользователей. Благодаря новым возможностям управления ключами шифрования, поддержке TLS 1.3 и выбору шифровальных наборов, компании получают большую защиту на всех этапах жизненного цикла данных. Узнайте больше о новых функциях шифрования на сайте MongoDB. Читать подробнее #en @database_design | Другие наши каналы

Новые функции MariaDB: перемотка времени в прошлом MariaDB Enterprise Server 11.4 предлагает функции системного и прикладного времени, которые позволяют легко "перематывать" данные назад, чтобы увидеть их состояние в любой момент прошлого. Благодаря улучшенной версии, управление временными данными стало более доступным и эффективным. Читать подробнее #en @database_design | Другие наши каналы

Новое поколение шифрования в MongoDB Atlas MongoDB объявила о важнейших обновлениях в системе шифрования платформы Atlas. Они включают в себя улучшенную функциональность управления ключами клиентами (CMK) и поддержку TLS 1.3, что значительно укрепляет защиту данных. Эти инновации обеспечивают больше контроля и гибкости для предприятий, адаптируясь к современным требованиям безопасности и законодательства. Интеграция MongoDB и LangChain4j упрощает создание AI приложений на Java MongoDB объявила о сотрудничестве с LangChain4j, позволяющем легко интегрировать возможности MongoDB Atlas Vector Search в Java приложения. Это облегчает разработку AI систем, включая создание RAG и агентных систем с использованием единого API и общих абстракций. Узнайте больше в документации LangChain4j. Читать подробнее #en @database_design | Другие наши каналы

Яндекс 360 для бизнеса: как единая платформа спасает от цифрового хаоса «Ребята, так больше нельзя! Пора переходить на что-то, не зависящее от внешних обстоятельств и всегда доступное», — подобные речи я, как сотрудник компании-интегратора, слышу постоянно. Кто-то переехал уже несколько раз, кто-то сидит на VPN, постепенно перебирая неблокируемые протоколы, однако многие ищут и находят отечественные альтернативные платформы. Меня зовут Рустам Еникеев, я работаю системным администратором в интеграторе, переводящем бизнес на онлайн-офис. Проекты, с которыми я чаще всего работаю, — небольшие и средние компании численностью от 50 до 250 человек. И сегодня хочу рассказать о проверенном на практике решении для переезда. Далее Читать: https://habr.com/ru/companies/business_migration/articles/888192/ #ru @database_design | Другие наши каналы

Резинка, постепенно ломающая старые жёсткие диски В рамках моей работы над будущим постом об утерянном и наконец-то найденном фрагменте истории Mac я экспериментировал со старыми жёсткими дисками SCSI под брендом Apple, выпускавшимися Quantum и Conner в 1990-х. В этой статье я расскажу о хорошо известном в мире винтажных компьютеров факте, который, думаю, будет интересен читателям. Дело в том, что многие из этих жёстких дисков уже отказываются работать. Это очень распространённая проблема у старых моделей Quantum ProDrive, например, LPS и ELS. Шпиндель раскручивается, но мы не слышим ожидаемого паттерна щёлкающих звуков запуска, а спустя несколько секунд он снова останавливается. Читать: https://habr.com/ru/companies/ruvds/articles/888154/ #ru @database_design | Другие наши каналы

​​Интеграция MongoDB и LangChain4j: Революция в Java AI MongoDB анонсировала интеграцию с LangChain4j, упрощая создание AI-приложений на Java. Теперь разработчики смогут внедрять Vector Search от MongoDB Atlas и интегрировать большие языковые модели. Это открывает новые горизонты для создания инновационных AI решений в Java. Неудачи и успехи: опыт обновления баз данных в MongoDB Текст: Команда MongoDB рассказала о сложностях обновления своих внутренних кластеров до версии 8.0. Обнаружены уникальные баги, решены проблемы с индексами и достигнуто ускорение операций. Этот опыт помогает улучшать продукт до релиза для клиентов. Присоединяйтесь к сообществу MongoDB для новостей и событий. Читать подробнее #en @database_design | Другие наши каналы

Принципы кодирования объектов капитального строительства Авторы: Бобов Д., Красильников Н. Оглавление Введение. Исходные принципы построения кода. Лексическая структура кода и допустимые символы. Группа 3. Кодирование функциональных, строительных подсистем или зон. Кодирование помещений. Группа 4. Кодирование агрегатов. Особенности нумерации агрегатов. Пример кодирования агрегата. Группа 2. Код здания, сооружения или территории. Группа 1. Код местоположения и площадки объекта (site, plant). Правила кодирования инфраструктурных сетей. Правила кодирования автодорог и других инфраструктурных путей. Правила кодирования распределённых технологических систем (расположенных в разных зданиях или сооружениях, но представляющих единую систему) Кодирование Работ. Кодирование Документов. Иерархическое представление закодированных позиций. Рекомендации по маркировке закодированных позиций. Заключение. Читать: https://habr.com/ru/articles/887832/ #ru @database_design | Другие наши каналы

Мультипарт-загрузка в объектное хранилище Selectel: пишем тривиальный пример на Python Объектные хранилища с доступом на базе S3 API — это, возможно, лучшее решение для хранения больших объемов данных. Однако при загрузке крупных файлов могут возникнуть проблемы. Например, долгая передача данных из-за сетевых ограничений или таймауты и обрывы соединения. Как ни крути, а интернет даже здесь диктует свои условия. Попробуем их обойти с помощью мультипарт-загрузки. Привет! Меня зовут Гришин Александр, я продакт-менеджер в Selectel и отвечаю за развитие объектного хранилища и облачных баз данных. В этой статье я расскажу, как загружать большие файлы в S3 с помощью мультипарт-загрузки, используя Python и boto3. Под катом вы узнаете, как работает этот механизм и как его настроить для эффективной работы. Читать: https://habr.com/ru/companies/selectel/articles/887698/ #ru @database_design | Другие наши каналы

OpenDJ: Использование реляционной СУБД в качестве LDAP каталога В данной статье мы настроим службу каталогов LDAP OpenDJ таким образом, чтобы она использовала базу данных PostgreSQL в качестве хранилища данных. Читать: https://habr.com/ru/articles/887636/ #ru @database_design | Другие наши каналы

100+ ТБ на одном диске: как HAMR, HDMR и другие технологии изменят хранение данных Первый жесткий диск, появившийся в 1956 году, весил тонну и мог хранить всего 5 МБ данных — этого хватило бы для одной песни в формате MP3. Сегодня мы легко помещаем на флешку размером с палец тысячи таких песен, а жесткие диски вмещают десятки терабайт. Но даже этого уже недостаточно: объем данных в мире растет экспоненциально и в этом году составит 181 зеттабайт. Прорывные технологии уже на этапе тестирования — скоро на рынке появятся первые HAMR- и HDMR-диски, которые используют тепло и нанотехнологии, чтобы преодолеть физические ограничения современных носителей. Эти технологии обещают жесткие диски емкостью до 120 ТБ и выше. На горизонте еще более смелые решения: хранение данных в молекулах ДНК, кварцевые носители, способные сохранять информацию миллиарды лет, и многое другое. Давайте разберемся, что будет в ближайшее время происходить в этой сфере. Читать: https://habr.com/ru/companies/mclouds/articles/887530/ #ru @database_design | Другие наши каналы

MongoDB и Voyage AI: новаторский шаг в мире AI MongoDB объявила о приобретении Voyage AI для интеграции мощных AI-инструментов в свои базы данных. Это позволит улучшить точность и надежность данных для AI-приложений, снижая сложность и повышая доверие. Теперь разработчики смогут создавать более эффективные решения с помощью MongoDB. 🔍 Как MongoDB поддерживает рост Bank Jago Bank Jago, первый цифровой банк Индонезии, использует MongoDB для управления сложной архитектурой данных. Благодаря переходу на MongoDB Atlas в 2021 году, банк может масштабироваться и повышать эффективность работы. Это позволяет команде из более чем 500 инженеров сосредоточиться на инновациях и улучшении банковских услуг. Уроки из Dogfooding: как MongoDB тестирует обновления Пост: В компании MongoDB провели внутреннее тестирование обновлений системы через процесс, известный как dogfooding. Это позволило выявить и устранить критические ошибки до того, как они могли бы повлиять на клиентов. Такой подход повышает надежность и производительность нашей базы данных перед выпуском новых версий. Читать подробнее #en @database_design | Другие наши каналы

MongoDB и Voyage AI: Новый этап в разработке ИИ MongoDB приобретает Voyage AI для интеграции ИИ-поиска в свои базы данных. Это облегчит разработку приложений, повысит точность данных и улучшит пользовательский опыт. Компании получат больше возможностей для создания надежных и эффективных AI-решений. Читать подробнее #en @database_design | Другие наши каналы

MongoDB 8.0: Как мы тестируем новые версии В новой статье MongoDB делится опытом запуска версии 8.0. Тестируя релиз-кандидаты на собственных системах, компания выявляет редкие проблемы и ошибки, которые устраняются ещё до выхода к клиентам. Такой подход повышает доверие пользователей и обеспечивает стабильность продуктов. 🔍 Эффективное масштабирование AI с векторной квантованием С ростом платформы голосового помощника увеличиваются запросы и затраты на инфраструктуру из-за обработки массивных баз данных. Решение — векторная квантование: технология сжатия данных, которая снижает использование памяти и задержку, сохраняя при этом точность обработки. Узнайте больше о том, как это сделать. Обязательная многофакторная аутентификация в MongoDB Atlas С 26 марта 2025 года MongoDB внедряет обязательную многофакторную аутентификацию (MFA) для пользователей Atlas. Это изменение направлено на усиление защиты от несанкционированного доступа, поскольку украденные учетные данные участвуют в 31% утечек данных. Убедитесь, что вы настроили предпочитаемый метод MFA заранее. Читать подробнее #en @database_design | Другие наши каналы