DevOps

📕 Сравнение индексации в PostgreSQL и ClickHouse для разработчиков, администраторов баз данных, инженеров и аналитиков данных На открытом уроке 3 июня в 20:00 мск мы обсудим различия в механизмах индексации между PostgreSQL и ClickHouse: 📗 На вебинаре разберём: 1. Основы и сравнение производительности разных подходов к индексации; 2. Для каких сценариев распространено использование этих подходов; 📘 В результате на практике разреберете и сравните подходы, производительность и архитектуру индексации PostgreSQL и ClickHouse. 👉 Регистрация и подробности о курсе ClickHouse для инженеров и архитекторов БД: https://vk.cc/cMuOtK Все участники открытого урока получат скидку на курс "ClickHouse для инженеров и архитекторов БД" Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576

Tailspin — позволяет просматривать логи с подсветкой Tailspin не делает предположений о формате или расположении элементов, которые нужно подсветить. По этой причине он не требует настройки, и подсветка будет работать одинаково стабильно для разных лог-файлов. Особенности 🪵 Просмотр (или отслеживание) любых лог-файлов в любом формате 🍰 Не требует настройки или конфигурации 🌈 Подсвечивает числа, даты, IP-адреса, UUID, URL и многое другое ⚙️ Все группы подсветки настраиваемы 🧬 Легко интегрируется с другими командами 🔍 Использует less для прокрутки, поиска и фильтрации https://github.com/bensadeh/tailspin #devops #девопс Подпишись 👉@i_DevOps

🕵️‍♂️ Мониторим новые файлы в каталоге в реальном времени Иногда нужно узнать, когда в определённой папке появляются новые файлы. Bash + inotifywait помогут:

inotifywait -m -e create --format '%w%f' /path/to/dir | while read NEWFILE; do
  echo "🆕 Новый файл: $NEWFILE"
done

📦 Объяснение: * inotifywait -m — постоянный мониторинг * -e create — событие создания * --format '%w%f' — полный путь к новому файлу * /path/to/dir — нужная папка * Всё новое сразу отображается в консоли Установить inotify-tools:

sudo apt install inotify-tools

👉@bash_srv

Сказки DevSecOps: где заканчиваются сканеры и начинается система 📌 Бесплатный вебинар с экспертами из Лаборатории Касперского и Positive Technologies 🗓 4 июня в 19:00 мск 🔒 Разберём, как встроить безопасность в процессы разработки, не жертвуя скоростью: — Почему time-to-market и DevSecOps не противоречат? — Где безопасность реально помогает работать быстрее, а где — мешает? — Как не стать причиной простоя на миллионы и не тушить пожары на проде? — Почему системный подход в DevSecOps спасает от утечек и нервных ночей? — Как перестать «догонять сканерами» и начать менять процессы? ❗ Говорим не про тулзы ради галочки — а про инженерную зрелость и культуру. 👉 Присоединиться к вебинару через бота 👈

🦖 Тестирование в продакшене — синтетический мониторинг на Rust Prodzilla — это современный инструмент синтетического мониторинга, созданный на Rust. Он ориентирован на тестирование сложных пользовательских сценариев в продакшене, сохраняя при этом удобочитаемость для человека. Prodzilla поддерживает последовательные запросы к эндпоинтам, передачу значений из одного ответа в следующий запрос, проверку того, что ответы соответствуют ожиданиям, и отправку уведомлений через вебхуки в случае сбоев. Также он предоставляет API, позволяющее просматривать результаты в формате JSON и вручную запускать проверки. Интеграция с OpenTelemetry добавляет trace_id ко всем запросам, направляемым в вашу систему. В будущем может быть добавлен пользовательский интерфейс. Кроме того, Prodzilla крайне быстр, использует менее 15 МБ оперативной памяти и распространяется бесплатно для хостинга на Shuttle. Долгосрочные цели Prodzilla: * Сократить расхождения и дублирование кода между blackbox- и end-to-end-тестированием и инструментами наблюдения за продакшеном. * Избежать ситуаций, когда документация по поведению системы устарела или поведение системы в отдельных сценариях неизвестно. * Сделать тестирование в продакшене более простым и доступным. https://github.com/prodzilla/prodzilla #devops #девопс Подпишись 👉@i_DevOps

Архитектура Docker состоит из трех основных компонентов 🔹 Клиент Docker Это интерфейс, через который осуществляется взаимодействие с пользователями. Он взаимодействует с демоном Docker. 🔹 Docker Host Здесь демон Docker принимает запросы Docker API и управляет различными объектами Docker, включая образы, контейнеры, сети и тома. 🔹 Реестр Docker Здесь хранятся образы Docker. Например, широко используется публичный реестр Docker Hub. #devops #девопс Подпишись 👉@i_DevOps

🚀 Подборка Telegram каналов для программистов Системное администрирование, DevOps 📌 https://t.me/bash_srv Bash Советы https://t.me/win_sysadmin Системный Администратор Windows https://t.me/sysadmin_girl Девочка Сисадмин https://t.me/srv_admin_linux Админские угодья https://t.me/linux_srv Типичный Сисадмин https://t.me/devopslib Библиотека девопса | DevOps, SRE, Sysadmin https://t.me/linux_odmin Linux: Системный администратор https://t.me/devops_star DevOps Star (Звезда Девопса) https://t.me/i_linux Системный администратор https://t.me/linuxchmod Linux https://t.me/sys_adminos Системный Администратор https://t.me/tipsysdmin Типичный Сисадмин (фото железа, было/стало) https://t.me/sysadminof Книги для админов, полезные материалы https://t.me/i_odmin Все для системного администратора https://t.me/i_odmin_book Библиотека Системного Администратора https://t.me/i_odmin_chat Чат системных администраторов https://t.me/i_DevOps DevOps: Пишем о Docker, Kubernetes и др. https://t.me/sysadminoff Новости Линукс Linux 1C разработка 📌 https://t.me/odin1C_rus Cтатьи, курсы, советы, шаблоны кода 1С https://t.me/DevLab1C 1С:Предприятие 8 https://t.me/razrab_1C 1C Разработчик https://t.me/buh1C_prog 1C Программист | Бухгалтерия и Учёт https://t.me/rabota1C_rus Вакансии для программистов 1С Программирование C++📌 https://t.me/cpp_lib Библиотека C/C++ разработчика https://t.me/cpp_knigi Книги для программистов C/C++ https://t.me/cpp_geek Учим C/C++ на примерах Программирование Python 📌 https://t.me/pythonofff Python академия. https://t.me/BookPython Библиотека Python разработчика https://t.me/python_real Python подборки на русском и английском https://t.me/python_360 Книги по Python Java разработка 📌 https://t.me/BookJava Библиотека Java разработчика https://t.me/java_360 Книги по Java Rus https://t.me/java_geek Учим Java на примерах GitHub Сообщество 📌 https://t.me/Githublib Интересное из GitHub Базы данных (Data Base) 📌 https://t.me/database_info Все про базы данных Мобильная разработка: iOS, Android 📌 https://t.me/developer_mobila Мобильная разработка https://t.me/kotlin_lib Подборки полезного материала по Kotlin Фронтенд разработка 📌 https://t.me/frontend_1 Подборки для frontend разработчиков https://t.me/frontend_sovet Frontend советы, примеры и практика! https://t.me/React_lib Подборки по React js и все что с ним связано Разработка игр 📌 https://t.me/game_devv Все о разработке игр Библиотеки 📌 https://t.me/book_for_dev Книги для программистов Rus https://t.me/programmist_of Книги по программированию https://t.me/proglb Библиотека программиста https://t.me/bfbook Книги для программистов БигДата, машинное обучение 📌 https://t.me/bigdata_1 Big Data, Machine Learning Программирование 📌 https://t.me/bookflow Лекции, видеоуроки, доклады с IT конференций https://t.me/rust_lib Полезный контент по программированию на Rust https://t.me/golang_lib Библиотека Go (Golang) разработчика https://t.me/itmozg Программисты, дизайнеры, новости из мира IT https://t.me/php_lib Библиотека PHP программиста 👨🏼‍💻👩‍💻 https://t.me/nodejs_lib Подборки по Node js и все что с ним связано https://t.me/ruby_lib Библиотека Ruby программиста https://t.me/lifeproger Жизнь программиста. Авторский канал. QA, тестирование 📌 https://t.me/testlab_qa Библиотека тестировщика Шутки программистов 📌 https://t.me/itumor Шутки программистов Защита, взлом, безопасность 📌 https://t.me/thehaking Канал о кибербезопасности https://t.me/xakep_2 Хакер Free Книги, статьи для дизайнеров 📌 https://t.me/ux_web Статьи, книги для дизайнеров Математика 📌 https://t.me/Pomatematike Канал по математике https://t.me/phis_mat Обучающие видео, книги по Физике и Математике https://t.me/matgeoru Математика | Геометрия | Логика Excel лайфхак📌 https://t.me/Excel_lifehack https://t.me/mir_teh Мир технологий (Technology World) Вакансии 📌 https://t.me/sysadmin_rabota Системный Администратор https://t.me/progjob Вакансии в IT

Docker на каждый день: Ключевые команды в одной статье-шпаргалке Забудьте о том, что Docker — это некий таинственный инструмент исключительно для DevOps-инженеров. В современном мире разработки Docker стал таким же незаменимым швейцарским ножом, как Git или ваш любимый редактор кода. Он позволяет любому разработчику писать код, который будет одинаково работать на машине коллеги, на тестовом стенде и в продакшене, забыв о кошмаре "а у меня на машине все работает". Если вы еще не погрузились в мир контейнеризации или вам нужен удобный источник команд, эта статья — ваш экспресс-билет. https://habr.com/ru/articles/913978/ #devops #девопс Подпишись 👉@i_DevOps

На улицах Москвы замечены роботы-доставщики в ярком брендинге. Говорят, они направляются на infra.conf'25. Кажется, они знают, где надо быть 5 июня. infra.conf'25 — большая конференция Яндекса про инфраструктуру. Всё про создание и эксплуатацию высоконагруженных систем. DevOps, прод, CI/CD, дата-центры, сетка, мониторинг, фейлы и крутые решения. Организует команда Yandex Infrastructure — те, благодаря кому создаются и эксплуатируются сервисы Яндекса, которыми пользуются миллионы. Место встречи: Москва и онлайн. Инженерные доклады, никаких продаж и «воды». Регистрируйся, пока это не сделали все роботы.

Лечим проблемы Kubernetes на лету по мере масштабирования проекта: опыт команды VK Cloud Производительность etcd-кластера со множеством объектов — головная боль команд, которые любят и ценят Kubernetes. И вот почему: чаще всего для роста производительности кластера используют горизонтальное скалирование, а это приводит к нагрузке на кластер из-за увеличения времени согласования записи данных. В результате вместо шустрого кластера получается неповоротливый тяжеловес. Меня зовут Алексей Волков. Я менеджер продукта Cloud Containers в VK Cloud. В этой статье я расскажу о кейсе одного из наших клиентов: с каким запросом он пришел и с какими сложностями сталкивался, как мы провели тюнинг etcd-кластера и какие настройки нужны, чтобы повысить производительность Kubernetes. https://habr.com/ru/companies/vktech/articles/911542/ #devops #девопс Подпишись 👉@i_DevOps

🗂️ Как найти большие файлы в системе Иногда на сервере внезапно заканчивается место, и нужно срочно найти, какие файлы занимают больше всего пространства. Вот простая команда на bash:

find / -type f -size +500M -exec ls -lh {} \; 2>/dev/null | awk '{ print $NF ": " $5 }' | sort -hr -k2

🔹 Что делает этот скрипт: * Ищет все файлы больше 500 МБ по всему серверу. * Показывает их размер и путь. * Сортирует список по размеру — самые большие файлы будут вверху. Совет: Если нужно искать не по всему серверу, а только в домашней папке, просто поменяй / на ~/. #devops #девопс Подпишись 👉@i_DevOps

7 популярных мифов о Service mesh, которые мешают вам его освоить 🚫 Service mesh окружен заблуждениями, из-за которых многие его боятся внедрять или считают бесполезным: ➖ «У него огромный оверхед из-за нагрузки на систему» ➖ «Для разработчика это лишнее, пусть DevOps разбираются» ➖ «Зачем он нужен, если есть API Gateway? И многое другое. Собрали противоречивые утверждения в одном файле и разобрались, где – правда, а где – миф. 📌 Забирайте полезный материал у бота-помощника в один клик. erid: 2W5zFFujWFr

Selectel Billing Exporter Это экспортёр для Prometheus, который позволяет собирать метрики расходов в Selectel. С его помощью можно мониторить свои траты на сервисы Selectel прямо через привычные инструменты наблюдения. Он поддерживает получение информации о балансе и детализации расходов по каждому сервису. Для работы потребуется указать API-токен Selectel. https://github.com/mxssl/selectel-billing-exporter #devops #девопс Подпишись 👉@i_DevOps

Statusnook — это открытое (MIT) self-hosted решение для быстрого развёртывания страницы статуса и мониторинга HTTP-эндпоинтов с оповещениями в Email и Slack. https://github.com/goksan/statusnook #devops #девопс Подпишись 👉@i_DevOps

Горизонтальное масштабирование СУБД на примере Greenplum Современные приложения работают с огромными объёмами данных, и рано или поздно классические СУБД перестают справляться с нагрузкой. Выход — горизонтальное масштабирование, позволяющее эффективно распределять запросы и хранение по нескольким узлам. На вебинаре вы: — Познакомитесь с концепцией горизонтального масштабирования и почему оно критически важно в высоконагруженных системах. — Разберёте архитектуру СУБД Greenplum — одного из самых мощных решений на базе PostgreSQL для работы с Big Data. — Узнаете, как устроены шардирование, партиционирование, репликация и управление кластерами в Greenplum. — Посмотрите реальные кейсы использования Greenplum в распределённых системах. 👉 Регистрация и подробности о курсе Highload Architect: https://vk.cc/cMiILQ Бесплатное занятие приурочено к старту курса Highload Architect, обучение на котором позволит освоить решения, которые выдерживают большое количество запросов в секунду и правильно оптимизировать работоспособность серверов. Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru

Привет, друзья! Сегодня разберём, как выстроить надёжный GitOps-процесс с помощью Argo CD и Kubernetes. 1. Архитектура репозитоpиев * Monorepo vs Multirepo: в зависимости от масштаба проектов выбирайте единое или раздельное хранилище манифестов. * Разделяйте окружения (prod/stage/dev) по разным папкам или веткам. 2. Декларативность * Храните все Kubernetes-манифесты (Deployment, Service, Ingress, ConfigMap, Secret) в Git. * Все изменения проходят через MR/PR с обязательным код-ревью и автоматическим CI-проверками (lint, kubeval). 3. Установка и конфигурация Argo CD

   kubectl create namespace argocd
   kubectl apply -n argocd -f https://raw.githubusercontent.com/argoproj/argo-cd/stable/manifests/install.yaml
   

* Подключите репозиторий: * URL: ваш Git-сервер * Type: Git * Auth: SSH-ключ или токен * Создайте приложение (Application), где укажете target-кластер и путь к манифестам. 4. Автосинхронизация и управление откатом * Включите syncPolicy.automated для мгновенного применения изменений. * Настройте pruneResources: true, чтобы удалять неактуальные объекты. * Активируйте selfHeal: true — Argo CD будет восстанавливать конфигурацию при ручных правках. 5. Мониторинг и оповещения * Подключите Prometheus и Grafana к Argo CD через метрики и вебхуки. * Настройте оповещения в Slack или Telegram о неудачных синках и drift’ах. 6. Секреты и конфигурации * Используйте Sealed Secrets или HashiCorp Vault для безопасного хранения. * Аргокаталоги монтируйте через CSI-драйверы, чтобы не держать секреты в Git. 7. Best Practices * Разделяйте права доступа через RBAC — кто может мёржить изменения в prod. * Периодически пересматривайте Git-историю и чистите устаревшие ветки. * Проводите тренировку «chaos engineering» — симулируйте сбои при помощи LitmusChaos или Chaos Mesh. Небольшой чеклист перед деплоем: * [ ] CI-лейблы зелёные * [ ] Артефакты в артефактном репозитории * [ ] Инфраструктурные тесты пройдены * [ ] Определён ответственный за rollback Успешного вам релиза и минимальных «рывков» в проде! Подпишись 👉@devopslib

Изучение групп и версий API в Kubernetes Kubernetes — мощная платформа оркестрации контейнеров, предлагающая широкий набор возможностей через свой API (интерфейс программирования приложений). Для эффективного использования функционала Kubernetes крайне важно понимать структуру его API, включающую группы API и версии. В этой статье мы рассмотрим виды групп API в Kubernetes с примерами, демонстрирующими их значение, а также подробно остановимся на версиях API для полного понимания. https://devopsvoyager.hashnode.dev/exploring-kubernetes-api-groups-and-versions #devops #девопс Подпишись 👉@i_DevOps

Присоединяйтесь к обзору «Нимбиуса» — решения класса Cloud Management Platform «Нимбиус» — это российская разработка — аналог VMware vRealize и Red Hat CloudForms, которая помогает крупным компаниям создавать частные облака и управлять гибридной инфраструктурой по модели Infrastructure-as-a-Code. На мероприятии вы узнаете, как платформа повышает эффективность работы команд разработки и эксплуатации ИТ-инфраструктуры, а также увидите последние достижения: ▪️Интеграции с платформами zVirt и SpaceVM ▪️Новые PaaS-сервисы в маркетплейсе — СУБД и Kubernetes ▪️Единый модуль биллинга и аллокации затрат Что еще в программе? ▪️Обзор трендов на инфраструктурном рынке в РФ ▪️Live-demo функционала продукта, новых фишек ▪️Непридуманные истории внедрения в Enterprise Когда: 30 мая, 14:00 мск Формат: онлайн 🔗 Регистрация

🚀 Kubernetes 1.32: пять фич, которые стоит попробовать прямо сейчас * Auto-delete PVC для StatefulSet StatefulSet наконец-то умеет сам удалять PVC, когда поды и сам объект больше не нужны. Включите StatefulSetAutoDeletePVC и задайте persistentVolumeClaimRetentionPolicy — забудете про ручную очистку хранилища. * Память-backed emptyDir с динамическим размером Теперь emptyDir { medium: "Memory" } может автоматически подстраиваться под лимиты RAM вашего пода (или заданный лимит), а не фиксированные 50 %. Отлично для временных кэшей и build-джобов. * Field Selectors для CRD Custom Resource теперь поддерживает --field-selector, как “родные” объекты K8s. Фильтруйте CR легко, без дополнительных label-index. * status.hostIPs в GA Подам больше не нужен костыль, чтобы узнать IPv4/IPv6 узла в dual-stack-кластере: адреса приходят прямо в Downward API. * Node name в ServiceAccount JWT Узел теперь прописывается в SA-токен, что упрощает Validating/Mutating Admission Policies и сокращает риск эскалации прав. 💡 Как обновиться 1. Скачайте свежий kubeadm 1.32 и выполните kubeadm upgrade plan && kubeadm upgrade apply v1.32. 2. Проверьте deprecated API в релиз-нотах. 3. Включите нужные Feature Gates — и в бой! #devops #девопс Подпишись 👉@i_DevOps

❓ Да что вы знаете про DevSecOps? Проверь себя – пройди тест по ДевСекОпс и узнай, можешь ли ты стать DevSecOps-инженером! 🫵 Ответишь успешно — пройдешь на курс «Внедрение и работа в DevSecOps» от Отус по специальной цене. Освойте принципы и популярные инструменты DevSecOps-инженера, которые помогут повысить вашу востребованность и доход на онлайн-курсе «Внедрение и работа в DevSecOps» от OTUS. Авторская программа подготовлена опытным инженером и завалидированная партнером StartX. ➡️ ПРОЙТИ ТЕСТ 💥 Бонусом за успешно пройденный тест получишь доступ на сайт курса к записям лучших открытых уроков. Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576