/usr/bin

Возможность для всех, кто работает с Linux и хочет прокачаться. CROC Cloud Services запускает программу обучения: погружение в DevOps + прокачка в Linux. Если пройдешь на программу — трудоустраивают и платят зарплату, пока учишься. Обучение с практикой, лабораторными и под контролем экспертов из CROC Cloud Services. Курс проходит офлайн в Москве, но регионы могут подключить онлайн — пробуйте. Подробности тут.

Начни свою карьеру в DevOps с курсом от DevOps фабрики! Без воды и траты времени, решай задачи подобранные из реальной практики. Не конвейер как в этих гигантских академиях, получай личную обратную связь и индивидуальные карьерные рекомендации от DevOps профессионалов. Узнай больше и попробуй бесплатно https://devops-factory.com/

​Linux Systems Performance В этом видео рассказывают про инструменты Linux, при помощи которых можно измерять производительность ОС. Докладывает Brendan Gregg из Netflix. Среди описываемых решений: mpstat, pmcarch, perf, eBPF, uptime, htop, vmstat, free, iostat, strace, tcpdump, nstat, slabtop, pcstat, showboost и другие.

​system-design-primer В этом репозитории на Github собраны примеры дизайна высоконагруженных масштабируемых систем. Здесь же вы найдете ссылки на дополнительные материалы. Репыч на Гитхабе

​Управление памятью в Linux В статье разобраны типы памяти, которые есть в Linux, их устройство и тюнинг. Читать на Хабре.

Чем больше в сети сервисов, тем больше ошибок при тестировании в ручном режиме.Но что поможет избавиться от ошибок? Автоматизация. 🧑‍🎓 Об автоматизации тестирования уязвимостей, а точнее о скрипте nmap, и расскажут в Отусе на открытом онлайн-занятии «Nmap для тестирования уязвимостей». Занятие проведёт эксперт по комплексной защите объектов информатизации и опытный практик, руководитель курса по пентесту. 📍Будет интересно разработчикам, администраторам, девопс-инженерам, специалистам по ИБ. Узнаете, как работает уязвимость CVE-2023-22527, напишете скрипт для тестирования уязвимости. 🐧Важно: вам понадобится Linux-машина на виртуальной платформе + docker-compose 🗓Вебинар пройдет 19 февраля и начнется в 20:00 (мск) и является открытой частью онлайн-курса в Отус. 👉Принять участие в вебинаре: https://otus.pw/c1mI/?erid=LjN8K1RmU 📍После занятия можно записаться на онлайн-курс «Пентест. Практика тестирования на проникновение». Курс доступен для приобретения в рассрочку. Реклама. ООО "ОТУС ОНЛАЙН-ОБРАЗОВАНИЕ". ИНН 9705100963.

​Мой опыт в Airflow: как повысить стабильность загрузки данных в 5 раз В этой статье Малахова Наталья аналитик данных из Adventum рассказывает о собственном опыте работы с Airflow. Читать статью.

​Introduction to CDC (Change Data Capture): PostgreSQL to Kafka Система отслеживания измененных данных (CDC) — важнейшая концепция проектирования систем, особенно при работе с крупномасштабными системами данных. В этой статье разобран механизм построения CDC на базе PostgreSQL и Kafka. Читать статью. ❗️Статья на Медиум. Возможно, нужен VPN.

Бесплатный демо-доступ к продвинутому курсу по Linux: ▶️ ЗАБРАТЬ Новый поток курса Администрирование Linux: Мега стартует 26 февраля. Перед покупкой вы можете получить бесплатный доступ к двум первым видеоурокам. В процессе просмотра вы сможете: ✅ разобраться в особенностях Linux; ✅ познакомиться с форматом обучения в Слëрме; ✅ принять взвешенное решение о продолжении обучения – с практическими заданиями, АМА-сессиями и обратной связью. Ознакомиться с программой и получить демо-доступ вы можете на странице курса 👈

​Differences Between “>file 2>&1” and “2>&1 >file” in Bash Redirection В этой статье разобраны отличия между различными методами выводов: # > file # >file 2>&1 vs 2>&1 >file # | (pipe) ❗️Статья на Медиум. Возможно, нужен VPN.

Популярные расширения на PostgreSQL Сила PostgreSQL во многом заключается в его расширяемости, которая позволяет открыть больше функциональности. В статье рассмотрены четыре популярных расширения на PostgreSQL: PostGIS, TimescaleDB, pg_stat_statements, Citus. Читать статью.

Все ли «Postgres'ы» одинаково полезны? Рынок СУБД на базе PostgreSQL долгое время имел одно-единственное российское решение, которое было «у всех на устах». За последние два года количество таких решений значительно увеличилось. Если вы сейчас выбираете отечественное СУБД-решение или просто хотите знать о них больше, подключайтесь к вебинару «Инфосистемы Джет» 15 февраля в 11:00. Что в программе: ▪️ Пройдемся по всем российским СУБД ▪️ Разберем плюсы и минусы самых популярных из них ▪️ Обсудим наболевшие вопросы Мероприятие будет полезно ИТ-архитекторам, инфраструктурным инженерам, разработчикам, CIO, CTO и всем, кто занимается эксплуатацией систем управления базами данных. ✅ Регистрация на мероприятие

​Большая практическая шпаргалка SQL (SQLite) с готовыми запросами Все примеры изначально писались для СУБД SQLite, но почти всё из этого применимо также и к другим СУБД. Вначале идут очень простые запросы, с них можно начать новичкам. Если хочется чего-то более интересного — листайте вниз. Здесь есть и примеры довольно сложных запросов с агрегирующими функциями, триггерами, длинными подзапросами, с оконными функциями. Помимо этого, часть примеров посвящена работе с SQL в Python при помощи библиотечек sqlite3, pandas, polars. Этот список запросов с комментариями можно использовать как наглядное пособие для изучения SQL. Читать статью.

​Linux OS Patching Using Ansible Playbook Просто и понятно о том как патчить Linux при помощи Ansible. Читать статью. ❗️Статья на Медиум. Возможно, нужен VPN.

​Shell Scripting made Easy!! В этой статье описаны основы и синтаксис shell-скриптов, которые понадобятся DevOps-инженерам и которые легко освоить. Читать статью. ❗️Статья на Медиум. Возможно, нужен VPN.

Не всегда, но иногда возникает необходимость зачистить жизненно важное пространство на диске. В этом посте я бы хотел поделиться несколькими вариантами проделать это. В комментариях можете поделиться собственными способами. Команды в большей степени подходят для Ubuntu, но их можно портировать и на другие дистрибутивы Linux. Выполняйте команды вдумчиво. ⚡️ Удаление старых заголовков ядра и ненужных пакетов По мере эксплуатации системы, она будет накапливать ненужные пакеты и зависимости, которые больше не нужны. В Ubuntu и Debian есть удобный инструмент, который выполняет подобные задачи с помощью одной команды:

$ sudo apt autoremove

⚡️Очистка старых логов systemd Логи накаливаются незаметно. Большинство дистрибутивов Linux используют systemd, а systemd хранит логи в /var/log. При помощи команды du, чтобы проверить размер каталога /var/log:

$ du -hs /var/log/*

После этого можно удалить все логи старше определенного периода времени. В примере удаляются логи старше 10 дней:

$ journalctl --vacuum-time=10

⚡️Удалите неиспользуемые образы docker-контейнеров и сами контейнеры Характерное место для хранения — /var/lib/docker. Посмотрите что там:

$ docker images

⚡️Проверьте самые большие каталоги Задача утомительна, но она поможет найти большие каталоги. Можно начать с корня каталога и проверить 10 крупных директорий:

$ du -h . --max-depth=1 | sort -n -r | head -n 10

Надеюсь, эти способы будут вам полезны🚀

✨ Отус приглашает 15 февраля в 20:00 мск на бесплатный вебинар «Роль Apache Kafka в логировании». Вебинар является частью продвинутого онлайн-курса "Observability: мониторинг, логирование, трейсинг". ➡️ Регистрация на вебинар: https://otus.pw/EuFaC/?erid=LjN8KYbX7 🔸 На вебинаре ма разберём:- роль брокера в Kafka;- как Kafka интегрируется в общую систему сбора данных;- индексы в Kafka;- взаимодействие с общим стеком логирования.

How to compare two PostgreSQL databases to find differences in tables, indexes, and functions? В этой статье вы найдете скрипт, который сранивает структуру двух СУБД PostgreSQL (таблицы, индексы, функции). Посмотреть скрипт. ❗️Статья на Медиум. Возможно, нужен VPN.

Bash script to check the growth rate for your PostgreSQL DB objects В статье вы найдете скрипт, который считает самые быстро прирастающие БД за N дней/недель/месяцев. Читать статью. ❗️Статья на Медиум. Возможно, нужен VPN.

​Оптимизация производительности запросов в ClickHouse: как ускорить неускоряемое В этой статье бывший сотрудник Clickhouse рассказывает о высокоуровневой архитектуре ClickHouse, CI/CD, тестировании производительности, интроспекции, абстракциях и алгоритмах и выборе библиотек для высокопроизводительных приложений. Поделится ниндзя-техниками, которые помогут ускорить ваши системы. Вы сможете попробовать эти советы и практики на своем проекте и оценить насколько они полезны. Читать статью.