Библиотека девопса | DevOps, SRE, Sysadmin

#туториал Нужно найти какой-то файл? Нет, не find! 🔎 Утилита locate используется для поиска файлов, расположенных на машине пользователя или на сервере, опираясь на собственную БД. Обновление БД происходит автоматически, +- раз в сутки или командой updatedb. locate txt Ищем все файлы, имена которых содержат «txt». Опа, меньше чем за секунду команда нашла все подходящие файлы, а find потратил бы гораздо больше времени. locate '*txt' — Ищем файлы, которые оканчиваются на «txt» Посчитаем общее количество файлов, которые нашлись: locate -ic '*txt' (-i — не смотрим на регистр, -с — вывести общее количество найденных файлов) Углубимся немного и заюзаем strace. В папке tmp создадим пустой файл: > hello.txt locate *txt Ничего не вывел 🤔 Мы вызываем внешнюю команду locate, которую вызывает интерпретатор. И тут всплывает подстановка имен файлов, то есть Globbing. 🧑‍🎓 После того, как интерпретатор обнаружил символ «*», интерпретатор попытался сделать подстановку Globbing. При вызове команды locate она получила в качестве аргументов, результат этих подстановок. Запускаем: strace -e execve locate *txt Получаем: execve("/usr/bin/locate", ["locate", "hello.txt"], 0x7ffe242252d8 /* 27 vars */) = 0 Опция e и аргумент execve сообщают strace, что отслеживаются только системные вызовы execve. execve() выполняет программу, заданную параметром filename Возвращаемся к выводу от strace и видим, что locate получила в качестве аргумента hello.txt И теперь locate будет искать файлы именно по этому шаблону, а не по тому, что мы ожидали, когда писали *txt. Поэтому ничего не вывелось, когда запустили locate *txt Чтобы этого не происходило ⚠️ всегда используйте кавычки для ожидаемого результата. locate '*txt'

Находитесь в поиске нормальной вакансии? Вы уже подумали за вас и у нас есть канал вам в помощь. Сохраняйте, чтобы не потерять

🧑‍🏫🧑‍🏫🧑‍🏫 Что такое NOC-команда, и какие 5 KPI на нее вешать для улучшения аптайма вашей платформы Network Operations Center — это команда, которая занимается 24/7 мониторингом системы и алертинга, и их первой линией поддержки. Команда понимает как делать базовый дебаг алертов и варнингов. Команда отвечает за полный цикл инцидент-менеджмента: то есть оркестрацию процесса фикса этого инцидента, и артефактами после того как все случилось. Как обычно с любым процессом, всплывают роли, артефакты и события. Роли: 🔹 NOC-команда, которая мониторит; 🔹 Incident Commander — это Engineering Manager, который ответственен за валидацию дебага и исправлением инцидента; 🔹 Incident Team — дежурящие инженеры. Артефакты: 🔹 Root Cause Analysis (RCA) — пост-мортем (ниже будет); 🔹 Runbook — источник знаний по каждой метрике и алерту, как они могут влиять на пользователей и систему, а также как их дебажить и эскалировать. События: 🔹 Post-Mortem — в котором вы анализируете и пишете Root Cause Analysis документ; 🔹 Incident — когда все горит и очень опасно. К примеру, у вас есть у вас дашборд с критическими системными метриками SaaS-платформы в Grafana и команда мониторит этот дашборд. На каждый чарт в этом дашборде есть некие показатели и паттерны поведения, которые команда отслеживает. Все эти правила лежат в Runbook (справочнике). Если что-то упало — нужно смотреть что это значит, и определять можно ли это NOC-команде подебажить (вдруг ночью упала пиковая нагрузка), пофиксить (рестарт сервера), или эскалировать саппорту или инженерам. Подробнее здесь #обучалка

✍️ Библиотека программиста» находится в поиске переводчика и автора оригинальных статей Тематика ● DevOps Объем ● от 7 до 15 тыс. знаков без учета кода. ● 3-4 статьи в месяц. Оплата ● 4к руб. за статью. ● перевод — 250 руб. за 1000 символов без учета кода. ● работаем с самозанятыми, ИП. Статья публикуется на сайте proglib.io, в группе ВК (425к подписчиков), на канале «Библиотека программиста» (77к подписчиков) и в «Библиотеке devops’а» (6к подписчиков). ➡️ Заполнить анкету ⬅️

🔥😎🤯 Развертывание non-deployable сервисов на ArgoCD и Kustomize, управляя пограничными состояниями Условие примера, приведенного автором, требовало, чтобы была сохранена структура каталогов для сотен репозиториев при переходе от kubectl к подходу ArgoCD. В каждом репозитории есть Configmap-ы в соответствии со стандартизированным внутренним шаблоном, которые позволяют наследовать их на уровне всей команды, где у нескольких приложений может быть, совместно используемые конфиги. Ничего нового — в Spring Boot есть встроенный механизм, который склеивает все конфигурационные файлы вместе, но в Python, Javascript и других ЯП все не так просто. Такая функция поддерживается в Helm — можно объединить несколько файлов, которые объединятся и будут переданы вместе в шаблоны. Проблема ArgoCD не позволяет синхронизировать ресурсы с одинаковым именем — нет способа выбрать, какой ресурс имеет более высокий приоритет. Что же делать? Kustomize можно настроить с помощью плагинов-генераторов — это скрипты или бинарники, запускаемые в контексте каталога, и в результате возвращают ресурсы Kubernetes в формате YAML. Далее автор объединит пользовательскую логику в приложение Go, импортирует необходимые библиотеки, скомпилирует ее и выпустит в artifactory, например Nexus или JFrog. Подробное продолжение тут #туториал

#дайджест бесплатных сертификационных курсов 🔵 Основы программирования для Linux. Курс нацелен на изучение основ программирования в операционной сиcтеме Linux. Он затрагивает базовый инструментарий и все основные компоненты: управление процессами, межпроцессные взаимодействия, сетевые возможности. 🔵 GIT. Программа поможет разобраться в трехэтапном рабочем процессе в GIT (системе контроля версий, или VCS) и настроить GIT в своей системе. Также научитесь создавать ветки и отслеживать файлы, а также создавать репозиторий в GIT, GitHub. 🔵 Основы Docker. В этом курсе вы начнете с основ: создания и запуска ваших первых контейнеров Docker. К концу курса получите краткое представление о запуске контейнеров в рабочей среде и о том, как решать проблемы расширенной оркестровки, такие как высокая доступность, обнаружение служб и согласование. 🔵 Microsoft Azure Essentials. Этот онлайн-курс расскажет о различных моделях доставки и ролях Azure. Вы узнаете о различных доступных службах Azure и тщательно изучите компоненты Azure. Кроме того, вы также получите информацию о службах Azure в различных регионах и получите подробную информацию о регионах Azure и менеджере ресурсов. 🔵 Специализация Python Scripting for DevOps. Научитесь разрабатывать и развертывать программное обеспечение с использованием Python. Эта специализация даст вам основы программирования, включая знания и навыки, необходимые для карьеры в области разработки программного обеспечения, информационных технологий и науки о данных. 🔵 Introduction to Cloud. Вы также узнаете о различных моделях облачных сервисов (IaaS, PaaS, SaaS) и моделях развертывания (публичное облако, частное облако, гибридное облако), ключевых компонентах облачной архитектуры (виртуализация, виртуальные машины, хранилища, сети, контейнеры) и новых облачных тенденциях (гибридное мультиоблачное, бессерверное, микросервисы, Cloud Native, модернизация приложений).

Когда вас ДДОСят — вот самый правильный вариант решения проблемы 💪💪

#вопросыссобеседования Чему будет равно a? a=5; true | { true && a=10; } Ответ: а = 5. Потому что каждая команда конвейера исполняется в отдельном SubShell efusion@cannabis:~$ a=5; true | { true && a=10; echo $a; } 10 efusion@cannabis:~$ echo $a 5

GoReplay — это опенсорсный инструмент мониторинга сети, который может записывать ваш трафик в реальном времени и использовать его для отслеживания, нагрузочного тестирования, мониторинга и детального анализа. Установка Загрузите последнюю версию бинарника и соберите Как оно работает Самый простейший вариант: sudo ./gor --input-raw :8000 --output-stdout который действует как tcpdump. Если у вас уже есть тестовая среда, вы можете сделать так: sudo ./gor --input-raw :8000 --output-http http://staging.env Дополнительная информация: FAQ, Troubleshooting, Issues #гайд

👮‍♂️👮‍♂️ 3 октября пройдет вебинар DevSecOps: организация безопасной разработки на уровне процессов. Начало в 11:00. На вебинаре будет обсуждаться, как создавать продукты, которые будут соответствовать требованиям безопасности, как автоматизировать разработку и доставку продукта там, где зависимости и условия меняются ежедневно. Темы дискуссии: 👉 Что сегодня вкладывается в понятие DevSecOps 👉 Автоматизация тестирования безопасности на каждом этапе процесса разработки 👉 Автоматизация реакции на инциденты, стабилизация процесса функционирования приложения 👉 Governance и Compliance: как построить безопасный процесс разработки и соответствовать требованиям 👉 Облачные инструменты организации безопасной разработки на уровне процессов Мероприятие будет полезно разработчикам и тимлидам команд разработки, DevOps и DevSecOps, руководителям и специалистам по информационной безопасности, техническим и ИТ-директорам. Регистрация тут

Как организовать процесс разработки, чтобы соблюсти Compliance? ⏰3 октября в 11:00 Мск ⚡️Регистрация На вебинаре «DevSecOps: организация безопасной разработки на уровне процессов» вы узнаете, как создавать продукты, соответствующие требованиям безопасности, и автоматизировать разработку, если условия меняются ежедневно. В программе 🔹 Что сегодня вкладывают в понятие DevSecOps. 🔹 Автоматизация тестирования безопасности на каждом этапе разработки. 🔹 Автоматизация реакции на инциденты, стабилизация процесса функционирования приложения. 🔹 Governance и Compliance: как построить безопасный процесс разработки и соответствовать требованиям. 🔹 Облачные инструменты для организации безопасной разработки на уровне процессов. Регистрация

#memes

SRE, MTTR, SLA — получите оффер за выходные, если все поняли. В этом году экосистема Тинькофф выросла до 36 млн клиентов. Поэтому мы расширяем SRE-команду, чтобы бесперебойно поддерживать работу наших приложений. Нам нужны инженеры с опытом от трех лет, которые помогут уменьшить количество сбоев и повысить надежность работы сервисов. Пройти собеседование можно онлайн за выходные — на SRE Weekend Offer. Ближайшее мероприятие — 7—8 октября.Успейте подать заявку до 4 октября. АО «Тинькофф Банк», ИНН 7710140679

Разберем #дайджест из 8 инструментов для мониторинга и управления производительностью своей сетевой инфраструктуры. 🔺 ManageEngine OpManager. Обеспечивает глубокое понимание сетевых устройств, таких как маршрутизаторы, коммутаторы, брандмауэры, беспроводные устройства, соединения WAN, физические и виртуальные серверы, блоки хранения и всю сквозную инфраструктуру. 🔺 Auvik. Облачное ПО предлагает функции сетевого мониторинга, управления ИТ-активами, анализа сетевого трафика, простого мониторинга и устранения неполадок, управления распределенными сайтами и централизованной автоматизации. 🔺 PRTG. Инструмент может контролировать с помощью датчиков сетевые устройства, аппаратное обеспечение, приложения, базы данных, центры обработки данных, узлы виртуализации, серверы SharePoint. Может работать с доступом SNMP для подключения и мониторинга маршрутизаторов, коммутаторов и брандмауэров. 🔺 Nagios. Обеспечивает видимость критически важных сетевых компонентов в режиме реального времени, а также строит карту сети. Можно отслеживать сетевые узлы, службы, протоколы и производительность приложений, обеспечивая выявление и решение проблем на раннем этапе. 🔺 LogicMonitor. Облачная платформа для мониторинга инфраструктуры, сети, серверов, БД, облака, AIOps, а также анализа журналов, производительности приложений (APM) и т.д. 🔺 Zabbix. Бесплатный и опенсорсный инструмент работает как с опросом, так и с перехватом, при этом все отчеты, статистика и параметры конфигурации доступны через веб-интерфейс. Он также может использовать агенты для мониторинга сетевых узлов, где это применимо. 🔺 LibreNMS. Система мониторинга сети с открытым исходным кодом, основана на PHP, NGINX, MySQL / MariaDB. Работает на Linux. Предлагает автоматическое обнаружение сети, настраиваемые оповещения, доступ к API, биллинговую систему, автоматические обновления, распределенный опрос и мобильные приложения. 🔺 Datadog. Обеспечивает сквозную визуализацию производительности сети, производительность прикладного уровня и работоспособность сетевых компонентов. Прост в установке и использовании, имеет удобный интерфейс и предлагает быстрые запросы к журналам.

🚜🚛 blendOS — комбайн Ubuntu, Fedora и Arch Linux в одной системе Операционная система blendOS 23.01 основана на Arch и GNOME на Wayland позволяет использовать приложения из других популярных ОС. В blendOS можно использовать менеджеры пакетов из Arch Linux (pacman), из Fedora — это dnf, а из Ubuntu взяли apt, реализовав это все на контейнерах Distrobox/Podman. При первом запуске пакетных менеджеров Fedora или Ubuntu соответствующие контейнеры создаются автоматически и не требуют дополнительных действий. Вся красота становится доступна при полноценной установке ОС, а еще, разрабы реализовали поддержку изолированных приложений Flatpak. Изучить #новость

🤿🥽📟 TerraVision — это CLI-инструмент, который преобразует код Terraform в Professional Cloud Architecture Diagrams и решает проблему поддержания в актуальном состоянии документов в облачных проектах. Terravision работает на стороне клиента без какой-либо зависимости от Terraform или доступа к облачной среде, чтобы динамически анализировать созданные ресурсы и переменные и автоматически генерировать визуальное представление вашей архитектуры. Terravision разработан как инструмент «Docs as Code» (DaC), который может быть включен в конвейер CI / CD для обновления архитектурных схем после этапов конвейера сборки / тестирования / релиза. В настоящее время он поддерживает AWS, а вскоре Google и Azure cloud. Подробнее #софт

⁉️Реализуем высокую доступность: суперкомпьютер по цене ноутбука? 🔥26.09 в 19:00 (мск) узнайте на бесплатном открытом уроке «Реализуем высокую доступность: суперкомпьютер по цене ноутбука» от OTUS. Преподаватель Сергей Окатов – кандидат физико-математических наук, автор курса “Kotlin Backend Developer.Professional”. На уроке: - обсудим теоретические принципы HA (High Availability, высокой доступности) и как Kubernetes их реализует на практике; - разберем особенности одноплатных контроллеров и установим на них Kubernetes; - выполним настройку Кубера и запустим на нем приложение; - посмотрим устройство кластера на Kubernetes и обсудим некоторые его компоненты. Для участия необходимо подтвердить знания и пройти тестирование. 👉ПРОЙТИ ТЕСТ Занятие пройдёт в рамках курса «Kotlin Backend Developer. Professional». В процессе обучения вы прикоснетесь к большому числу инструментов разработки современных, гибких, высокопроизводительных серверных приложений на языке Kotlin. При покупке курса доступна рассрочка платежа. Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru erid 2VtzqwQLyGe

#memes