DevOps Portal | Linux

Kubeflow — это уже не просто MLOps-платформа. Она развивается в полноценную cloud-native AI-платформу для: • распределённого обучения AI-моделей • дообучения LLM • GenAI-пайплайнов • AI-воркфлоу в Kubernetes Если вы DevOps-инженер и хотите перейти в AI-инфраструктуру, Kubeflow — одна из лучших платформ, которые стоит изучать сегодня. В последних релизах Kubeflow расширилась поддержка GenAI-сценариев, распределённого обучения и современных воркфлоу для AI-платформ. Как лучше всего разобраться? Собрать всё самостоятельно. Вот пошаговый практический гайд, в котором показано, как: ✅ развернуть Kubeflow Pipelines в Kubernetes ✅ создавать пайплайны с помощью Kubeflow SDK ✅ запускать пайплайны и отслеживать их выполнение - https://devopscube.com/setup-kubeflow-pipelines-kubernetes/ Если вы только начинаете знакомство с Kubeflow, сначала изучите этот материал: - https://devopscube.com/kubeflow-pipelines/ 👉 DevOps Portal

Гринатом — ИТ-интегратор Росатома — ищет специалиста технической поддержки пользователей в Москве! ✅Ждём кандидатов с образованием не ниже среднего специального, знанием ОС MS Windows 10 и Linux, Microsoft Office, Active Directory и протокола TCP/IP, навыками работы с мультимедийным ПО и оборудованием, а также опытом настройки первичного конфигурирования и последующей поддержки. 💼Мы предложим официальное трудоустройство, профессиональный рост, ДМС со стоматологией с первого дня и возможность внести вклад в разработку современных ИТ-решений, которыми ежедневно пользуются более 300 тысяч человек.

Webernetes — браузерный симулятор Kubernetes, который позволяет запускать ограниченный набор возможностей Kubernetes, включая Pod, Service и Deployment, полностью в браузере и без какой-либо бэкенд-инфраструктуры. ➜ https://github.com/ngrok/webernetes 👉 DevOps Portal

Я предлагаю только знания. Больше ничего.

Самое время разобраться и начать работать с инструментом для управления контейнерами Podman. Selectel совместно с автором канала Bash Days подготовили бесплатный курс для быстрого старта работы. Что в программе: — База: узнаете об основных командах для работы с контейнерами и сетями, преимуществах и особенностях работы инструмента. — Понятные инструкции: увидите, как работать с зависимостями и переменными окружения, какие бывают типичные ошибки при запуске контейнера. — Практика: развернете инфраструктуру самостоятельно с промокодом на сервисы Selectel. Все уроки и практика уже доступны, проходите в комфортном темпе. 👉Начните обучение: https://slc.tl/r7uso Ищите закреп с подборкой других бесплатных курсов в канале @Selectel и подписывайтесь, чтобы не пропустить новые. Реклама. АО "Селектел". erid:2W5zFH1hkfT

В качестве движка выполнения пайплайнов Kubeflow Pipelines использует Argo Workflows. Это Kubernetes-native движок оркестрации DAG. Что именно это означает? DAG (Directed Acyclic Graph, направленный ациклический граф) описывает задачи и зависимости между ними. Например: - Сначала выполняется задача A - После A запускаются задачи B и C - Задача D запускается только после завершения B и C Самое интересное — как Argo выполняет эти задачи. В большинстве инструментов DAG описываются на Python. В Argo DAG задаётся декларативно в YAML в виде CRD, а каждую задачу Argo выполняет как отдельный Kubernetes Pod. Kubeflow использует Argo Workflows в качестве бэкенда и добавляет поверх него слой для задач AI/ML. При работе с Kubeflow Pipelines вместо того, чтобы напрямую писать YAML-манифесты Argo Workflow, пайплайны нужно описывать в виде DAG на Python. Для ML-команд это значительно удобнее, чем поддерживать сотни строк YAML с Kubernetes CRD. Kubeflow SDK компилирует описание пайплайна на Python в YAML в формате Intermediate Representation (IR). Затем оно преобразуется в специфичное для Argo описание и передаётся на выполнение. 👉 DevOps Portal

DevOps-инструмент недели: HAMi Обычно Kubernetes-кластер выделяет целый GPU под одну рабочую нагрузку. В результате часть ресурсов GPU простаивает. HAMi решает эту проблему. Это опенсорс middleware для Kubernetes, которое позволяет распределять, изолировать и планировать GPU и другие AI-ускорители между Pod’ами без изменений в коде приложения. Что умеет HAMi: - Делит один GPU на несколько частей по объёму памяти, количеству ядер или числу устройств - Задаёт жёсткие лимиты памяти и вычислительных ресурсов для каждой рабочей нагрузки, чтобы один Pod не мог занять ресурсы другого - Оптимально распределяет задачи по GPU: уплотняет их для экономии ресурсов или разносит по разным устройствам, чтобы избежать снижения производительности - Управляет NVIDIA GPU, NPU, DCU, MLU и другими типами ускорителей через единый механизм планирования - Позволяет запускать мультитенантные задачи обучения, инференса и среды с ноутбуками в общем пуле GPU GitHub: https://github.com/Project-HAMi/HAMi @linuxos_tg

Как собрать мультиплатформенный контейнерный образ из отдельных одноплатформенных сборок? Собрать мультиплатформенный образ несложно, когда все его варианты можно описать одним Dockerfile. Но так получается не всегда. Например, если приложение мигрирует с одного стека на другой, а поддержка одной из платформ всё ещё отстаёт, в итоге приходится использовать как минимум два разных Dockerfile и собирать два независимых варианта образа. К счастью, отдельные одноплатформенные сборки можно сшить в один мультиплатформенный образ, аккуратно работая с индексом образа. Разобраться в магии этого процесса можно здесь: https://labs.iximiuz.com/challenges/docker-push-multi-platform-image 👉 DevOps Portal

Прокачайте навыки работы с Kubernetes на реалистичных сценариях:

Создать собственный PriorityClass и назначить его рабочей нагрузке https://labs.iximiuz.com/challenges/create-and-assign-a-custom-priorityclass-to-a-workload-b3699c08 Расширить кластер дополнительным диапазоном Service CIDR для команды разработки https://labs.iximiuz.com/challenges/extend-the-cluster-with-an-additional-service-cidr-for-the-dev-team-5251bc66 Включить отдельные DNS-записи для каждого Pod в Deployment https://labs.iximiuz.com/challenges/enable-per-pod-dns-records-for-deployment-1c6a4201 Разобраться, почему Pod’ы приложения-календаря со списком задач зависли в состоянии Pending https://labs.iximiuz.com/challenges/troubleshoot-why-the-calendar-todo-app-pods-are-stuck-in-pending-9f571aa2 Повторно подключить сохранённый PV с помощью нового PVC и восстановить потерянную базу данных MariaDB https://labs.iximiuz.com/challenges/reclaim-retained-pv-with-new-pvc-and-restore-lost-mariadb-database-783fe3ae Настроить обязательное использование TLS для продакшен-Deployment с Nginx https://labs.iximiuz.com/challenges/enforce-tls-policy-on-production-nginx-deployment-a9190dec Подключить конфигурационный файл, не перезаписывая существующую директорию из образа https://labs.iximiuz.com/challenges/inject-configmap-file-without-overwriting-existing-directory-23bcc10e Закрепить клиента за одним и тем же Pod с помощью Session Affinity в Service https://labs.iximiuz.com/challenges/pin-a-client-to-the-same-pod-using-service-session-affinity-6b19b89f Настроить Health Probes и корректное завершение работы для Kubernetes Deployment https://labs.iximiuz.com/challenges/configure-health-probes-and-graceful-shutdown-kubernetes-deployment-90e57daa

👉 DevOps Portal

На Stepik вышла программа «DevOps с нуля: от Linux до Kubernetes» Это комплексная программа из 5 практических курсов по ключевым технологиям DevOps: Linux, Git, Docker, GitLab CI/CD, Kubernetes Вы последовательно пройдёте путь от работы в Linux и управления кодом через Git до контейнеризации приложений, настройки CI/CD-пайплайнов и развёртывания в Kubernetes. Что вы изучите:

• работу с Linux и командной строкой • Git и контроль версий в реальных проектах • создание Docker-образов и запуск контейнеров • автоматизацию сборки, тестирования и деплоя в GitLab CI/CD • развёртывание и управление приложениями в Kubernetes • сети, хранилища, конфигурации и секреты • диагностику инфраструктуры и автоматизацию рутинных задач ... и многое другое

Все знания закрепляются на практике с помощью заданий с автопроверкой. Материал подаётся последовательно и понятным языком: с примерами, схемами и демонстрациями. Во время обучения можно задавать вопросы по урокам и заданиям, получать обратную связь и помощь при возникновении сложностей. После прохождения программы вы получите сертификат, который можно добавить в резюме. Скидка 20% на 48 часов: по промокоду DEVOPS20 стоимость всей программы составит 10 392 ₽. Открыть программу на Stepik

Небольшой совет по Linux При создании новой директории часто приходится выполнять:

$ mkdir project
$ cd project

Эти два шага можно объединить в одну команду:

$ mkdir app && cd $_

Переменная $_ разворачивается в последний аргумент предыдущей команды, которым в данном случае является app. Небольшой трюк, который позволяет сэкономить несколько нажатий клавиш при работе в терминале 👉 DevOps Portal

В этом репозитории собрано более 20 инструментов, которые автоматически генерируют архитектурные диаграммы Kubernetes на основе манифестов, Helm-чартов или текущего состояния кластера. https://github.com/philippemerle/Awesome-Kubernetes-Architecture-Diagrams 👉 DevOps Portal

Kuber Community Day возвращается 30 июля в Москве все неравнодушные к технологии встречаются на инженерной конференции Kuber Community Day. На сцене выступят практики из Ænix, MWS, «Райффайзенбанка», «СберЗдоровья», «Лаборатории Числитель», «Почтатех», «Инфосистемы Джет», Hilbert Team и других компаний. Что вас ждет: ◾доклады без маркетинга: 30 спикеров расскажут об использовании ИИ в Kubernetes, мониторинге контейнеров, обзоре инструментов экосистемы, получении сертификаций и пр.; ◾мастер-класс по созданию Kubernetes-оператора: в конце все участники задеплоят его в кластер Yandex Managed Kubernetes; ◾arch dating: короткие встречи с опытными специалистами, где можно обсудить технические и карьерные вопросы; ◾научпоп: рассказ о кибернетическом подходе к управлению сложностью от Александра Нозика, директора центра научного программирования. Форматы: офлайн и онлайн. Участие бесплатное, регистрация обязательна.

Linux 101: монтируем диск с уже записанными данными и читаем его содержимое Практика по работе с накопителями в Linux: 1. Найти неподключённый диск 2. Примонтировать его к директории в корневой файловой системе 3. Найти флаг на примонтированном диске Практическое задание: https://labs.iximiuz.com/challenges/storage-simple-mount 👉 DevOps Portal

Компьютерные сети 101: сокеты Лучший способ понять, что такое сокеты и как они работают - написать несколько простых клиент-серверных программ. Хорошая новость: для этого достаточно нескольких строк на Python или Go. А если хочется испытать себя, попробуйте C - кода будет больше, зато вы окажетесь максимально близко к реальному системному API. Несколько задач для практики в безопасном и контролируемом окружении с полезными подсказками:

— Написать простой TCP Echo-сервер https://labs.iximiuz.com/challenges/write-tcp-echo-server — Задача попроще: написать клиент для сервера телеметрии https://labs.iximiuz.com/challenges/write-tcp-client-for-telemetry-server — Задача посложнее: написать клиент для чат-сервера https://labs.iximiuz.com/challenges/write-tcp-client-for-chat-server — Сделать сервер, который работает и с TCP-, и с Unix-сокетами https://labs.iximiuz.com/challenges/write-stream-echo-server

Удачного хакинга! 👉 DevOps Portal

В этом руководстве показано, как построить SaaS-архитектуру с отдельным окружением для каждого пользователя в EKS Auto Mode: один pod, один поддомен и один persistent volume на пользователя, wildcard TLS и общий ALB. ➜ Читайте тут 👉 DevOps Portal

Ingress-nginx уходит в прошлое. С марта 2026 поддержка прекратилась. А что вместо него? Предлагаем посмотреть на Gateway API, новый стандарт Kubernetes SIG. 23 июля в 17:00 старший SRE-инженер MWS Cloud Евгений Макеев на практике покажет: ⚫️ чем маршрутизация Gateway API отличается от Ingress ⚫️ как выбрать контроллер ⚫️ как установить Gateway API в Managed Kubernetes ⚫️ как настроить безопасное подключение через TLS-сертификат Будет полезно для DevOps, платформенным инженерам и разработчикам. Регистрируйтесь по ссылке

Как работает сетевая подсистема контейнеров Большинство Docker-инсталляций и Kubernetes-кластеров используют одинаковую схему сетей на основе мостов. Как лучше всего разобраться, как это устроено? Попробуйте воссоздать такую сетевую конфигурацию с нуля, используя только стандартные Linux-команды: https://labs.iximiuz.com/tutorials/container-networking-from-scratch 👉 DevOps Portal

🤖У нас есть ИИ дома Узнайте, как запустить корпоративный ИИ в собственном контуре за 2 недели Не готовы мириться с ограничениями и дырами в безопасности при использовании публичных ИИ-сервисов, но разворачивать собственную инфраструктуру для инференса долго и тяжело? Присоединяйтесь к вебинару от Selectel и узнайте, как быстро запускать и масштабировать ИИ в собственном контуре без крупных капитальных затрат. В программе вебинара: 🔹Модели развертывания ИИ-инфраструктуры и причины выбора решений на собственной площадке. 🔹Обзор возможностей и сценариев применения нового сервиса AIBox от Selectel, Yandex Cloud и Metamentor — развертывания локального ИИ в контуре клиента на базе серверов Selectel. 🔹Разбор реальных бизнес-кейсов. 📍 Онлайн ⏰ 23 июля в 12:00 Регистрируйтесь и ускорьте внедрение ИИ в компании ➡️ https://slc.tl/satt2 Больше мероприятий для ИТ-специалистов в канале @selectel_events. Подписывайтесь! Реклама. АО "Селектел". erid:2W5zFGaRFyj

Большинство пользователей Kubernetes до сих пор не знают о существовании этого типа томов Он называется ImageVolume. Вот как он работает Функция Image Volume позволяет использовать OCI-образы в качестве томов непосредственно внутри Pod’ов Kubernetes. Что такое OCI-образы? Это стандартизированный формат, который определяет структуру контейнерных образов. С помощью ImageVolume можно хранить в образах файлы моделей, бинарные файлы, конфигурации и другие данные, а затем монтировать их в Pod’ы. Вот практическое руководство, в котором показано, как работает эта функция и как её использовать. Полезная возможность, о которой стоит знать. https://devopscube.com/oci-image-volume-kubernetes-pods/

Примечание: ImageVolume подходит для любых workload’ов, которым удобно поставлять данные внутри образа: файлы моделей, датасеты, конфигурации, статические ресурсы и даже инструменты.

👉 DevOps Portal

Radar обеспечивает наглядное представление Kubernetes-кластера с помощью топологических графов, таймлайнов событий и визуализации трафика между сервисами. Инструмент распространяется в виде одного бинарника, напрямую подключается к Kubernetes API и не требует установки компонентов внутри кластера. ➜ https://github.com/skyhook-io/radar 👉 DevOps Portal