DevOps&SRE Library

Теория + практика: аспирантура по ИИ от Яндекса. В 2024 году компания открывает первую практико-ориентированную аспирантуру по ИИ в ИТМО и НИУ ВШЭ. Молодые ученые получат грант 800 тысяч рублей (ежегодный) и смогут работать над реальными проектами под руководством тимлидов из Yandex Cloud и автономного транспорта. 🧠Что значит теория + практика? Аспиранты будут решать реальные задачи и предлагать решения на базе своих исследований. Какие задачи: улучшение языковых моделей, адаптация YandexGPT, разработка ИИ для промышленности, безопасность автономного транспорта. У каждого будет научный руководитель, исследователь из вуза и проектный руководитель из компании. Кажется, это именно то, что может помочь молодым ученым ускорить внедрение своих исследований в реальные продукты и двигать развитие ИИ вперед.

GPU Virtualization in K8s: Challenges and State of the Art

Kubernetes schedules GPU workloads by assigning a whole device to a single job exclusively. This one-to-one relationship leads to massive GPU underutilization, especially for interactive jobs, characterized by significant idle periods and infrequent bursts of heavy GPU usage. Current solutions enable GPU sharing by statically assigning a fixed slice of GPU memory to each co-located job. These solutions are not suitable for interactive scenarios since the number of co-located jobs is limited by the size of physical GPU memory. Consequently, users must know the GPU memory demand of their jobs before submitting them for execution, which is impractical.

https://www.arrikto.com/blog/gpu-virtualization-in-k8s-challenges-and-state-of-the-art

Летняя распродажа в Слёрме: -50% на все видеокурсы из списка С 17 по 31 июля в Слёрме на все видеокурсы из этого списка скидка 50% по промокоду LETO2024. До старта бизнес-сезона осталось меньше половины лета. Пока на вас не свалилось 500 новых проектов, можно спокойно разобраться в новом инструменте, подходе или методике. Время до сентября — лучшее, чтобы прокачать свой стек 😉 ➡ Доступ к видеоурокам сохранится на 2 года ➡ Вы можете спланировать учёбу на год вперёд, купить дешевле и учиться в любое время ➡ Рассрочка действует и на акционные цены Выбирайте курсы и пойдём учиться! ⚡️ В КАТАЛОГ КУРСОВ ⚡️

Kubernetes Events — News feed of your cluster

Understand Kubernetes Events and learn to use kubectl events to monitor and troubleshoot your cluster’s issues effectively.

https://decisivedevops.com/kubernetes-events-news-feed-of-your-kubernetes-cluster-826e08892d7a

Обеспечьте безопасность вашего кода на С/С++! Присоединяйтесь к открытому вебинару «Безопасная разработка и уязвимости программного кода на С/С++» ⏰ 24 июля в 20:00 мск На уроке вы узнаете о самых распространенных уязвимостях, с которыми сталкиваются программы, написанные на С/С++. Вы поймете, как сделать ваш код на С/С++ менее уязвимым и научитесь использовать инструменты статического и динамического анализа кода. Занятие будет полезно как разработчикам С/С++, которые хотят обеспечить безопасность своего кода, так и инженерам DevOps/DevSecOps. ➡Не упустите возможность узнать о безопасной разработке на С/С++ и защитить код от уязвимостей: https://vk.cc/cyzaft Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, erid: 2VtzqwBPKBQ

Users, Groups, Roles and API Access in Kubernetes

The nuances of how users and groups are configured in Kubernetes and how the role-based access control (RBAC) mechanism applies for them.

https://blog.adityasamant.dev/users-groups-roles-and-api-access-in-kubernetes

Cтаньте мастером безопасного деплоя в Kubernetes и научитесь эффективно управлять секретами с помощью Helm 💛💛💚❤💛❤💛⤵ Приглашаем 25 июля в 20:00 мск на бесплатный вебинар "Эффективное управление секретами в Kubernetes с Helm". Вебинар является бесплатной частью полноценного онлайн-курса «Инфраструктурная платформа на основе Kubernetes». ‼ На вебинаре вы научитесь основам Helm, узнайте, как хранить и управлять секретами в Kubernetes, овладеете методами шифрования переменных и их интеграции с Helm. ➡ Регистрация на вебинар: https://vk.cc/cyz8Z8 ☄ После вебинара вы сможете безопасно деплоить приложения, эффективно шифровать и управлять секретами, освоите лучшие практики защиты данных и получите навыки DevOps-инженера! Записывайтесь сейчас, а мы потом напомним. Участие бесплатно. Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru, erid: 2Vtzqvb1p4i

Argo Events — Event Bus and Webhook

Argo Event is a Kubernetes based event automation engine. It is part of the Argo project. Argo Events can be used with or independent of other projects in Argo. I will be writing a series of articles on Argo Events; in these articles I will be looking at how we can use Argo Event to automate process within and without a Kubernetes cluster. For this first article in this series, we will examine Argo Events core concepts, installation and provisioning different event buses which Argo Event uses to forward events to their sink. Finally we will look at setting up a webhook event flow to verify our setup.

https://medium.chuklee.com/argo-events-event-bus-and-webhook-ac34e5714209

ConfigMap Conundrum: Subtleties of Dynamic Updates in Kubernetes Configurations

Know the differences between ConfigMaps mounted as Volumes and ConfigMaps defined as environment variables.

https://blog.adityasamant.dev/configmap-conundrum-subtleties-of-dynamic-updates-in-kubernetes-configurations

Practical Guide to Kubernetes API https://blog.kubesimplify.com/practical-guide-to-kubernetes-api

Useful git commands for SRE and DevOps engineers https://reliabilityengineering.substack.com/p/useful-git-commands-for-sre-and-devops

A write-ahead log is not a universal part of durability

A database does not need a write-ahead log (WAL) to achieve durability. A database can write its long-term data structure durably to disk before returning to a client. Granted, this is a bad idea! And granted, a WAL is critical for durability by design in most databases. But I think it's helpful to understand WALs by understanding what you could do without them.

https://notes.eatonphil.com/2024-07-01-a-write-ahead-log-is-not-a-universal-part-of-durability.html

⚡Приглашаем 23 июля в 20:00 мск на бесплатный вебинар «Мониторинг в соответствии с DevOps-практиками». Вебинар является бесплатной частью онлайн-курса «DevOps практики и инструменты» от OTUS. ➡ Записаться на вебинар: https://vk.cc/cyvRlW ❗️На этом вебинаре мы поделимся знаниями о следующем: ✅ О видах диагностических данных: логи, метрики, и трейсы. ✅ Какие есть системы на рынке, их особенности и преимущества. Обыкновенный Elastic Stack, новомодный Loki, Prometheus и его заклятый брат VictoriaMetrics, и многое, многое другое. - Тук-тук, к вам алерт! Какой смысл в мониторинге без правил оповещения инженеров? - Как, в конце-концов, выглядит идеальный стек? Какие кирпичики в нём могут быть, чтобы системы хватило надолго? 🤝 Не упустите возможность бесплатно протестировать процесс обучение на курсе + познакомиться с преподавателем и задать ему свои вопросы в режиме онлайн! Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, erid: 2VtzqvJgE3c

Enhancing Netflix Reliability with Service-Level Prioritized Load Shedding

Applying Quality of Service techniques at the application level

https://netflixtechblog.com/enhancing-netflix-reliability-with-service-level-prioritized-load-shedding-e735e6ce8f7d

Счет оплатили. Направляю материалы для размещения: Летний ИТ-фестиваль в Москве «Под открытым небом || кодом» Приглашаем всех, кто умеет отличить SaaS от IaaS, Kubernetes от Docker и не путает SQL с NoSQL и GitLab c GitHub на мероприятие под открытым небом, которое пройдет 24 июля в Москве. Что будем делать: — Открыто говорить о том, что обычно обсуждают в кулуарах. — Делиться успешными кейсами по запуску сервисов. — Разбирать нетривиальные отраслевые ситуации. — Наслаждаться свежим воздухом и июльским солнцем. Для кого это мероприятие? Для широкого круга ИТ-специалистов и сочувствующих, а также всех, кто хочет участвовать в развитии сообщества дата-инженеров и архитекторов инфраструктуры. Принять участие можно как офлайн, так и онлайн. Всех пришедших офлайн ждут приятные бонусы! Участие - БЕСПЛАТНО. Обращаем ваше внимание, что количество мест офлайн ограничено! Подробнее ознакомиться с информацией о мероприятии и его программой можно по ссылке. Спешите зарегистрироваться прямо сейчас!

Is Kubernetes rolling update truly zero downtime? https://medium.com/@chawlajanit/is-kubernetes-rolling-update-truly-zero-downtime-a83103af65a5

Percentile

What is it? Why is it used? And why is it important in the context of optimization and reliability engineering? Bonus: a browser app that lets you play with data.

https://blog.alexewerlof.com/p/percentile

SRE-митап от Т-Банка в Москве Встречу инженеры Т-Банка и Vi.Tech проведут 29 июля в новом офисе T-Space на «Белорусской» (отличная возможность и доклады послушать и новое крутое пространство команды посмотреть!). И вот что они расскажут: — как казаться надежнее без напряга и усилий; — построить хранилище логов если grep вы уже переросли; — понять, что съедает ресурсы в Postgresql и как это прекратить. После докладов — нетворкинг и неформальное общение. А для тех, кто не сможет быть лично, будет трансляция. 📆 Встречаемся 29 июля в Москве. Не забудьте зарегистрироваться erid:2VtzqunxahP Реклама. АО "Тинькофф Банк", ИНН 7710140679, лицензия ЦБ РФ № 2673

Terraform at LumApps

We have : - 15 terragrunt.hcl files for every service. - Around 900 terragrunt.hcl files (15*60) in total.

Part 1: https://medium.com/lumapps-engineering/terraform-at-lumapps-part-1-f37660b4ed95 Part 2: https://medium.com/lumapps-engineering/terraform-at-lumapps-part-2-27494897def4 Part 3: https://medium.com/lumapps-engineering/terraform-at-lumapps-part-3-daa3c869f0f4

Нижний Новгород, встречаемся 24 июля на IT Talk by Sber! Мы проведём технологический митап для всех IT-support специалистов и экспертов надёжности. Поговорим об инженерных процессах, улучшении качества IT-поддержки и автоматизации работы с помощью программных решений. Спикеры и темы ⤵️ ✔️ Дмитрий Цуканов, руководитель команды сопровождения SmartContact — «Отказ от Legacy-стандартов. Как мы строили свой SRE?» ✔️ Молчанов Василий, ведущий инженер по сопровождению, Баюсова Ирина, исполнительный директор — «ML OPS: как мы используем ML для улучшения систем мониторинга?» ✔️ Руслан Насимов, руководитель Центра управления сетью Сбера — «Как управлять сетью крупнейшей компании?» ✔️ Наталья Ерютова, корпоративный тренер Сбера — «Управление собой для IT-шников». Адрес: co-working Garage, г. Нижний Новгород, Октябрьская, 35. Регистрируйтесь и приходите 24 июля в 18:00! ⏰