DevOps&SRE Library

В прошлый раз было управление спейсами Tarantool со стороны пользователя, в этот раз углубляемся внутрь и разбираемся как устроен движок Vinyl. 🦧 Поверхностное представление о том, что Vinyl работает с диском не дает полного понимания механизмов заложенных внутри для обслуживания кластера. 🤯 Оказывается здесь не классическое B-tree как в реляционных СУБД типа InnoDB в MySQL или Postgress, а LSM-tree со всеми вытекающими. В документации по Vinyl есть исчерпывающее объяснение разницы, но ... Меня интересовали концептуальные механизмы с точки зрения администратора этой СУБД, поэтому в статье разберем: 🧐 Что такое Vinyl 🗂 Из чего состоит файловая структура спейса на Vinyl 🖼 Визуализируем хранилище Vinyl (это пирамида) 📥 Посмотрим как данные перемещаются по пирамиде 🛠 Определим как управлять габаритами пирамиды и на что они влияют 🎡 Какие фоновые процессы обслуживают движок Vinyl 💣 Как работа Vinyl влияет на систему 🪣 Как очистить дерево от старых версий и удаленных кортежей и вообще почему есть в этом необходимость Детали в статье: https://byurrer.ru/tarantool-vinyl P. S. если есть непонятки или я что-то упустил - пишите в комментариях ⬇️

httptap

View the HTTP and HTTPS requests made by any linux program by running httptap -- <command>.

https://github.com/monasticacademy/httptap

⚡️Современные распределённые системы генерируют огромные объёмы данных, а эффективный мониторинг становится залогом стабильной работы. Как построить систему, способную выдерживать большие нагрузки, обрабатывать миллионы метрик в секунду и мгновенно реагировать на аномалии? 🔥11 марта в 20.00 мск приглашаем на открытый урок "Проектирование высоконагруженного мониторинга в распределенных системах", на котором разберем: - лучшие инструменты для сбора и хранения метрик (Prometheus, VictoriaMetrics, Mimir, Thanos и др.); - методы оптимизации: федерация, шардинг, агрегация, сэмплирование; - как минимизировать нагрузку и сократить расходы на хранение данных; - практические кейсы внедрения в highload-проектах. 👉Регистрация https://vk.cc/cJnsHZ Занятие приурочено к старту курса "Observability: мониторинг, логирование, трейсинг", на котором вы научитесь строить эффективные системы мониторинга, работать с Prometheus, Grafana, ELK и другими инструментами, визуализировать метрики. Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, erid: 2VtzqxDdebY

terraform-module-releaser

Simplify the management of Terraform modules in your monorepo with this GitHub Action, designed to automate module-specific versioning and releases. By streamlining the Terraform module release process, this action allows you to manage multiple modules in a single repository while still maintaining independence and flexibility. Additionally, it generates a beautifully crafted wiki for each module, complete with readme information, usage examples, Terraform-docs details, and a full changelog.

https://github.com/techpivot/terraform-module-releaser

Получи доступ к полезной базе знаний для девопса DevOps-инженер, который умеет управлять кластерами в Kubernetes, всегда ценится больше. Yandex Cloud открыл свободный доступ к своей базе знаний с полезными материалами для инженеров. Из них вы узнаете, как автоматизировать процессы, развертывать и масштабировать кластеры на примере DevOps-сервиса от Yandex Cloud. Все материалы останутся у вас навсегда, а изучать их можно в свободном темпе. Теорию подготовили эксперты Yandex Cloud с большим опытом работы в IT-индустрии, а практика состоит из 60 заданий. Подробнее о базе знаний — по ссылке.

Can I TF

As time passes, OpenTofu and Terraform become more distant from each other. CanI.TF helps us to understand their differences quickly.

https://cani.tf

GMonit приглашает на технический вебинар 🗓 Когда: 13 марта, 17:00 (Мск) 🔗 Регистрация по ссылке О чем поговорим: 1️⃣ Как работают head-based и tail-based сэмплирование — плюсы и подводные камни. 2️⃣ Какие алгоритмы помогают снижать нагрузку на инфраструктуру. 3️⃣ Когда оптимизация данных экономит деньги, а когда — создает проблемы. В финале — разбор реальных сценариев и демонстрация сэмплирования в GMonit + QA-сессия. Если ваши системы генерируют тонны логов, метрик и трейсинга — этот вебинар поможет держать их под контролем. 😉 Реклама. ООО "Хайперсофтлаб", ИНН: 9705151703, erid: 2Vtzqw3TDcz

AWS PrivateLink Cross-Region Connectivity

AWS PrivateLink provides a secure method for sharing and accessing services across VPCs and accounts. It ensures that all traffic remains within the AWS network, avoiding exposure to the public internet. Before December 2024, both service providers and consumers were required to be in the same AWS Region. With the launch of native cross-region connectivity for AWS PrivateLink, you can now share and access VPC endpoint services across different Regions.

https://towardsaws.com/aws-privatelink-cross-region-connectivity-5c7db4b1ff7d

Organizing Terraform Code for Scalability and Maintainability

Managing Infrastructure as Code (IaC) at scale is fundamentally different from handling a handful of resources. While getting started with Terraform/OpenTofu is relatively straightforward, maintaining large-scale infrastructure deployments introduces challenges that can’t be solved by simply writing more code. Code organization becomes a critical factor in whether your infrastructure remains manageable or devolves into a maintenance nightmare.

https://terrateam.io/blog/terraform-code-organization

Kubernetes Garbage Collector https://zvlb.github.io/blog/kubernetes-garbage-collector

kubectl-view-secret

Kubernetes CLI plugin to decode Kubernetes secrets

https://github.com/elsesiy/kubectl-view-secret

Устал от легаси в инфраструктуре? Попробуй разные стеки! Ищем middle DevOps-инженера, готового расширять свой стек. В KTS мы работаем с разнообразными технологиями, в облачной и on-premise-инфраструктуре, над проектами разной степени технической зрелости. Пример нашей задачи: спроектировать план бесшовного переезда из on-premise-инфраструктуры в Yandex Cloud и провести его без даунтайма. Готов решать такие задачи? Пиши нашему эйчару и присылай своё резюме! Реклама. ООО "Студия КТС", ИНН: 7733257480, erid: 2Vtzqubaqw4

cyphernetes

A Kubernetes Query Language

https://github.com/AvitalTamir/cyphernetes

awesome-cloud-native

A curated list for awesome cloud native tools, software and tutorials.

https://github.com/rootsongjc/awesome-cloud-native

MetalLB and KinD: Loads Balanced Locally

When You Need LoadBalancer Services On The Go, MetalLB and KinD Are There For You

https://medium.com/@tylerauerbeck/metallb-and-kind-loads-balanced-locally-1992d60111d8

Service Probes https://medium.com/draftkings-engineering/service-probes-905a19104085

Using SimKube 1.0: Comparing Kubernetes Cluster Autoscaler and Karpenter https://blog.appliedcomputing.io/p/using-simkube-10-comparing-kubernetes

A major update on the ingress controller: Migrating to the new nginx-ingress controller https://medium.com/adidoescode/major-update-on-the-ingress-controller-84cbf448e89c

From Chaos to Harmony: A Deep Dive into Centralizing Kubernetes Controller Upgrades https://medium.com/transmit-security-engineering/from-chaos-to-harmony-a-deep-dive-into-centralizing-controller-upgrades-dd57deb1cbec

subtrace

Subtrace is Wireshark for your Docker containers. It lets developers see all incoming and outgoing requests in their backend server so that they can resolve production issues faster.

https://github.com/subtrace/subtrace