DevOps&SRE Library

Как обеспечить безопасность в Docker контейнерах? 💻Расскажет Senior DevOps Engineer Андрей Бирюков на бесплатном практическом уроке от OTUS, где вы вместе с экспертом обсудите: - разбор практик безопасной сборки, тестирования и Run-Time защиты Docker контейнеров; - Docker Security топ-10 лучших практик; - обзор Cloud Native Buildpacks. 👉Встречаемся 14 февраля в 20:00 мск в рамках курса «Внедрение и работа в DevSecOps». Пройдите короткий тест прямо сейчас, чтобы занять место на уроке и получить запись: https://vk.cc/cusVAH Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru, erid: 2VtzqwCsJ5N

Using LocalStack and GitHub Actions to Test Terraform AWS Deployments https://medium.com/@robbiedouglas/using-localstack-and-github-actions-to-test-terraform-aws-deployments-0a119dcff7c2

✨ Отус приглашает 15 февраля в 20:00 мск на бесплатный вебинар «Роль Apache Kafka в логировании». Вебинар является частью продвинутого онлайн-курса "Observability: мониторинг, логирование, трейсинг". ➡ Регистрация на вебинар: https://vk.cc/cur9DR 🤝 На вебинаре мы разберём: - роль брокера в Kafka; - как Kafka интегрируется в общую систему сбора данных; - индексы в Kafka; - взаимодействие с общим стеком логирования. Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru, erid: 2VtzqxNkEQp

Why Distributed Systems Fail?

Distributed systems are tricky - it's easy to make wrong assumptions that lead to problems down the road. Back in the 90s, computer scientist L. Peter Deutsch identified several common misconceptions, or "fallacies," that trip up engineers working on distributed systems. Surprisingly these fallacies are still relevant today: 1. The Network is Reliable: It's risky to assume networks are 100% reliable. Networks can and do fail in various ways. 2. Latency is Zero: While we might wish our networks had no latency, that's simply not physically possible - even light takes time to travel distances. Ignoring the inevitable delay in data transmission can lead to unrealistic expectations of system performance. 3. Bandwidth is Infinite: This overlooks the physical and practical limitations on data transfer rates. 4. The Network is Secure: No wonder Security is a growing industry. Assuming inherent security can lead to vulnerabilities and oversight in protective measures. 5. Topology Doesn't Change: This neglects the dynamic nature of network configurations. 6. There is One Administrator: A simplification that fails to consider the complexity of managing distributed systems. 7. Transport Cost is Zero: Overlooking the resources required for data movement. 8. The Network is Homogeneous: Ignoring the diversity in network systems and standards. These fallacies, if not recognized and addressed, can lead to design flaws, performance issues, and security vulnerabilities in distributed systems. In the following sections, we will break down each of these misconceptions, exploring their implications and how to mitigate the risks they pose in real-world applications.

P1: https://www.codereliant.io/why-distributed-systems-fail-1 P2: https://www.codereliant.io/why-distributed-systems-fail-2

RabbitMQ vs Kafka — какой брокер выбрать? Расскажет Максим Иванов на бесплатном практическом уроке от OTUS, где вы узнаете: - что может и как работает Kafka; - что может и как устроен RabbitMQ (классические очереди); - что может и как устроен RabbitMQ streams; - слабые, сильные стороны и технические ограничения RabbitMQ и Kafka. Встречаемся 20 февраля в 20:00 мск в рамках курса «RabbitMQ для разработчиков и администраторов». Доступна рассрочка на обучение! Регистрируйтесь прямо сейчас, чтобы посетить бесплатный урок и получить запись: https://vk.cc/cur84i Реклама. ООО «ОТУС ОНЛАЙН-ОБРАЗОВАНИЕ». ИНН 9705100963, erid: 2Vtzqvtasct

kubernetes-image-puller

Kubernetes Image Puller is used for caching images on a cluster. It creates a DaemonSet downloading and running the relevant container images on each node.

https://github.com/che-incubator/kubernetes-image-puller

uptrace

Open source APM: OpenTelemetry traces, metrics, and logs

https://github.com/uptrace/uptrace

Как повысить надежность и безопасность вашей инфраструктуры с помощью собственного Certificate Authority? Узнайте на бесплатном практическом уроке «Vault PKI строим собственный Certificate Authority (CA)» от OTUS. На вебинаре разберём: 1. Что такое Certificate Authority (CA). Познакомимся с Hashicorp Vault, какой функционал он имеет и как его применять 2. Познакомимся с Vault PKI. Внедрим инфраструктуру открытых ключей и построим свой центр сертификации Занятие пройдёт 13 февраля в 20:00 мск и будет приурочено к старту курса «Administrator Linux. Professional». Осталось меньше половины мест. Доступна рассрочка на обучение! Пройдите короткое тестирование прямо сейчас, чтобы занять место на открытом уроке и получить запись: https://vk.cc/cupjUc Реклама. ООО «ОТУС ОНЛАЙН-ОБРАЗОВАНИЕ». ИНН 9705100963, erid: 2VtzqwZck2c

Loki's new TSDB Index https://lokidex.com/posts/tsdb

Viacheslav Biriukov - SRE deep dive into Linux Page Cache

In this series of articles, I would like to talk about Linux Page Cache. I believe that the following knowledge of the theory and tools is essential and crucial for every SRE. This understanding can help both in usual and routine everyday DevOps-like tasks and in emergency debugging and firefighting.

https://biriukov.dev/docs/page-cache/0-linux-page-cache-for-sre

12 Factor CLI Apps

At Heroku, we’ve come up with a methodology called the 12 factor app. It’s a set of principles designed to make great web applications that are easy to maintain. In that spirit, here are 12 CLI factors to keep in mind when building your next CLI application. Following these principles will offer CLI UX that users will love.

https://medium.com/@jdxcode/12-factor-cli-apps-dd3c227a0e46

42 things I learned from building a production database https://maheshba.bitbucket.io/blog/2021/10/19/42Things.html

The state of Kubernetes jobs in 2023 Q4

Kubernetes Job market trends for Q4 2023

https://kube.careers/state-of-kubernetes-jobs-2023-q4

wal-listener

A service that helps implement the Event-Driven architecture. To maintain the consistency of data in the system, we will use transactional messaging - publishing events in a single transaction with a domain model change. The service allows you to subscribe to changes in the PostgreSQL database using its logical decoding capability and publish them to the NATS Streaming server.

https://github.com/ihippik/wal-listener

The Bun Shell

The Bun Shell is a new experimental embedded language and interpreter in Bun that allows you to run cross-platform shell scripts in JavaScript & TypeScript.

https://bun.sh/blog/the-bun-shell

heynote

Heynote is a dedicated scratchpad for developers. It functions as a large persistent text buffer where you can write down anything you like. Works great for that Slack message you don't want to accidentally send, a JSON response from an API you're working with, notes from a meeting, your daily to-do list, etc.

https://github.com/heyman/heynote

zed

Code at the speed of thought – Zed is a high-performance, multiplayer code editor from the creators of Atom and Tree-sitter.

https://github.com/zed-industries/zed

Вебинар Tarantool «Строим кэши и витрины данных» Когда: 8 февраля, 16:00 МСК Где: онлайн Узнайте, как быстро и удобно разрабатывать кэши и витрины данных на основе коробочной СУБД для ускорения ИТ-систем — регистрируйтесь и подключайтесь к вебинару 8 февраля в 16:00 МСК. Поговорим о следующем: • Как быстро «из коробки» запустить, настроить и наполнить данными кластерную базу данных. Покажем демо Tarantool DB. • Как выполнять CRUD-операции с данными на языке бизнес-приложения. • Как обеспечить сохранность данных при кэшировании. • Как обеспечить горизонтальное масштабирование без ущерба для производительности. Также рассмотрим опыт крупных банков и телекома в создании хранилищ сессий, витрин для платежных данных, валютных операций и т. д. Спикеры: • Руслан Галиев, менеджер продукта Tarantool DB • Артем Дубинин, старший программист Tarantool • Евгений Афанасьев, архитектор Tarantool Вебинар будет полезен архитекторам, инженерам DevOps и разработчикам высоконагруженных систем. Регистрация

k8e

Kubernetes Easy Engine(k8e)🚀 is a lightweight, scalable enterprise-grade Kubernetes distribution that allows users to manage, protect and obtain out-of-the-box Kubernetes clusters in a unified manner. It is suitable for enterprise environments.

https://github.com/xiaods/k8e

kluctl

Kluctl is the missing glue that puts together your (and any third-party) deployments into one large declarative Kubernetes deployment, while making it fully manageable (deploy, diff, prune, delete, ...) via one unified command line interface.

https://github.com/kluctl/kluctl