fa
Feedback

فریب کلاهبرداران را نخورید! تل‌متریو این کانال‌ها را شناسایی و برچسب‌گذاری می‌کند 👉 برای مشاهده برچسب، اشتراک تهیه کنید

Пятничный деплой

Пятничный деплой

رفتن به کانال در Telegram

Подборка ссылок, статей и постов из мира DevOps\SRE\разработки. Если вы хотите прислать фидбек, интересную статью или просто поболтать пишите @count0ru https://t.me/s/count0_digest

نمایش بیشتر
4 823
مشترکین
+124 ساعت
+37 روز
+1930 روز

در حال بارگذاری داده‌ها

جذب مشترکین
نوامبر '26
نوامبر '26
+33
در 0 کانال‌ها
اکتبر '26
+102
در 0 کانال‌ها
Get PRO
سپتامبر '26
+50
در 0 کانال‌ها
Get PRO
اوت '26
+55
در 0 کانال‌ها
Get PRO
ژوئیه '26
+57
در 0 کانال‌ها
Get PRO
ژوئن '26
+78
در 0 کانال‌ها
Get PRO
مه '26
+86
در 0 کانال‌ها
Get PRO
آوریل '26
+114
در 0 کانال‌ها
Get PRO
مارس '26
+127
در 9 کانال‌ها
Get PRO
فوریه '26
+67
در 0 کانال‌ها
Get PRO
ژانویه '26
+46
در 0 کانال‌ها
Get PRO
دسامبر '25
+46
در 0 کانال‌ها
Get PRO
نوامبر '25
+56
در 1 کانال‌ها
Get PRO
اکتبر '25
+49
در 0 کانال‌ها
Get PRO
سپتامبر '25
+44
در 1 کانال‌ها
Get PRO
اوت '25
+55
در 0 کانال‌ها
Get PRO
ژوئیه '25
+58
در 0 کانال‌ها
Get PRO
ژوئن '25
+53
در 0 کانال‌ها
Get PRO
مه '25
+48
در 0 کانال‌ها
Get PRO
آوریل '25
+62
در 1 کانال‌ها
Get PRO
مارس '25
+82
در 0 کانال‌ها
Get PRO
فوریه '25
+50
در 0 کانال‌ها
Get PRO
ژانویه '25
+88
در 1 کانال‌ها
Get PRO
دسامبر '24
+82
در 0 کانال‌ها
Get PRO
نوامبر '24
+126
در 4 کانال‌ها
Get PRO
اکتبر '24
+110
در 1 کانال‌ها
Get PRO
سپتامبر '24
+74
در 0 کانال‌ها
Get PRO
اوت '24
+73
در 0 کانال‌ها
Get PRO
ژوئیه '24
+87
در 0 کانال‌ها
Get PRO
ژوئن '24
+87
در 1 کانال‌ها
Get PRO
مه '24
+94
در 0 کانال‌ها
Get PRO
آوریل '24
+112
در 0 کانال‌ها
Get PRO
مارس '24
+113
در 0 کانال‌ها
Get PRO
فوریه '24
+106
در 1 کانال‌ها
Get PRO
ژانویه '24
+131
در 0 کانال‌ها
Get PRO
دسامبر '23
+101
در 1 کانال‌ها
Get PRO
نوامبر '23
+177
در 1 کانال‌ها
Get PRO
اکتبر '23
+21
در 0 کانال‌ها
Get PRO
سپتامبر '23
+45
در 0 کانال‌ها
Get PRO
اوت '23
+42
در 0 کانال‌ها
Get PRO
ژوئیه '23
+50
در 0 کانال‌ها
Get PRO
ژوئن '23
+44
در 0 کانال‌ها
Get PRO
مه '23
+32
در 0 کانال‌ها
Get PRO
آوریل '23
+24
در 0 کانال‌ها
Get PRO
مارس '23
+32
در 0 کانال‌ها
Get PRO
فوریه '23
+29
در 0 کانال‌ها
Get PRO
ژانویه '23
+27
در 0 کانال‌ها
Get PRO
دسامبر '22
+31
در 0 کانال‌ها
Get PRO
نوامبر '22
+30
در 0 کانال‌ها
Get PRO
اکتبر '22
+32
در 0 کانال‌ها
Get PRO
سپتامبر '22
+42
در 0 کانال‌ها
Get PRO
اوت '22
+53
در 0 کانال‌ها
Get PRO
ژوئیه '22
+39
در 0 کانال‌ها
Get PRO
ژوئن '22
+46
در 0 کانال‌ها
Get PRO
مه '22
+37
در 0 کانال‌ها
Get PRO
آوریل '22
+35
در 0 کانال‌ها
Get PRO
مارس '22
+24
در 0 کانال‌ها
Get PRO
فوریه '22
+32
در 0 کانال‌ها
Get PRO
ژانویه '22
+55
در 0 کانال‌ها
Get PRO
دسامبر '21
+55
در 0 کانال‌ها
Get PRO
نوامبر '21
+71
در 0 کانال‌ها
Get PRO
اکتبر '21
+59
در 0 کانال‌ها
Get PRO
سپتامبر '21
+71
در 0 کانال‌ها
Get PRO
اوت '21
+75
در 0 کانال‌ها
Get PRO
ژوئیه '21
+44
در 0 کانال‌ها
Get PRO
ژوئن '21
+78
در 0 کانال‌ها
Get PRO
مه '21
+32
در 0 کانال‌ها
Get PRO
آوریل '21
+91
در 0 کانال‌ها
Get PRO
مارس '21
+66
در 0 کانال‌ها
Get PRO
فوریه '21
+82
در 0 کانال‌ها
Get PRO
ژانویه '21
+67
در 0 کانال‌ها
Get PRO
دسامبر '20
+2 821
در 0 کانال‌ها
تاریخ
رشد مشترکین
اشارات
کانال‌ها
15 نوامبر+1
14 نوامبر+2
13 نوامبر+1
12 نوامبر0
11 نوامبر0
10 نوامبر+2
09 نوامبر+4
08 نوامبر+3
07 نوامبر+6
06 نوامبر+3
05 نوامبر+2
04 نوامبر+2
03 نوامبر+6
02 نوامبر+1
01 نوامبر0
پست‌های کانال
Когда ты уже станешь настоящим DevOps? Открываешь вакансию: Linux, Docker, Kubernetes, CI/CD, сети… Закрываешь вакансию. Полгода учишься и всё ещё не понимаешь: «А меня уже возьмут?» Проверь это в бесплатном тесте Pigeon Careers. За 4–5 минут узнаешь: ✅ что уже знаешь ✅ где пробелы ✅ что учить дальше ✅ сколько примерно осталось до первой работы Можно также сравнить DevOps с аналитикой и Python. Без покупки курса и многочасовых лекций. Кстати, Pigeon Careers помогли устроиться 20+ ребятам за последний год. Средний оффер — 245к. Пройти тест: @test

2
Как превратить Python-скрипт на VPS в нормальный сервис nohup, screen и надежда на то, что скрипт никогда не упадёт, — не лучший вариант для эксплуатации. В этой статье рассказывается, как организовать запуск небольших Python-приложений средствами самого Linux — без Docker, Supervisor и отдельной системы мониторинга. В статье разобраны: 🚀 запуск и автоматический перезапуск через systemd; 🚀 хранение секретов и ограничение прав процесса; 🚀 сбор и ротация логов с помощью journald; уведомления о сбоях в Telegram вместе с фрагментом журнала; 🚀 запуск задач по расписанию через systemd timers вместо cron. Читать на Хабре @usr_bin_linux
805
3
Видели ли вы, какую чушь можно достать из логов, пропустив их через ИИ? Привет, киты 🐋! Если вы уже пробовали подключать MCP и анализировать логи в поиске корреляций, то для вас не будет открытием, что плохие логи ИИ понимает точно так же плохо, как и люди. Когда ваше приложение в контексте логов именовано "я-сервис-в-продовой-среде-1", а в метриках "я-сервис", то ИИ начнет додумывать. Большинство LLM учили через поощрение, потому они научены хорошо угадывать и будут пытаться это сделать, даже если реальных данных нет. Качество данных играет ключевую роль. Но что вообще такое "качественные данные" для ИИ в Observability? Качественные данные - это сигнал, обладающий следующими внутренними свойствами: - Структурированность: строгая схема хранения, предсказуемые типы и названия полей - Консистентность: идентичная идентификация сущности во всех сигналах - Контекстность: наличие resource-атрибутов, привязка к бизнес-домену - Чистота: отсутствие мусора, корректное агрегирование повторяющихся событий В сигналах надежности, как и у человека, так и ИИ, должен быть надежный способ идентификации источника сигналов. Чтобы все понимали - это вот то самое "оно". Я составил небольшой чеклист, как проверить, что ваши системы Observability готовы к работе с ИИ, на основе опыта эксплуатации системы c ClickStack + ClickStack MCP. AI-Ready Observability Checklist Помогает понять, готова ли ваша инфраструктура наблюдаемости к ИИ-аналитике. - [ ] Единая идентификация: сервис называется одинаково в логах, метриках и трейсах. Никаких расхождений - [ ] Структурированность в хранилище: логи сохраняются по единой, известной ИИ структуре, даже если в источнике они были неструктурированным текстом - [ ] Семантичность: имена полей в логах, имена в метриках, атрибуты спанов хорошо известны ИИ (например, OpenTelemetry SemConv + наш внутренний словарь "что есть что") - [ ] Коррелируемость: сигналы наблюдаемости (логи, метрики, трейсы) могут быть связаны хотя бы по одному ключу (trace_id, request_id, correlation_id или комбинация service_name + временное окно) - [ ] Единый стандарт уровней: все уровни логирования приведены к стандарту OpenTelemetry (DEBUG/INFO/WARN/ERROR/FATAL) Главная проблема для ИИ не в вычислении, а в двусмысленности, когда один сервис шлет level: 3, а другой severity: "err". Четкий маппинг в стандартные строки (INFO/WARN/ERROR) устраняет эту неопределенность - [ ] Дедупликация с сохранением счетчиков: повторяющиеся события агрегированы с сохранением счетчика (count), чтобы ИИ видел аномалии частоты, не расходуя контекстное окно на тысячи одинаковых строк - [ ] Семантическое разделение: бизнес-события (например, payment_failed) и технические ошибки имеют разные теги или поля (например, event.domain). Это позволяет ИИ строить причинно-следственные связи, а не галлюцинировать о влиянии стек-трейса на выручку - [ ] Resource-атрибуты: каждый лог содержит контекст окружения, хоста, версии приложения (например, из OpenTelemetry SemConv) Все пункты критичны. Качество данных для ИИ - это не шкала от 1 до 10, а цепочка. Если выпадает одно критическое звено (например, нет способа корреляции или имена полей непонятные), механизм автоматической корреляции рушится. В этот момент ИИ перестает анализировать и начинает галлюцинировать, а вы платите за токены впустую. Какой из этих пунктов у вас сейчас вызывает наибольшую боль при подготовке данных для ИИ-аналитики? И сталкивались ли вы с тем, что ИИ начинал додумывать из-за несогласованности имен полей логов? #SRE #observability #ИИ #AI #DataQuality #ClickHouse #MCP #логи
837
4
Ваше общение и работа зависят от чужих облаков? Верните контроль над данными компании. Любой сбой в инфраструктуре провайдера
Ваше общение и работа зависят от чужих облаков? Верните контроль над данными компании. Любой сбой в инфраструктуре провайдера, изменение правил или уязвимость в чужом облаке мгновенно блокируют работу компании и доступ к корпоративным данным. Для бизнеса это недопустимый риск. Compass — корпоративный мессенджер, который разворачивается прямо на вашем сервере. 🔹 Полная автономность: сервер и данные под вашим полным управлением. 🔹 Интеграция с вашей инфраструктурой: связка с AD/SSO, DLP и SEIM для контроля доступов. 🔹 Все рабочие процессы в одном месте: привычные чаты, треды, реакции и встроенные видеоконференции на 1000+ человек. Можно быстро развернуть на своем сервере, в том числе с помощью агентов. Бесплатный тестовый период для команд любого размера. Попробовать Compass в деле: https://getcompass.ru
849
5
Почему SRE надо знать всякое: прод стоит на структурах данных Привет, %username%! Тут у меня возникла мысль, что структуры данных и алгоритмы для SRE — это не столько про LeetCode и собеседования, сколько про понимание того, почему наш любимый прод внезапно начинает тормозить или вообще отваливается. Ведь если задуматься, мы каждый день эксплуатируем хеш-таблицы, деревья, списки и прочие алгоритмические конструкции. Просто называем их conntrack, iptables, PostgreSQL, Redis или Prometheus. Решил покопаться в этой теме и написал довольно большой материал о том, почему инженеру эксплуатации полезно понимать, что происходит под капотом привычных инструментов. Что получилось разобрать: - Как структуры данных влияют на производительность Linux, Kubernetes, баз данных и мониторинга; - Почему сложность алгоритмов — это вопрос не только разработки, но и capacity planning; - Как ошибки в алгоритмах приводили к реальным инцидентам у Stack Overflow, Cloudflare и даже GTA Online; - Зачем нужны consistent hashing, Bloom Filter, HyperLogLog и где они встречаются в инфраструктуре; - Как всё это проверить самостоятельно — с воспроизводимой лабораторией, бенчмарками и командами для диагностики. Главная мысль довольно простая: SRE не обязан уметь писать красно-чёрное дерево с нуля, но понимать, почему система деградирует при росте нагрузки, — очень даже полезный навык. Получился лонгрид примерно на 32 минуты чтения. С конкретными примерами, замерами и некоторым количеством моего традиционного занудства. Читать статью: https://jtprog.ru/posts/sre-data-structures/ А теперь интересно послушать тебя: сталкивался ли ты с ситуацией, когда причиной инцидента оказалась не конфигурация или инфраструктура, а алгоритмическая сложность? И насколько глубоко, по-твоему, SRE вообще стоит погружаться в алгоритмы? Го обсуждать в комментариях! #SRE #DevOps #Algorithms #DataStructures #Performance #Linux #Kubernetes #PostgreSQL #Observability #Reliability #IncidentManagement Мишка на сервере — про надёжность, инциденты и инженерную практику
837
6
MinIO Is Deprecated: Best Alternatives for S3-Compatible Storage Долгие годы MinIO считался стандартным выбором для развёртыв
MinIO Is Deprecated: Best Alternatives for S3-Compatible Storage Долгие годы MinIO считался стандартным выбором для развёртывания S3-совместимого хранилища в собственной инфраструктуре. После архивации upstream-репозитория и прекращения привычной модели лицензирования неплохо было бы задуматься о будущем своих инсталляций. В статье разбираются три возможные альтернативы — Garage, RustFS и SeaweedFS — и объясняется, для каких архитектур и нагрузок подходит каждая из них. Читать статью на Medium @usr_bin_linux
1 080
7
Binance опубликовал первый разбор взлома 29 октября. Ушло $6,34 млрд, из них $2,85 млрд заморожено или перехвачено. ФБР показывает на КНДР. Биржа обещает покрыть потери сама и уверяет, что 98% токенов уже восполнила. Отчёт предварительный, но читать его стоит не ради цифр. Хронология: — Июнь. Инженер из команды кошельков ищет в поисковике, как поставить популярный ИИ-инструмент для кода, и скачивает поддельный Homebrew. Безопасники это ловят, меняют ему компьютер, перевыпускают доступы. Молодцы. Только хакеры уже знают, кто в Binance занимается кошельками. — Сентябрь. Другому инженеру на легальной площадке по поиску работы пишет "директор проекта". Первое собеседование с "HR" по видео (для доверия тот показывает соцсеть с личными фото). Второе с "CEO" несуществующей компании. В конце тестовое задание: скачать репозиторий. На рабочий компьютер. Код срабатывает при установке, подменяет pyenv, защита молчит: 0-day. — 20 октября. Через этот компьютер и внутренний ИИ-инструмент хакеры получают контроль над двумя инженерами кошельков (как именно, Binance не уточняет). Один из них тот самый, июньский. С новым компьютером и новыми паролями. И с токеном на развёртывание контейнеров. — 29 октября. Контейнер, скрипт, доступ к сервису подписи кошельков. Ключи красть уже незачем, если кассир сам подписывает всё, что ему подносят. С 20:05 по 20:09 UTC пять горячих кошельков отдают 233 млн XRP. Дальше SOL и OP, и только потом внутреннее оповещение. Следом 18 270 BTC. Теперь для гуманитариев (и для меня, я не настоящий криптан). Через EIP-7702 хакеры выписали своему смарт-контракту частичные права на горячий кошелёк. Это доверенность на счёт. Binance закрывает вывод, то есть отделение банка, а доверенность лежит в блокчейне и в отделении не нуждается. Отозвать её должен владелец счёта. А кошелёк на MPC (Multi-Party Computation) — способ подписывать транзакции так, что полного приватного ключа нигде нет, ни на одном сервере и ни у одного человека. Схема, которая защищает от кражи ключа, не дала быстро отозвать доверенность. Пришлось на ходу делать отдельную процедуру. Последний перевод прошёл в 23:56 UTC, доверенность обнулили в 00:10. Четыре часа с небольшим. Короткий вывод. Криптографию никто не ломал. Поисковик, собеседование, тестовое задание, внутренний ассистент. Binance пишет, что с начала года отбил 57 атак, которые связывает с Северной Кореей, но хватило одной пропущенной. Теперь про "корейских хакеров". ФБР называет группу TraderTraitor, но свои доказательства, судя по прессе, не раскрывает. Улики аналитиков косвенные: деньги смешались со средствами взлома Bitget, почерк похож на Bybit. Версия правдоподобная (КНДР в этом бизнесе давно). Но посмотрите, как она всем удобна: — Binance: проиграть государству не так стыдно, как объяснять, почему токен развёртывания лежал на компьютере инженера. — ФБР: метка Lazarus делает адреса токсичными для бирж и сервисов, а деньги отмываются прямо сейчас и не нужно никаких судов, доказывать что-то. — Аналитикам: реклама. — СМИ: готовый заголовок. А в открытом суде это почти наверняка никто проверять не будет. Подсудимого не привезут, а опровержению из Пхеньяна никто не поверит. Собственно, я не спорю, что это могла быть КНДР. Беда в том, что вопрос "кто" вытесняет вопрос "как". А тот же путь через собеседование и инструменты разработчика сработает для кого угодно. https://x.com/binance/article/2117626126214504729
1 223
8
Как давать негативный фидбек Одно из самых сложных в работе для – давать негативный фидбек. С позитивным все легко и просто,
Как давать негативный фидбек Одно из самых сложных в работе для – давать негативный фидбек. С позитивным все легко и просто, ведь хвалить людей всегда приятно. А критиковать как-то неуютно, таких разговоров хочется избежать. Мол, откуда вообще у меня право говорить человеку, как ему жить? Обычно фидбек дают на встречах 1-1. Чтобы сотрудник прислушался, надо доносить проблему максимально точно: ты не вложился в оценку -> поехали сроки -> заказчик недоволен. Если говорить общими фразами и полунамеками, есть большой шанс, что тебя не услышат. С другой стороны, важно не задеть чувства человека. Чтобы ему не показалось, что его отчитывают как школьника за невыполненную домашку. Есть разные техники, которые помогают справиться с этим балансом, например, бутерброд или BOFF. Мне понравились принципы, которые использует Нетфликс, потому что они короткие и простые. Всего 2 совета для тех, кто дает фидбек и 2 для принимающей стороны. Когда даешь фидбек: ▫️Стремись помочь. Критикуй с искренним желанием сделать мир лучше. ▫️Предлагай конкретные шаги. Объясняй, что именно человек сделал не так, какой был негативный эффект и как его можно было избежать. Когда получаешь фидбек: ▫️Будь благодарен за обратную связь. Когда слышишь негатив, твоя естественная реакция - начать оправдываться и защищаться. Ее надо побороть и вспомнить про пункт 1. ▫️Не всем советам обязательно следовать. Некоторые из них могу быть действительно "мимо". Только тебе решать к каким прислушаться.
1 040
9
Вот положу на всякий случай в пятничную ночь
872
10
Команда Ghostty выпустила на его основе мультиплексер Rex. Это как tmux, только сделанный нормально: ничего настраивать не надо, все просто работает. Можно двигать панельки туда-сюда, раскладывать их, сессии создавать. Можно подключаться к удаленным машинам, сессии на них работают абсолютно прозрачно, вплоть до лайаута. Есть даже CLI чтобы двигать окошки, и можно об этом просить своего агента. Сразу скажу: не буду жаловаться. Рекс очень приятный. Так-то и Гостти был отличный, хотя казалось бы: чем один терминальный эмулятор отличается от другого? Такая же сетка с буквами, как и везде, особо не разгуляешься. Ну рендерится быстро, но они все сегодня рендерятся _достаточно_ быстро. И тем не менее он набрал юзер-базу за счет _чего-то_. Я не могу до конца сформулировать, чего, но просто ощущение приятной и аккуратно сделанной вещи. Видимо, складывается из мелочей, которые особо и не спланируешь. Просто нужно быть вот таким вот человеком, у которого вот такой вот вкус, и если долго и упорно работать, будет получаться. Так вот. Рекс. Он, как ни странно, еще приятнее! Хотя, казалось бы, это все еще терминал! Что там можно улучшить? Буквы как-то особенно более красиво не порендеришь. Но что-то они добавляют в этот софтваре, от чего чувствуется кайфец. Я люблю жаловаться на засилие скругленных прямоугольников во всем, но тут даже скругленные табы радуют. Как? Почему? Просто сложили те же стандартные компоненты, которые есть у Эпла, только в нормальном порядке. Пропорции, визуальная иерархия, стабильность, шум. Если поставить рядом Сафари, то Сафари это просто Квазимодо какой-то по сравнению с Рексом. Зис нидс то би стадиед. Всякие детали типа иконок для кучи популярных CLI програм (шелл, нода, агенты) из коробки. Плавная, пиксель-точная прокрутка с нативной инерцией (в терминале! Слава тебе богу, ура, алилуйя!). Tasteful темки. Гостти по сравнению с Рексом ощущается уже как динозавр из прошлого. Хотя совсем недавно был пиком терминальных эмуляторов. Ну и, понятно, всякие фишечки типа соединения нескольких машин, интеграция с агентами, все это просто работает и настраивается одной-двумя галочками. КАК И ДОЛЖНО БЫТЬ. Короче, опять получилось. Давно я не смотрел на программу и не думал: блин, а она выглядит симпатично. Не «по современным меркам», не «со скидкой на жидкое стекло и абсолютно отвратительный платформ дирекшн от Эпла», а просто симпатично, без скидок. Я бы без шуток пользовался, потому что мне просто нравится. Ну а теперь ложка дегтя. Терминал это хорошо, но что ты в нем будешь запускать? Правильно, агентов. Агенты это странный гибрид текствого и терминалього УИ, одинаково плохие в обоих. Если использовать дефолтный режим, то все что они тебе навыводили выше текущего экрана покораптится при первом же ресайзе на 1 пиксель (а это, между прочим, основной value proposition мультиплексера: заходить на удаленные машины с ноута, у которого по определению другое разрешение экрана). Если использовать «фулскрин» рендеринг, например, в Клоде, то сразу идет нафиг плавная прокрутка и, например, поиск по тексту. И даже так полноэкранный режим в Клоде все равно работает с божьей помощью. Короче, клиент для терминала реально хороший, а вот все что ты в нем запускаешь ограничено терминалом. И это проблема. Другая проблема это что терминальные окна это все-таки вещь временная, а сессии хотелось бы хранить подольше. Убирать с глаз, архивировать, но хранить. Иногда нет-нет да нужно вернуться. С третьей стороны при работе с агентами терминал тоже нужен. Нет-нет надо что-то запустить, чтобы оно висело, или что-то попробовать. Вопрос только, кто из них главный, и как их скрестить. Короче, счастья нет, я перепробовал уже кажется все оркестраторы (Клод десктоп, T3, BB, Paseo, Conductor, кто там еще бывает). Пока удобно не стало. Rex подошел ближе всего к «хм, приятно, я бы мог так жить». Но запускать в нем я ничего не хочу. Так что единственный урок тут — попробовать понять, в чем их secret sauce и положить в копилочку. Агенты разберутся.
923
11
kividb KiviDB is a fast, multi-threaded alternative to Redis® and Valkey, written in Rust. It speaks the Redis protocol (RESP2 and RESP3), so existing Redis clients, redis-cli and libraries work unchanged, and it has full-text and vector search built in. It runs every core on a sharded in-memory key-value design, and persists to snapshots and an optional append-only file. https://github.com/kividbio/kividb
1 069
12
Пулер PgDoorman: больше запросов, меньше ожидания Разработчики команды Ozon Tech выкатили в опенсорс свой многопоточный пулер
Пулер PgDoorman: больше запросов, меньше ожидания Разработчики команды Ozon Tech выкатили в опенсорс свой многопоточный пулер соединений PostgreSQL. В опубликованных тестах он показывает производительность в 4 раза выше PgBouncer. Кэширование подготовленных запросов, fallback через Patroni и другие преимущества смотрите на страничке пулера: https://ozon.tech/pg_doorman
1
13
Пулер PgDoorman: больше запросов, меньше ожидания Разработчики команды Ozon Tech выкатили в опенсорс свой многопоточный пулер
Пулер PgDoorman: больше запросов, меньше ожидания Разработчики команды Ozon Tech выкатили в опенсорс свой многопоточный пулер соединений PostgreSQL. В опубликованных тестах он показывает производительность в 4 раза выше PgBouncer. Кэширование подготовленных запросов, fallback через Patroni и другие преимущества смотрите на страничке пулера: https://ozon.tech/pg_doorman
1 260
14
Concurrency принципы в СУБД. Что общего у базы данных и кода приложения? Долгие месяцы мы как только не препарировали потоки, мьютексы и семафоры. И часто задавались вопросом - а зачем оно такое нужно? Где за пределами программирования применяются подобные идеи. Попробую сегодня провести параллели с СУБД - неотъемлеой частью современного программирования. Для повышения эффективности программ были придуманы потоки и мультиядерные процессоры. И как мы помним программа это комбинация данных и инструкций для работы над ними. И вот данные часто у потоков общие. А железо из коробки не гарантирует консистентности при обращении к общей памяти из разных потоков. Для этого были придуманы атомики, мьютексы. Кажется, проблема решена. Следующий этап - количество данных растет и не помещается в RAM. Нам нужно обращаться к внешнему устройству (локальный жесткий диск, внешняя система). На первый взгляд - можно обойтись мьютексом на уровне процесса и запрещать конкурентные запросы к одному и тому же ресурсу и проблема решена. Да, но мьютекс / атомик живет внутри процесса, а процессов может быть больше чем 1, с ростом нагрузки. Нужно делать блокировку о которой могут знать несколько процессов в рамках машины. Сложно, но можно. Что делать когда одной машины недостаточно С ростом нагрузки процессы могут как на одной машине так и на расстоянии сотен километров. И это блокер. Распределенный мьютекс становится такой же внешней системой как и источник данных. Наше прошлое решение теряет смысл. Оно и так казалось странным, а сейчас вообще похоже на сумасшествие. Какие дальнейшие варианты развития событий? Интуиция подсказывает - для упрощения пусть сам источник данных гарантирует корректность и синхронизацию обращений к самому себе. Concurrency в OLTP СУБД Популярным БД так или иначе потребовалось внедрять примитивы синхронизации, на основе того что я описал выше. Документация PostgreSQL исчерпывающая можете взглянуть сами и увидеть в каких местах и сценариях нужны локи. Переносятся ли проблемы Concurrency на уровень СУБД? СУБД по умолчанию как и компьютер, исполняет инструкции так чтобы работало максимально быстро. А если хочется консистентно - нужно платить цену и шлифовать. При этом даже внедряя примитивы мы не только платим перформансом но и пополняем варианты возможных дефеков в системе. Рассмотрим популярные проблемы concurrency и прикинем, возможны ли они на уровне БД и как решаются: - Race Condiiton - присутствует по умолчанию, лечится с помощью SELECT FOR UPDATE. - Reordering, Memory visibility - присутствует по умолчанию, уровни изоляции помогают достигать консистентности. - Deadlock - присутствует по умолчанию, deadlock_detector помогает с обнаружением. Вы могли заметить что перечисленные проблемы целиком и полностью относятся к блокирующей синхронизации. Это связано с тем что PostgreSQL повторяет ту же механику что и Mutex в классическом коде и называется этот подход - пессимистичная блокировка. Скорее всего вы не один и ни два раза встречали его в продакшне, поэтому делитесь в комментариях своим опытом, какие баги ловили, как лечили? Следующий пост будет посвящен альтернативному механизму достижения согласованности на уровне СУБД.
1 318
15
18 ноября пройдёт Positive AppSec Conf — бесплатная конференция Positive Technologies по безопасной разработке. Формат гибрид
18 ноября пройдёт Positive AppSec Conf — бесплатная конференция Positive Technologies по безопасной разработке. Формат гибридный: офлайн в Кибердоме и онлайн-трансляция. Практики AppSec и DevSecOps обсудят: 🤖 Как пользоваться ИИ-ассистентами и не выкатить сгенерированную уязвимость в прод 🔍 Какие SAST/DAST/IaC-сканеры в пайплайне реально снижают риски, а какие только блокируют релизы ложными срабатываниями и генерят отчёты для аудита ⛓️ Почему одна скомпрометированная open-source-зависимость бьёт по сотням компаний сразу и как снизить этот риск 😎 Почему количество найденных уязвимостей — плохая метрика и как оценивать реальную эксплуатируемость и риск для бизнеса Конференция будет полезна разработчикам, DevOps- и DevSecOps-инженерам, AppSec-специалистам и техническим директорам. Регистрируйтесь заранее: заявки проходят подтверждение. 🗓 18 ноября, Кибердом (м. Улица 1905 года) + онлайн Зарегистрироваться
1 111
16
Choosing Between ClickStack and Grafana for ClickHouse Observability Кажется, в observability снова выбор без выбора: Grafana
Choosing Between ClickStack and Grafana for ClickHouse Observability Кажется, в observability снова выбор без выбора: Grafana или ClickStack? Статья разбирает вопрос выбора на примере ClickHouse. Если ClickHouse — центральное хранилище телеметрии, а инженеры чаще расследуют инциденты, чем смотрят на заранее созданные графики, авторы предлагают смотреть в сторону ClickStack: поиск, корреляция логов, метрик и трейсов, session replay и отдельный акцент на AI/SRE-агентов через MCP. Grafana остаётся сильнее там, где инфраструктура неоднородная: Prometheus, ClickHouse и ещё десяток источников, которые нужно собрать на одном дашборде, добавить алертинг и не заставлять команду менять привычные процессы. Так как статья опубликована в блоге Clickhouse, практичный вывод напрашивается сам собой: «А зачем выбирать?» Grafana можно оставить для дашбордов и мониторинга, а ClickStack использовать для глубоких расследований по данным ClickHouse. Причём данные и ingestion pipeline дублировать не придётся. Как вам такой подход? Ссылка на статью 📱 Telegram | 📲 MAX
1 140
17
https://blog.gitbutler.com/but-cli Вот это прикольно
1 107
18
⚡️ Онлайн-митап IT_ONE: Между кодом и продом Три прикладных доклада для тех, кто отвечает за стабильность инфраструктуры. Обс
⚡️ Онлайн-митап IT_ONE: Между кодом и продом   Три прикладных доклада для тех, кто отвечает за стабильность инфраструктуры. Обсудим на встрече защиту Helm-чартов от некорректных данных, научим писать надежные проверки на helm-unittest и разберем развертывание собственной LLM-модели без лимитов на токены. 12 ноября 18:00 (мск), онлайн Регистрация: по ссылке   Приглашаем разработчиков, DevOps-, QA- и SRE-инженеров, тимлидов и архитекторов.   В программе митапа — три выступления: 1️⃣ Персональный ИИ своими руками. Руслан Кашафутдинов расскажет, как развернуть свою ИИ-модель и работать без квот облачных сервисов. 2️⃣ Helm-чарты: когда они действительно нужны. Виталий Перваков разберет защиту от некорректных данных и сравнит инструменты проверки конфигураций. 3️⃣ Стабильные unit-тесты для Helm-чартов. Андрей Слатимов покажет, как с помощью helm-unittest находить ошибки шаблонизации и проверять обратную совместимость.   Приходи со своими рабочими вопросами — можно будет обсудить их с экспертами. Авторы лучших вопросов получат мерч IT_ONE: футболку, стикеры и плед. 📎 Всем зарегистрированным участникам после митапа отправим презентации спикеров и другие полезные материалы. Регистрируйся до 11 ноября, 23:59 (мск)
1 162
19
Команда DevCrowd* запустила второе исследование инженеров, которые отвечают за надёжность: SRE, DevOps, платформенных инженер
Команда DevCrowd* запустила второе исследование инженеров, которые отвечают за надёжность: SRE, DevOps, платформенных инженеров и всех, кто держит прод в строю. В этом году главный сюжет — как меняется роль в эпоху AI. Смотрят на то, что уже автоматизируется, а что, наоборот, дорожает: пускают ли AI действовать в проде и где проходит граница доверия, добавляет ли сгенерированный код новых инцидентов, и что остается исключительно работой человека, когда рутину забирает машина. Отдельный блок про soft skills: какие навыки SRE-специалисты считают важными, в каких проседают и что не заменит AI. Не обошли и человеческую цену надежности: сколько стоят дежурства по времени, деньгам и здоровью и на ком в команде реально концентрируется нагрузка. Часть вопросов повторяет прошлогодний опрос, так что по грейдам, зонам ответственности и рынку будет видна динамика, а не разовый срез. Опрос анонимный на 12 минут. Отчет обещают уже декабре. 🌐 Принять участие: https://survey.devcrowd.ru/sre-2026 *DevCrowd — независи
1 100
20
بدون متن...
925