en
Feedback

Don't get caught by a cheater! Telemetrio finds and tags such channels 👉 If you want to see the tag, subscribe

Сохранёнки программиста

Сохранёнки программиста

Open in Telegram

Заметки и ссылки на будущее, чтобы изучить когда будет время. Разместить рекламу: @tproger_sales_bot Правила общения: https://tprg.ru/rules Другие каналы: @tproger_channels Другие наши проекты: https://tprg.ru/med

Show more
6 441
Subscribers
-224 hours
-107 days
-5930 days
Posts Archive
🖥 Как сравнить две команды, если первый запуск всегда медленнее Два инструмента обрабатывают один файл. В первый раз команда читает данные с диска, а при повторе часть данных уже может лежать в кеше ОС. Один запуск каждой команды легко даст случайного победителя. Для сравнения повторных запусков в hyperfine можно задать прогрев:
hyperfine --warmup 3 --runs 10 \
  'gzip -c data.json > /dev/null' \
  'pigz -c data.json > /dev/null'
hyperfine сначала прогонит каждую команду три раза для прогрева, затем выполнит десять замеров. В этом примере вывод уходит в /dev/null, поэтому время записи архива на диск в сравнение не попадает. Если важно, как быстро команда отработает при первом запуске, сделайте для него отдельный тест. Уберите прогрев и задайте одинаковое начальное состояние перед каждым замером. У hyperfine для этого есть --prepare. Руководство hyperfine
18 Nov, 04:11

🖥 Как одним вызовом curl увидеть, где задержался ответ Запрос занял секунду. Чтобы понять, где она ушла, попросите curl вывести время нескольких этапов.
curl -sS -o /dev/null \
  -w 'DNS: %{time_namelookup}s\nTCP: %{time_connect}s\nTLS: %{time_appconnect}s\nПервый байт: %{time_starttransfer}s\nВсего: %{time_total}s\n' \
  https://example.com/
Все отметки идут от начала запроса. Например, если TCP показывает 0,08, а TLS — 0,15, между ними прошло около 70 мс. Разница между первым байтом и полным временем показывает, сколько заняла оставшаяся передача ответа. Если первый байт приходит поздно, это повод посмотреть, что происходит после соединения. По одному этому числу время работы сервера отдельно от сети не определить. Параметры --write-out в руководстве curl
18 Nov, 00:04

🖥 Почему 200 мелких запросов могут нормально работать в SQLite На ревью увидели запрос внутри цикла и предложили собрать всё в один JOIN. Для отдельного сервера базы это часто хорошая идея: каждый запрос может означать ещё одну поездку по сети. SQLite обычно работает внутри самого приложения. Запрос передаётся вызовом функции. Отдельного сетевого обмена для каждой строки здесь нет. Команда SQLite приводит пример Fossil: при построении страницы с историей изменений приложение может выполнить порядка 200 SQL-запросов. Это даёт свободу оставить несколько простых запросов, когда с ними код понятнее. Смотрите на время построения страницы и работу самих запросов. Если каждый из них заново сканирует большую таблицу, отсутствие сети ситуацию не спасёт. Разбор команды SQLite на примере Fossil
17 Nov, 04:11

🖥 Как найти коммит, после которого начал падать тест На прошлом релизе тест проходил. На текущей ветке падает. Между ними десятки коммитов. Если сбой воспроизводится одной командой, перебор можно поручить Git.
git bisect start
git bisect bad HEAD
git bisect good v1.8.0
git bisect run pytest -q tests/test_checkout.py
git bisect reset
Git возьмёт коммит из середины диапазона, запустит тест и сузит поиск по коду завершения. Когда найдёт первый плохой коммит, выведет его хеш. git bisect reset вернёт вас на исходную ветку. Перед запуском проверьте команду на обеих границах. Если на старом теге теста ещё нет или проект не собирается, Git может принять ошибку запуска за искомый сбой. Для таких коммитов можно вернуть код 125 из проверочного скрипта, и bisect их пропустит. Документация Git
17 Nov, 00:04

🖥 Что сравнить, прежде чем менять раннер GitHub Actions Сборка тормозит. Кажется, пора брать раннер побыстрее. Откройте лог последнего прогона и посмотрите, где ушло время: на компиляцию, скачивание зависимостей или восстановление кеша. В ноябрьском срезе RunsOn три нагрузки — Rust, TypeScript и Docker — заняли на Avrea 7 минут 3 секунды против 18 минут 34 секунд на GitHub. Сравнивали x64-раннеры с четырьмя vCPU и выключенными кешами сборки. В цифры вошло время шагов сборки. Ожидание в очереди считалось отдельно. Для восстановления кеша был отдельный тест. Один и тот же файл на 4 ГБ восстановился за 11 секунд на Avrea и 46 секунд на GitHub. Этот результат пригодится, если ваш пайплайн часто работает с кешем. Для выбора раннера возьмите шаг, который дольше всего идёт у вас, и сравните его в одинаковых условиях. Сравнение провёл RunsOn, поставщик раннеров. Разбор результатов опубликовала Avrea, один из участников теста. Оригинал с условиями и ссылками на тесты
16 Nov, 04:11

🖥 Три инструмента для JSON, который не помещается на экране API вернул огромный JSON. Иногда нужно вытащить два поля, а иногда ещё непонятно, где искать. Вот три инструмента под разные задачи. • jq пригодится, если путь к данным уже известен. Например, jq -r '.items[].id' response.json выведет ID из массива items. Такой фильтр удобно сохранить в скрипте. Руководство jq • jless — когда сначала надо понять структуру ответа. Откройте jless response.json и сворачивайте целые ветки, пока не доберётесь до нужного объекта. Документация jless • fx — когда после просмотра хочется сразу преобразовать данные. Откройте файл в интерактивном режиме, а для преобразования передайте JavaScript-выражение. Например, fx response.json '.items.map(x => x.id)' соберёт массив ID. Документация fx
16 Nov, 00:05

🖥 Как CNCF Score защитил сборку и публикацию контейнерных образов Подписанный релиз начинается раньше публикации. В проекте CNCF Score проверили базовые образы, сканирование зависимостей и доступ сборочного процесса к реестру. Команда использует минимальные базовые образы и проверяет результат сборки через Docker Scout. Для подписи релизов она описывает работу с OIDC, где сборочный процесс подтверждает свою личность на время операции. Возьмите один образ проекта и проследите цепочку от Dockerfile до опубликованного артефакта. Отметьте, где проверяется состав и какие полномочия получает процесс публикации. Как устроена поставка образов Score
15 Nov, 04:11

🖥 Как найти уязвимый Pillow, если он пришёл через другую библиотеку Pillow может попасть в приложение как зависимость другой
🖥 Как найти уязвимый Pillow, если он пришёл через другую библиотеку Pillow может попасть в приложение как зависимость другой библиотеки. Поэтому проверка только прямого списка пакетов может пропустить его. CVE-2026-112900 затрагивает обработку EPS в версиях Pillow до 13.0.0 начиная с 2.6.0. Сначала проверьте, какая версия реально установлена в собранном образе:
python -m pip show Pillow
Затем найдите зависимость, которая подтягивает пакет, и обновите сборку. Если Pillow установлен пакетом операционной системы, сверяйтесь с бюллетенем дистрибутива: исправление может быть перенесено в его версию. Разбор GitLab и ссылки на бюллетени
15 Nov, 00:02

🖥 Sentry MCP помогает выяснить, почему часть событий не дошла до поиска События нет в поиске Sentry. Сначала полезно проверить, было ли оно принято и почему могло быть отброшено. В октябрьском обновлении Sentry MCP добавились сведения об отброшенных событиях и отдельные инструменты поиска для разных наборов данных. Логи можно искать по регулярным выражениям. Для расследования задайте проект и короткий интервал вокруг известной ошибки. Затем отдельно проверьте логи и причины отбрасывания событий. Это поможет отличить проблему доставки от запроса, который просто ничего не нашёл. Что изменилось в Sentry MCP
14 Nov, 04:11

🖥 Как найти задержку, которая прячется внутри базы данных Приложение ждёт ответ базы 200 мс. Из этого числа пока не видно, г
🖥 Как найти задержку, которая прячется внутри базы данных Приложение ждёт ответ базы 200 мс. Из этого числа пока не видно, где ушло время: в дороге до сервера, ожидании внутри базы или обработке запроса. Начните с пары измерений. Сравните время на стороне клиента с тем, что наблюдает сама база. Затем проверьте дисковый ввод-вывод. В облачной базе накопитель может находиться на другом сервере. Чтение страницы, которой нет в памяти, тогда добавляет ещё один сетевой обмен, уже внутри самой базы. Так проще выбрать следующую проверку. Например, оптимизация плана поможет только той части задержки, которая приходится на выполнение запроса. Разбор задержек PlanetScale
14 Nov, 00:05

🖥 Grafana связывает сервисы с их владельцами и контекстом расследования По трассировке видно, какой сервис отвечает медленно
🖥 Grafana связывает сервисы с их владельцами и контекстом расследования По трассировке видно, какой сервис отвечает медленно. Следующий шаг часто занимает не меньше времени: найти команду, которая знает этот компонент. В Grafana Cloud карту связей можно дополнить владельцами сервисов и сведениями из каталога. Во время инцидента полезно видеть владельца рядом с зависимостями, логами и метриками. Начните с одного важного пути, например оформления заказа. Проверьте, что у каждого сервиса указаны команда, ссылка на инструкцию и актуальный канал связи. Карта связей и владельцы сервисов в Grafana Cloud
13 Nov, 04:11

🖥 Когда для запуска ИИ-агента нужна отдельная микро-ВМ Контейнер использует ядро системы, на которой запущен. Микро-ВМ запускает собственное ядро. Это меняет границу изоляции, когда ИИ-агент может запускать команды и скачивать зависимости. При выборе среды посмотрите, какой код будет выполняться и какие ресурсы ему нужны. Если задача требует запускать команды из внешнего репозитория, проверьте, какие каталоги, токены и сетевые адреса доступны из среды. Микро-ВМ сама по себе не определяет, какие данные вы ей передаёте. Разбор Docker об изоляции агентов
13 Nov, 00:03

🖥 ClickHouse 26.10 может выгружать большие наборы из IN-подзапросов на диск Когда запрос содержит IN (SELECT ...), ClickHous
🖥 ClickHouse 26.10 может выгружать большие наборы из IN-подзапросов на диск Когда запрос содержит IN (SELECT ...), ClickHouse строит набор значений для проверки. Большой набор может не поместиться в память. В ClickHouse 26.10 набор можно частично выгрузить на диск. Порог задаёт max_bytes_before_external_set. Например, к запросу можно добавить:
SETTINGS max_bytes_before_external_set = 134217728
При 128 МиБ движок начинает выгрузку. Общий расход памяти может быть выше: запросу нужны и другие структуры. Сравните пиковую память, время и объём записи на диск на своей нагрузке. Пример с выгрузкой набора в ClickHouse
12 Nov, 04:11

🖥 PostgreSQL 19 позволяет перепаковывать таблицу с сохранением обычных чтений и записей В PostgreSQL 19 появился REPACK для перепаковки таблиц. С CONCURRENTLY чтения и записи могут продолжаться во время основной части работы.
REPACK (CONCURRENTLY) public.events;
Под конец PostgreSQL берёт исключительную блокировку, чтобы применить накопившиеся изменения и подменить файлы. Проверьте на тестовой нагрузке, сколько ждёт эта блокировка и сколько места занимает операция. Отдельно проверьте долгие транзакции: снимок, взятый до начала перепаковки, после её завершения может увидеть таблицу пустой. Команда описана в документации к PostgreSQL 19. В этой подборке разбираем её на релиз-кандидате. Изменения в PostgreSQL 19 · Справочник REPACK
12 Nov, 00:02

🖥 Zero Wire собирает описание критической уязвимости и наблюдаемые атаки в одном месте После публикации критического CVE нуж
🖥 Zero Wire собирает описание критической уязвимости и наблюдаемые атаки в одном месте После публикации критического CVE нужно быстро понять, какие версии затронуты, что обновлять и наблюдаются ли попытки эксплуатации. Cloudflare запустила Zero Wire — раздел Radar с объяснениями уязвимостей, данными об атаках и шагами исправления. Сводка помогает начать проверку и перейти к техническим подробностям. Телеметрия показывает активность, которую видит Cloudflare. Для решения о срочности сопоставьте её со своей конфигурацией: версией компонента, доступностью извне и установленными мерами защиты. Сохраните сервис рядом с источниками уведомлений об уязвимостях. При инциденте сверяйте рекомендации с бюллетенем разработчика и фиксируйте, где именно у вас используется затронутый компонент.
11 Nov, 04:11

🖥 Общая папка, worktree и клон дают агенту разную степень независимости Способ подключения репозитория к агенту влияет на то
🖥 Общая папка, worktree и клон дают агенту разную степень независимости Способ подключения репозитория к агенту влияет на то, какие файлы он меняет и как его работа пересекается с вашей. В разборе Docker Sandboxes сравниваются три варианта. Общая папка даёт доступ к текущим файлам. Git worktree создаёт отдельное рабочее дерево с общей историей репозитория. Клон получает собственную копию репозитория. Для параллельных задач проверьте ещё каталоги сборки, зависимости и генерируемые файлы. Отдельная ветка сама по себе их не изолирует. Выберите способ подготовки среды и сохраните его в команде запуска. Вместе с ним зафиксируйте установку зависимостей, запуск проверок и перенос результата на ревью.
11 Nov, 00:02

🖥 Отдельная реплика PostgreSQL помогает изолировать тяжёлые запросы Аналитический запрос читает большую таблицу и конкурируе
🖥 Отдельная реплика PostgreSQL помогает изолировать тяжёлые запросы Аналитический запрос читает большую таблицу и конкурирует за ресурсы с пользовательскими операциями. Для таких запросов можно выделить отдельную реплику. PlanetScale разобрала управление репликами PostgreSQL: каждой можно назначить свой размер и подключение. Одну использовать для аналитики, другую — для векторного поиска. Реплики получают изменения асинхронно. При маршрутизации запросов нужно определить, где допустима задержка данных, а где требуется самое свежее состояние. Начните с отчётов и длительных выборок. Измерьте отставание реплики, время выполнения и влияние на основную базу. Для каждого сценария задайте допустимую свежесть результата.
10 Nov, 04:11

🖥 Отдельный локальный проект Supabase позволяет агентам независимо менять базу Два агента работают в разных ветках, но подкл
🖥 Отдельный локальный проект Supabase позволяет агентам независимо менять базу Два агента работают в разных ветках, но подключены к одной локальной базе. Один меняет таблицу, второй запускает тесты на прежней схеме. Результат начинает зависеть от порядка действий. В руководстве Supabase показано, как выделить каждому агенту собственный локальный проект. Есть варианты запуска с Docker и без него. Так у каждой задачи появляются независимые данные и состояние базы. Агент может применять миграции и сбрасывать тестовое окружение в пределах своего проекта. Добавьте подготовку базы в создание рабочей среды. Зафиксируйте начальные данные, способ запуска и очистку после завершения задачи. Тесты должны явно получать адрес своей базы.
10 Nov, 00:01

🖥 pg-delta строит изменения PostgreSQL из описания желаемой схемы В проекте растёт история SQL-миграций. Чтобы понять текуще
🖥 pg-delta строит изменения PostgreSQL из описания желаемой схемы В проекте растёт история SQL-миграций. Чтобы понять текущее устройство базы, приходится восстанавливать его по десяткам файлов. При декларативном подходе вы храните желаемую схему в SQL-файлах. Инструмент сравнивает её с текущим состоянием и готовит изменения для перехода. В разборе Declarative Schemas 2.0 показана работа pg-delta: от описания объектов до получения миграции. Сначала попробуйте подход на локальной базе. Просмотрите сгенерированный SQL, проверьте удаление и переименование объектов, затем прогоните миграцию на копии с данными. Полученный план стоит ревьюить вместе с изменением схемы.
09 Nov, 04:11

🖥 OrioleDB использует undo-журнал для хранения предыдущих версий строк PostgreSQL В PostgreSQL частые обновления создают ста
🖥 OrioleDB использует undo-журнал для хранения предыдущих версий строк PostgreSQL В PostgreSQL частые обновления создают старые версии строк. Их очистка и накопление влияют на размер таблиц и работу базы. OrioleDB предлагает другой механизм хранения: прежние версии данных размещаются в undo-журнале. Проект также использует собственную организацию таблиц и индексов. В разборе публичной беты показано, как движок работает с таблицами, в которых много обновлений, и какие изменения это вносит в эксплуатацию PostgreSQL. Для знакомства выберите таблицу с характерной нагрузкой и воспроизведите её отдельно. Измеряйте размер данных, задержки, поведение длительных транзакций и восстановление после сбоя. Проект находится в публичной бете.
09 Nov, 00:03