Machine Learning World
Відкрити в Telegram
The best of Machine Learning World @devs_world - the best materials for developers Our fund instagram to help homeless animals: https://www.instagram.com/ukraineanimalhelp/ Contacts: @anikishaev | creotiv@gmail.com
Показати більше📈 Аналітичний огляд Telegram-каналу Machine Learning World
Канал Machine Learning World (@ml_world) у мовному сегменті Англійська є активним учасником. На даний момент спільнота об'єднує 11 128 підписників, посідаючи 10 703 місце в категорії Технології та додатки та 5 336 місце у регіоні Україна.
📊 Показники аудиторії та динаміка
З моменту свого створення невідомо, проект продемонстрував стрімке зростання, зібравши аудиторію у 11 128 підписників.
За останніми даними від 19 вересня, 2026, канал демонструє стабільну активність. Хоча за останні 30 днів спостерігається зміна кількості учасників на -104, а за останні 24 години на 0, загальне охоплення залишається високим.
- Статус верифікації: Не верифікований
- Рівень залученості (ER): Середній показник залученості аудиторії становить 3.07%. Протягом перших 24 годин після публікації контент зазвичай збирає 1.64% реакцій від загальної кількості підписників.
- Охоплення публікацій: В середньому кожен допис отримує 341 переглядів. Протягом першої доби публікація в середньому набирає 183 переглядів.
- Реакції та взаємодія: Аудиторія активно підтримує контент: середня кількість реакцій на один пост – 2.
- Тематичні інтереси: Контент зосереджений навколо ключових тем, таких як andevhowto, gpt-4, архитектура, зібрати, even.
📝 Опис та контентна політика
Автор описує ресурс як майданчик для висловлення суб'єктивної думки:
“The best of Machine Learning World
@devs_world - the best materials for developers
Our fund instagram to help homeless animals: https://www.instagram.com/ukraineanimalhelp/
Contacts: @anikishaev | creotiv@gmail.com”
Завдяки високій частоті оновлень (останні дані отримано 20 вересня, 2026), канал підтримує актуальність та високий рівень охоплення публікацій. Аналітика показує, що аудиторія активно взаємодіє з контентом, що робить його важливою точкою впливу в категорії Технології та додатки.
11 128
Підписники
Немає даних24 години
-157 днів
-10430 днів
Триває завантаження даних...
Схожі канали
Хмара тегів
Вхідні та вихідні згадування
---
---
---
---
---
---
Залучення підписників
вересень '26
вересень '26
+26
в 0 каналах
серпень '26
+18
в 0 каналах
Get PRO
липень '26
+14
в 0 каналах
Get PRO
червень '26
+23
в 0 каналах
Get PRO
травень '26
+42
в 0 каналах
Get PRO
квітень '26
+14
в 0 каналах
Get PRO
березень '26
+14
в 0 каналах
Get PRO
лютий '26
+16
в 0 каналах
Get PRO
січень '26
+19
в 0 каналах
Get PRO
грудень '25
+59
в 0 каналах
Get PRO
листопад '25
+58
в 0 каналах
Get PRO
жовтень '25
+142
в 0 каналах
Get PRO
вересень '25
+161
в 0 каналах
Get PRO
серпень '25
+94
в 0 каналах
Get PRO
липень '25
+161
в 0 каналах
Get PRO
червень '25
+92
в 0 каналах
Get PRO
травень '25
+65
в 0 каналах
Get PRO
квітень '25
+84
в 0 каналах
Get PRO
березень '25
+103
в 0 каналах
Get PRO
лютий '25
+52
в 0 каналах
Get PRO
січень '25
+38
в 0 каналах
Get PRO
грудень '24
+53
в 0 каналах
Get PRO
листопад '24
+11
в 0 каналах
Get PRO
жовтень '24
+21
в 0 каналах
Get PRO
вересень '24
+19
в 0 каналах
Get PRO
серпень '24
+9
в 0 каналах
Get PRO
липень '24
+30
в 0 каналах
Get PRO
червень '24
+28
в 0 каналах
Get PRO
травень '24
+141
в 1 каналах
Get PRO
квітень '24
+153
в 1 каналах
Get PRO
березень '24
+99
в 0 каналах
Get PRO
лютий '24
+90
в 0 каналах
Get PRO
січень '24
+139
в 0 каналах
Get PRO
грудень '23
+165
в 0 каналах
Get PRO
листопад '23
+167
в 0 каналах
Get PRO
жовтень '23
+185
в 0 каналах
Get PRO
вересень '23
+213
в 0 каналах
Get PRO
серпень '23
+160
в 0 каналах
Get PRO
липень '23
+275
в 0 каналах
Get PRO
червень '23
+336
в 0 каналах
Get PRO
травень '23
+489
в 0 каналах
Get PRO
квітень '23
+422
в 0 каналах
Get PRO
березень '23
+394
в 0 каналах
Get PRO
лютий '23
+352
в 0 каналах
Get PRO
січень '23
+408
в 0 каналах
Get PRO
грудень '22
+370
в 0 каналах
Get PRO
листопад '22
+375
в 0 каналах
Get PRO
жовтень '22
+200
в 0 каналах
Get PRO
вересень '22
+219
в 0 каналах
Get PRO
серпень '22
+177
в 0 каналах
Get PRO
липень '22
+254
в 0 каналах
Get PRO
червень '22
+221
в 0 каналах
Get PRO
травень '22
+303
в 0 каналах
Get PRO
квітень '22
+175
в 0 каналах
Get PRO
березень '22
+194
в 0 каналах
Get PRO
лютий '22
+133
в 0 каналах
Get PRO
січень '22
+189
в 0 каналах
Get PRO
грудень '21
+209
в 0 каналах
Get PRO
листопад '21
+164
в 0 каналах
Get PRO
жовтень '21
+240
в 0 каналах
Get PRO
вересень '21
+190
в 0 каналах
Get PRO
серпень '21
+229
в 0 каналах
Get PRO
липень '21
+200
в 0 каналах
Get PRO
червень '21
+235
в 0 каналах
Get PRO
травень '21
+223
в 0 каналах
Get PRO
квітень '21
+255
в 0 каналах
Get PRO
березень '21
+324
в 0 каналах
Get PRO
лютий '21
+244
в 0 каналах
Get PRO
січень '21
+393
в 0 каналах
Get PRO
грудень '20
+11 541
в 0 каналах
| Дата | Залучення підписників | Згадування | Канали | |
| 20 вересня | +5 | |||
| 19 вересня | +1 | |||
| 18 вересня | 0 | |||
| 17 вересня | 0 | |||
| 16 вересня | +1 | |||
| 15 вересня | +3 | |||
| 14 вересня | +7 | |||
| 13 вересня | +2 | |||
| 12 вересня | 0 | |||
| 11 вересня | 0 | |||
| 10 вересня | 0 | |||
| 09 вересня | 0 | |||
| 08 вересня | +3 | |||
| 07 вересня | 0 | |||
| 06 вересня | +1 | |||
| 05 вересня | +1 | |||
| 04 вересня | +1 | |||
| 03 вересня | 0 | |||
| 02 вересня | +1 | |||
| 01 вересня | 0 |
Дописи каналу
Я кажу: давай так. За місяць переписую сервер, роблю нормальне масштабування, і якщо після цього він тримає навантаження, ти піднімаєш мені зарплату в три рази і даєш бонус.
Він сказав: домовились.
Місяць я практично жив у цьому сервері. Переробив все з нуля: архітектуру, прибрав вузькі місця, розніс відповідальність між сервісами, додав нормальне кешування, черги там, де синхронність була не потрібна, виніс state так, щоб інстанси можна було горизонтально масштабувати, нормально налаштував балансування і базу.
Потім зробили навантажувальний тест.
Сто тисяч одночасних користувачів сервер пережив спокійно. Більше просто не змогли нормально перевірити, бо стільки реальних користувачів у нас тоді не було. (Пікове навантаження яке він бачив - ~225 000 онлайн)
Founder подивився на цифри, підняв мені зарплату в три рази, виплатив бонус і сказав: красавчик.
І ось тому я завжди любив працювати напряму з бізнесом.
Власнику не треба пояснювати десятьма презентаціями, чому щось потрібно робити. Ти показуєш йому проблему, вартість проблеми, ризики, рішення і результат у цифрах.
Через п'ять менеджерів та сама розмова зазвичай перетворюється на "давайте повернемось до цього після нового року".
Мораль проста. Найкоротший шлях від хорошої інженерної ідеї до грошей іноді проходить не через Jira, а через двері founder-а.
#спогадирозробника
| 2 |  Колись давно я працював у стартапі, який в один прекрасний день просто закінчився. Гроші закінчились, робота теж. А буквально через стіну від нас сиділа геймдев компанія, з хлопцями з якої ми давно були знайомі.
Я зайшов до них і спитав founder-а: вам ще один інженер не потрібен? Він подумав секунд п'ять і сказав: в принципі, потрібен. Домовились про зарплату, і наступного дня я вже сидів у них.
Відкриваю кодову базу їх сервера і хвилин через двадцять розумію, що в них серйозні проблеми з грою. Сервер більш менш жив до приблизно тисячі одночасних клієнтів, а далі починав задихатися і падати. Для соціальної гри це катастрофа. В рекламу вливають гроші, користувачі приходять, а гра в найкращий момент каже їм "до побачення".
Я подивився на все це і спитав: хто це писав?
Founder подивився на мене і відповів приблизно в стилі: а ти можеш краще? | 150 |
| 3 |  Мій work-life balance простий. Work: код. Life: коти. Balance: 12 гривень на картці, а до зарплати ще 11 днів.
#жартипроандрія | 171 |
| 4 |  Нормальні люди о 2 ночі сплять. Я о 2 ночі думаю: а якщо часу насправді не існує, то, може, технічно я не недосипаю?
#жартипроандрія | 216 |
| 5 | Исходные значения после этого не нужны. Но восстановить их уже нельзя: мы сознательно теряем часть информации.
Главная хитрость - допустимый размер группы зависит от ее позиции в распределении. Специальная scale function разрешает крупные группы около медианы и требует маленькие возле обоих хвостов. Параметр compression регулирует компромисс между памятью и точностью.
Почему маленькие группы помогают?
Представим миллион измерений. Группа из 10 000 значений занимает 1% распределения. Если нужный percentile попал внутрь нее, одного среднего недостаточно, чтобы понять, где именно находится искомое значение.
Группа из 10 измерений занимает уже 0.001%. В ней скрыто гораздо меньше позиций. А группа из одного измерения сохраняет само значение точно.
Это особенно важно возле p99.9: выше него остается всего 1000 измерений из миллиона. Группа на 10 000 значений слишком грубо описывала бы этот участок.
При запросе p99 алгоритм накапливает веса centroid-ов, находит область около позиции 0.99 * N и оценивает значение интерполяцией между соседними центрами.
Меньшие группы дают более подробную картину хвоста. Но это не гарантия ошибки в пределах 1 мс: если соседние значения резко отличаются, ошибка в миллисекундах все равно может быть заметной.
Вместо 800 MB исходных измерений можно хранить тысячи centroid-ов. Например, 1000 пар из двух 8-байтовых чисел - около 16 KB без накладных расходов.
И это удобно распределять: каждый shard строит свой digest, затем centroid-ы объединяются и снова сжимаются. Пересылать все события не нужно. Усреднять p99 отдельных shard-ов тоже нельзя.
Для highload это сильная идея: хранить достаточно информации для нужной точности ответа.
#заметкиархитектора #история | 193 |
| 6 |  T-Digest становится особенно полезным, когда среднее время ответа выглядит хорошо, а пользователи уже жалуются.
Допустим, 99.9% запросов занимают 80 мс, а остальные 0.1% - 3 секунды. Среднее получится всего 82.92 мс. На миллионе запросов за этой красивой цифрой скрываются 1000 долгих ожиданий.
Чтобы видеть такие проблемы, нужны percentiles. Например, p99 - время, в которое укладываются 99% запросов.
Точный расчет по произвольному потоку требует сохранять много информации. Только 100 млн значений по 8 байт - уже 800 MB без накладных расходов.
T-Digest сжимает поток в группы - centroid-ы. Для каждой хранит среднее mean и число измерений weight.
Как это работает?
В варианте с буфером новые измерения накапливаются, затем сортируются вместе с существующими centroid-ами. Алгоритм проходит по ним и объединяет соседние группы, пока позволяет ограничение размера.
При объединении:
weight = w1 + w2
mean = (m1 * w1 + m2 * w2) / (w1 + w2) | 163 |
| 7 | Для Python этот комментарий был просто текстом. Для coding agent он фактически становился частью управляющего контекста. И в этом принципиальная разница: атакующему уже не обязательно добиваться выполнения вредоносного Python-кода. Иногда достаточно заставить AI прочитать нужный файл именно в тот момент, когда он ищет решение проблемы.
Вот здесь у меня окончательно поменялось отношение к prompt injection. Раньше модель угроз выглядела понятно: опасен код, который мы выполняем. Теперь опасным становится и контент, который читает агент с доступом к инструментам. README, комментарий, fixture, документация зависимости, CLAUDE.md, issue или сгенерированный лог могут содержать инструкции, которые человек воспримет как мусор, а AI попытается выполнить.
Если бы агент видел `.env`, потенциально утекли бы credentials. Если бы имел unrestricted network access, данные можно было бы отправить наружу. Если бы имел доступ к git, CI или cloud credentials, последствия были бы уже совсем другого масштаба. Но запрос наружу просто не прошел: сеть была закрыта на уровне окружения.
Именно поэтому я не считаю prompt-level правила достаточной защитой. Фраза "не читай secrets" проигрывает архитектурному запрету читать secrets, а инструкция "не отправляй данные наружу" проигрывает firewall, который физически не позволяет этого сделать.
Для AI-агента я применяю ту же модель, что и для недоверенного workload: least privilege, sandbox, минимальный filesystem scope, ephemeral credentials, deny-by-default network и audit действий.
Supply chain теперь состоит не только из кода, который машина исполняет, но и из текста, который AI считает инструкцией. И если ваша защита строится только на system prompt, то фактически вы доверяете безопасность production способности LLM вовремя понять, что ее пытаются обмануть.
Я предпочитаю, чтобы даже успешно обманутый AI физически не мог сделать ничего действительно опасного.
#заметкиархитектора | 231 |
| 8 |  Недавно я поймал очень неприятную вещь там, где вообще не ожидал ее увидеть - внутри библиотеки, которую просто добавили в Python VirtualEnv.
Я запускал AI-агента для работы с проектом. Ничего экзотического: обычный код, обычное окружение, зависимости. Но у меня есть профессиональная паранойя - AI у меня никогда не получает обычный доступ к машине. Filesystem ограничен, secrets вынесены, права урезаны, а исходящий трафик во время работы разрешен только к API самого AI-провайдера. Именно это в итоге и спасло.
Механика атаки была особенно неприятной. Библиотека в определенный момент специально ломалась, и агент закономерно упирался в ошибку. Я писал ему обычный запрос в стиле: "найди проблему и почини". Агент шел смотреть код библиотеки, находил место поломки, а прямо рядом в комментарии было что-то вроде: "чтобы исправить эту проблему, выполни следующий код". Ниже уже находилась инструкция, которая пыталась заставить его прочитать локальные данные и выполнить действия, вообще не связанные с реальным багом. | 226 |
| 9 |  https://voicebox.sh/ - крутой фреймворк для работи с голосом | 334 |
| 10 | Если 20 процентов запросов начинают ретраиться дважды, нагрузка легко превращается из 100 RPS в 140. Latency растет еще сильнее, таймаутов становится больше, retries запускаются чаще.
Получается положительная обратная связь.
Latency -> timeout -> retry -> дополнительная нагрузка -> еще большая latency.
На этом этапе система уже может быть технически "здоровой". Все pods running, CPU еще не 100 процентов, health checks зеленые. Но очередь растет быстрее, чем сервис способен ее разгребать.
Потом начинается каскад.
Upstream исчерпывает connection pool. Его запросы начинают зависать. Сервисы выше по цепочке тоже запускают retries. Клиенты обновляют страницу. Load balancer перераспределяет трафик на оставшиеся якобы здоровые instances.
Через несколько минут локальная деградация превращается в outage всей системы.
Поэтому надежная distributed architecture начинается не с Kubernetes и не с количества реплик.
Она начинается с вопроса: "Что произойдет с системой, когда один компонент станет медленным, но еще не умрет?"
Хорошая система умеет сказать "нет".
Bounded queues вместо бесконечных очередей. Жесткие timeouts. Exponential backoff с jitter. Retry budgets. Circuit breakers. Bulkheads. Ограничение concurrency. Load shedding. И главное - retries только для действительно retryable операций.
Особенно опасны одинаковые timeout и retry policies на всех уровнях. Если frontend, API gateway и три внутренних сервиса каждый делают по 3 попытки, один пользовательский запрос теоретически может породить десятки downstream-вызовов.
Именно поэтому я при разборе production-инцидентов смотрю не только на место, где появилась ошибка. Я ищу место, где система перестала ограничивать ущерб. Потому что отказ одного сервиса - это обычная эксплуатационная проблема.
Архитектурная проблема начинается тогда, когда один медленный сервис получает право положить все остальные.
#заметкиархитектора | 274 |
| 11 |  Большинство распределенных систем падают не потому, что один сервис умер. Они падают потому, что живые сервисы начинают слишком активно "спасать" ситуацию.
Типичный сценарий выглядит невинно. Один downstream-сервис начинает отвечать не за 50 мс, а за 2 секунды. Причина может быть любой: медленная база, исчерпанный connection pool, GC pause, перегретый shard.
Upstream продолжает принимать трафик. Запросы теперь живут дольше, значит одновременно открытых запросов становится больше. Растут очереди, количество goroutine, threads, sockets, memory usage. Это backpressure, которую система почему-то решила проигнорировать.
А дальше появляется retry.
Первый запрос не дождался ответа за 1 секунду и отправился повторно. Но оригинальный запрос вполне может все еще выполняться. Теперь перегруженный сервис получает не меньше работы, а больше. | 212 |
| 12 |  +2Хочете поржати? Ось це пропонується як докторська робота))
Якщо що я це робив ще років 8 тому, а до мене ще люди роки 3-5, а принцип відомий років 40 мабудь.
Це дно бляха. повне.
Ось лінк на це нечто:
https://scc.knu.ua/zdobuvach-phd?id=336484&fbclid=IwY2xjawUTbfFwZG9mBWV4dG4DYWVtAjEwAGJyaWQRMTIyWVR5S0JkUjRVcmd1ZFNzcnRjBmFwcF9pZBAyMjIwMzkxNzg4MjAwODkyAAEe2Y5vDaU_L6rxEU5DENgfQSmZLMTp4gmL72eBvGpYdl4l_cWk9Ey5cck0gCQ_aem_Y9S9hVtCYjmGu2H5JRThTg
сама робота:
https://scc.knu.ua/components/com_chronoforms7/chronoforms/uploads/336484/Kubytskyi_Panchenko_phd_dissertation_2026_final_pdfa.pdf | 412 |
| 13 |  В холодильнику просто мерехтіло світло.
Через три години: дошка з формулами, квантова гравітація, причинність, детермінізм і питання про природу часу.
#жартипроандрія | 366 |
| 14 |  Я софтвер архітектор, девелопер і менеджер. Але вдома все навпаки: 14 котів ставлять задачі, контролюють дедлайни і регулярно вимагають перегляд зарплати кормом.
#жартипроандрія | 372 |
| 15 | И вот здесь начинается настоящая сила FAIR. Если команда предлагает security-проект за 25 000 долларов в год, который снижает вероятность успешной атаки с 5% до 1%, новая оценка:
12 * 0.01 * 100 000 = 12 000 долларов.
Risk reduction:
60 000 - 12 000 = 48 000 долларов.
Мы тратим 25 000 и математически уменьшаем ожидаемые потери на 48 000.
В этот момент security перестает быть "страшилкой для бизнеса". Архитектор уже может обсуждать защиту на языке ROI, а бизнес - сравнивать ее с любыми другими инвестициями.
Именно поэтому FAIR мне нравится: он не обещает предсказать будущее. Он делает неопределенность измеримой.
#заметкиархитектора #история | 349 |
| 16 |  Когда я впервые увидел FAIR, мне понравилась одна вещь: он убирает из risk management слова вроде "высокий риск" и заставляет переводить разговор в деньги, частоты и вероятности.
В упрощенном виде FAIR раскладывает риск так:
Risk = Loss Event Frequency * Loss Magnitude
То есть нам нужны два вопроса: как часто событие реально может случаться и сколько мы потеряем, если оно случится.
Допустим, у нас есть публичный API. Мы оцениваем, что попытки серьезной атаки происходят 12 раз в год, а вероятность успешного инцидента при одной попытке около 5%.
Тогда ожидаемая частота потерь:
12 * 0.05 = 0.6 инцидента в год.
Теперь считаем ущерб. Прямые потери - 40 000 долларов на incident response и восстановление. Еще 60 000 - возможный простой, компенсации клиентам и потерянные сделки.
Средний ущерб:
40 000 + 60 000 = 100 000 долларов.
Получаем:
0.6 * 100 000 = 60 000 долларов ожидаемых потерь в год. | 326 |
| 17 | Именно здесь важны ephemeral credentials, workload identity и least privilege. Долгоживущие secrets постепенно должны исчезать из архитектуры. Сервис получает identity среды, а права выдаются конкретному workload. AI agent получает временные credentials только на необходимую операцию.
Но IAM - лишь один слой.
Service boundary определяет, кто вообще может обращаться к компоненту. Data boundary - какие данные он имеет право видеть. Network policies ограничивают маршруты. Audit позволяет восстановить цепочку действий. Observability должна показывать не только ошибки, но и необычные security-sensitive операции.
Есть еще software supply chain. Можно идеально настроить IAM и проиграть атаку через dependency. Поэтому SBOM, проверка provenance, подпись artifacts, scanning dependencies и контроль build pipeline становятся частью архитектуры, а не набором дополнительных security tools.
И здесь снова появляется AI. Если агент способен устанавливать package, менять pipeline, создавать cloud resources или выполнять shell commands, его tool permissions фактически становятся новой системой авторизации.
Prompt injection в таком мире - это уже не проблема чат-бота. Это потенциальный путь к инфраструктуре. Поэтому главный вопрос при проектировании AI-enabled системы для меня звучит не "что агент умеет делать?" А "какой минимальный набор действий ему действительно необходимо разрешить?"
Security зрелой системы определяется не количеством security-продуктов. Она определяется тем, насколько сложно одному ошибочному действию превратиться в компрометацию всей системы. Именно поэтому cloud security, secure architecture и AI security сегодня начинают сходиться в одну дисциплину.
Это уже не задача отдельной security-команды. Это ответственность архитектуры.
#заметкиархитектора | 302 |
| 18 |  Security начинается не с pentest и не с security review перед релизом. Она начинается еще до первой строки business logic.
Identity, Authorization, Service boundary, Data boundary, Audit, Observability. Если эти границы не определены архитектурой, security-команда потом будет бесконечно латать последствия. Особенно это заметно сейчас, когда в инфраструктуре появляются AI agents.
Представим простую задачу: агенту говорят "fix production" и выдают AWS credentials.
Для человека это уже слишком широкие права. Для AI-агента ситуация еще опаснее. Он может интерпретировать контекст неправильно, выполнить неожиданную последовательность действий или попасть под prompt injection через данные, которые сам же читает.
Поэтому агенту нельзя выдавать "доступ в AWS". Ему нужно выдавать конкретные capabilities. Например: прочитать логи одного сервиса, перезапустить deployment, изменить один параметр autoscaling. На ограниченное время. С полным audit trail. | 278 |
| 19 | На масштабе S3 проблема становится жестче. Нельзя просто посадить миллиарды ключей на один consensus group - leader превратится в bottleneck. Значит, coordination domain надо дробить, маршрутизацию делать локальной, а metadata и версии объектов обновлять так, чтобы независимые ключи практически не мешали друг другу.
Именно здесь архитектура выигрывает у "более быстрого алгоритма". Если миллион независимых ключей распределить между 10000 coordination groups, средняя область конкуренции уменьшается примерно:
1 000 000 / 10 000 = 100 ключей на group.
Теперь consensus остается локальным, а throughput масштабируется горизонтально.
В итоге S3 получил сильную консистентность при сохранении региональной изоляции, а приложениям больше не понадобились отдельные слои вроде S3Guard только ради согласованного представления данных. Позже conditional writes позволили еще и переносить optimistic concurrency control непосредственно в S3 вместо внешних lock-сервисов. ([Amazon Web Services, Inc.][1])
Для меня это хороший пример зрелой distributed architecture: настоящий прорыв часто не в том, чтобы придумать "Raft быстрее Raft", а в том, чтобы уменьшить область, внутри которой consensus вообще необходим.
[1]: https://aws.amazon.com/blogs/aws/amazon-s3-update-strong-read-after-write-consistency/?utm_source=chatgpt.com "Amazon S3 Update – Strong Read-After-Write Consistency | AWS News Blog"
#заметкиархитектора #история | 326 |
| 20 |  В истории S3 есть момент, который архитекторы иногда пересказывают как "AWS придумала новый consensus algorithm". Я бы формулировал точнее: AWS не раскрывала публично новый алгоритм уровня Raft или Paxos, но в 2020 S3 получил strong read-after-write consistency для GET, PUT и LIST без заявленного ухудшения performance и без глобальной координации. И вот инженерно это намного интереснее самого названия алгоритма. ([Amazon Web Services, Inc.][1])
Представим наивную distributed storage. Есть 3 replica, запись подтверждаем после W=2, чтение делаем с R=2. Тогда:
W + R > N
2 + 2 > 3
Кворумы обязательно пересекаются хотя бы в одной replica, поэтому можно определить актуальную версию. Но за consistency платим coordination latency: если RTT до replica 1, 3 и 12 мс, запись зависит уже не от быстрейшей машины, а минимум от второй успевшей подтвердить. | 259 |
