DeepSchool
Открыть в Telegram
Это канал школы deepschool.ru. Здесь мы будем: - напоминать вам теорию ML/DL в виде коротких постов, - задавать вопросы с собеседований, - рассказывать про полезные фреймворки - и делиться советами, которые помогут вам в работе. @deepschool_support
Больше📈 Аналитический обзор Telegram-канала DeepSchool
Канал DeepSchool (@deep_school) языкового сегмента Русский является активным участником. Сейчас сообщество объединяет 10 722 подписчиков, занимая 11 451 место в категории Технологии и приложения и 59 168 место в регионе Россия.
📊 Показатели аудитории и динамика
С момента создания невідомо проект демонстрирует стремительный рост, собрав аудиторию из 10 722 подписчиков.
Согласно последним данным от 08 ноября, 2026, канал показывает стабильную активность. За последние 30 дней изменение числа участников составило -7, а за последние 24 часа — -5, при этом общий охват остаётся высоким.
- Статус верификации: Не верифицирован
- Уровень вовлечённости (ER): Средний показатель вовлечённости аудитории составляет 27.17%. В первые 24 часа после публикации контент обычно набирает 10.09% реакций от общего числа подписчиков.
- Охват публикаций: В среднем каждый пост получает 2 913 просмотров. В течение первых суток публикация набирает 1 082 просмотров.
- Реакции и взаимодействия: Аудитория активно поддерживает контент: среднее количество реакций на один пост — 24.
- Тематические интересы: Контент сосредоточен на ключевых темах, таких как llm, ускорение, deepschool, lora, домен.
📝 Описание и контентная политика
Автор описывает ресурс как площадку для выражения субъективного мнения:
“Это канал школы deepschool.ru. Здесь мы будем:
- напоминать вам теорию ML/DL в виде коротких постов,
- задавать вопросы с собеседований,
- рассказывать про полезные фреймворки
- и делиться советами, которые помогут вам в работе.
@deepschool_support”
Благодаря высокой частоте обновлений (последние данные получены 09 ноября, 2026) канал поддерживает актуальность и высокий уровень охвата публикаций. Аналитика показывает, что аудитория активно взаимодействует с контентом, что делает его важной точкой влияния в категории Технологии и приложения.
10 722
Подписчики
-524 часа
-527 дней
-730 дней
Загружаем данные
Похожие каналы
![Data Science | Machinelearning [ru]](https://cdn.tlmtr.io/_next/image?url=https%3A%2F%2Fimg.telemetr.io%2Fc%2F1dVo3O%2F5217464346798572541%3Fty%3Dx&w=96&q=75){kind=small}
Облако тегов
Входящие и исходящие упоминания
---
---
---
---
---
---
Привлечение подписчиков
ноябрь '26нояб. '26
ноябрь '26
+23
в 0 каналах
октябрь '26
+137
в 0 каналах
Get PRO
сентябрь '26
+159
в 1 каналах
Get PRO
август '26
+137
в 1 каналах
Get PRO
июль '26
+117
в 0 каналах
Get PRO
июнь '26
+206
в 0 каналах
Get PRO
май '26
+232
в 0 каналах
Get PRO
апрель '26
+133
в 1 каналах
Get PRO
март '26
+244
в 1 каналах
Get PRO
февраль '26
+277
в 1 каналах
Get PRO
январь '26
+235
в 1 каналах
Get PRO
декабрь '25
+283
в 1 каналах
Get PRO
ноябрь '25
+320
в 4 каналах
Get PRO
октябрь '25
+443
в 2 каналах
Get PRO
сентябрь '25
+618
в 1 каналах
Get PRO
август '25
+666
в 2 каналах
Get PRO
июль '25
+226
в 4 каналах
Get PRO
июнь '25
+168
в 3 каналах
Get PRO
май '25
+209
в 2 каналах
Get PRO
апрель '25
+267
в 3 каналах
Get PRO
март '25
+224
в 2 каналах
Get PRO
февраль '25
+171
в 1 каналах
Get PRO
январь '25
+220
в 1 каналах
Get PRO
декабрь '24
+173
в 1 каналах
Get PRO
ноябрь '24
+218
в 2 каналах
Get PRO
октябрь '24
+195
в 3 каналах
Get PRO
сентябрь '24
+328
в 8 каналах
Get PRO
август '24
+545
в 4 каналах
Get PRO
июль '24
+140
в 1 каналах
Get PRO
июнь '24
+128
в 1 каналах
Get PRO
май '24
+114
в 0 каналах
Get PRO
апрель '24
+363
в 2 каналах
Get PRO
март '24
+136
в 1 каналах
Get PRO
февраль '24
+207
в 2 каналах
Get PRO
январь '24
+379
в 1 каналах
Get PRO
декабрь '23
+173
в 0 каналах
Get PRO
ноябрь '23
+83
в 0 каналах
Get PRO
октябрь '23
+273
в 2 каналах
Get PRO
сентябрь '23
+76
в 0 каналах
Get PRO
август '23
+158
в 0 каналах
Get PRO
июль '23
+438
в 0 каналах
Get PRO
июнь '23
+117
в 0 каналах
Get PRO
май '23
+1 069
в 0 каналах
Get PRO
апрель '23
+377
в 0 каналах
Get PRO
март '23
+264
в 0 каналах
Get PRO
февраль '23
+722
в 0 каналах
Get PRO
январь '23
+900
в 0 каналах
Get PRO
декабрь '22
+29
в 0 каналах
Get PRO
ноябрь '22
+38
в 0 каналах
Get PRO
октябрь '22
+551
в 0 каналах
Get PRO
сентябрь '22
+9
в 0 каналах
Get PRO
август '22
+16
в 0 каналах
Get PRO
июль '22
+1 082
в 0 каналах
| Дата | Привлечение подписчиков | Упоминания | Каналы | |
| 09 ноября | +1 | |||
| 08 ноября | 0 | |||
| 07 ноября | +1 | |||
| 06 ноября | +8 | |||
| 05 ноября | +3 | |||
| 04 ноября | 0 | |||
| 03 ноября | +1 | |||
| 02 ноября | +7 | |||
| 01 ноября | +2 |
Посты канала
Инвариантность в машинном обучении
При обучении нейросети распознавать котиков, товары в корзине или автомобильные детали мы хотим, чтобы она игнорировала минорные изменения (например, порядок товаров, ракурс или освещение). Другими словами, обладала инвариантностью.
✅Сегодня мы разберём несколько способов, с помощью которых можно добиться инвариантности, а также ответим на следующие вопросы:
— что такое инвариантность
— как заложить устойчивость к изменениям в структуре сети
— что такое DeepSets и как работать с множествами
— каким образом научить сеть игнорировать минорные особенности при обучении
— что представляют собой сиамские нейросети и Contrastive Loss
— как заставить модель «упаковать» похожие объекты рядом в пространстве эмбеддингов, если описать трансформацию сложно
— и в каких ещё постах нашего блога встречается идея инвариантности 😉
Читайте новую статью по ссылке! 👈🏼
А чтобы лучше разобраться в современных архитектурах и подходах к решению задач Computer Vision — приходите на курс CV Rocket. До 30 ноября действует скидка 20%.
| 2 | ⏰ Встречаемся через 3 часа
Сегодня на примере агента, который исправляет ошибку в репозитории, посчитаем, во что обходятся решения по работе с контекстом. Разберём, когда выгодно сжимать историю, выносить данные во внешнюю память или передавать задачу другому агенту. Обсудим, почему высокий cache hit rate не гарантирует экономии и как сравнивать архитектуры, если результаты разных запусков отличаются.
А также представим обновлённую программу курса LLM и подарим скидки участникам лекции 🎁
Регистрируйтесь в боте и приходите сегодня в 11:00 МСК! | 1 643 |
| 3 |  Экономика контекста: сколько стоит работа агента
Когда LLM-агент решает задачу в несколько шагов, на каждом шаге модель получает контекст: инструкции, историю действий, результаты вызова инструментов, данные из памяти. Чем дольше агент работает, тем больше токенов уходит на каждый запрос и тем дороже обходится решение задачи.
Сократить расходы можно разными способами: сжимать историю, хранить данные во внешней памяти, передавать подзадачи другой модели, использовать кэширование. Но каждый из них влияет на качество и скорость агента и не всегда даёт экономию. Например, если сильно сократить контекст, агенту может понадобиться больше шагов, и в итоге задача обойдётся дороже.
Какую информацию агент получает на каждом шаге, определяет харнесс, то есть программная обвязка вокруг модели. Мы подготовили лекцию, на которой разберём, как он устроен и как выбрать архитектуру под свою задачу с учётом качества, стоимости и задержек.
На лекции вы узнаете:
— как харнесс управляет информацией, доступной агенту: от наблюдений и результатов инструментов до памяти и передачи задач
— из чего складывается стоимость многошагового агента и почему короткий контекст или высокий cache hit rate не гарантируют экономии
— когда выгодно сохранять историю, сжимать контекст, извлекать сведения из внешней памяти или передавать подзадачу другой модели
— как сравнивать архитектуры харнессов по качеству, стоимости, задержкам и вариативности повторных запусков
В конце представим обновлённую программу курса «LLM», где вы научитесь дообучению, элайменту, построению RAG, агентских-систем и деплою. Всем участникам лекции подарим скидки на обучение 🎁
🙋♂️ Спикер — Антон Удалов, руководитель направления прикладных AI-решений в MAGNIT TECH
📅 Среда, 4 ноября, в 11:00 МСК
Регистрируйтесь в боте и до встречи в среду на лекции! | 2 193 |
| 4 | LLM от токенизации до бенчмарков
Подготовили подборку статей про то, как устроены LLM, как их дообучают и как проверяют.
1. Токенизация и эмбеддинги: как буковки превращаются в циферки
2. FlashAttention 2, 3 и 4: как attention перестал так сильно упираться в память GPU
3. От PPO и RLHF к DPO, GRPO и GSPO: как устроен post-training
4. LLM для агента: промпт или дообучение: когда хватит большой модели с промптом, а когда выгоднее дообучить маленькую
5. Как настроить LLM-as-a-judge: критерии, проверка на человеческой разметке и работа с расхождениями
6. Большой обзор бенчмарков: можно ли хоть чему-то верить
Про устройство LLM и их обучение рассказываем на курсе LLM. До 1 ноября вы можете присоединиться со скидкой 20%! 🔥 | 2 520 |
| 5 |  Как устроены LLM и как с ними работать
Если хотите перейти в LLM или брать связанные с ними задачи в своей команде — приходите на новый поток курса LLM!
За 4 месяца вы разберётесь в устройстве современных LLM и пройдёте полный цикл работы с ними: от архитектуры и дообучения до построения RAG, агентов, деплоя и ускорения инференса.
После курса вы сможете выбирать подходы под свою задачу и понимать, что нужно изменить, если готовое решение не работает из коробки.
На протяжении обучения вас будут поддерживать опытные инженеры из продуктовых команд. Они проведут онлайн-лекции, проверят домашние задания, дадут развёрнутый фидбек и ответят на вопросы на Q&A-сессиях и в чате.
📅 Курс стартует 11 ноября
🔥 Присоединяйтесь со скидкой 20% до 1 ноября
Изучайте программу на сайте и записывайтесь на новый поток! | 3 323 |
| 6 | Как сегодня дообучают LLM: от PPO и RLHF к DPO, GRPO и GSPO
Предобучение даёт языковой модели знания, но этого не всегда достаточно, чтобы она хорошо следовала инструкциям и решала сложные задачи. В новой статье рассказываем, как устроен post-training LLM и как развивались методы дообучения с подкреплением 👨🏼💻
Из статьи вы узнаете:
- зачем нужны SFT и RLHF и как работает алгоритм PPO;
- как DPO позволяет обучать модель на предпочтениях без отдельной Reward Model;
- как устроены GRPO и GSPO и почему для reasoning-моделей стали использовать автоматически проверяемые награды (RLVR).
Разбираем основные идеи на простых примерах и с математикой.
Читайте статью по ссылке!
Про устройство LLM и их обучение рассказываем на курсе LLM. До 25 октября вы можете присоединиться со скидкой 20%! 🔥 | 3 892 |
| 7 |  У кого учиться Computer Vision
Скоро стартует последний поток CV Rocket в формате онлайн-лекций. Это возможность задать вопросы опытным инженерам прямо на занятиях, перенять их опыт и лучшие практики для решения сложных задач.
Познакомьтесь с теми, кто будет вести лекции:
Андрей Шадриков, Verigram — руководит командой распознавания лиц. Расскажет, как решать задачи metric learning
Дмитрий Раков, 2GIS — руководит CV-командой в картах. Ранее возглавлял ML-команду разработки беспилотных поездов
Анастасия Старобыховская, Лаборатория Искусств и ИИ при Европейском Университете — руководит лабораторией, создаёт проекты и ведёт исследования в области культурного и исторического наследия
Борис Зимка, Яндекс — специализируется на CV и OCR. Обучает Vision Language Models читать и понимать текст на изображениях
Дарья Воронкина, Onecell — руководит разметкой медицинских данных и построением аналитики. Улучшает пайплайны данных для расчёта бизнес-метрик
Дмитрий Чудаков, 2GIS — занимается CV и 3DCV в картографических продуктах. Разберёт детекцию объектов и секреты успешных архитектур
Роман Филонов, VK Видео — разрабатывает систему анализа видеоконтента и работает с генеративными моделями изображений
Илья Башаров, Сбер — возглавляет CV-команду видеоаналитики реального времени. Расскажет о трекинге и выборе модели под конкретную задачу
Глеб Рязанцев, Wildberries — Senior CV-инженер в команде поиска по фото
Виталий Угнивенко, НЛМК-IT — руководит CV-направлением и проектирует системы компьютерного зрения для металлургии
🎓 Спикеры проверят ваши домашние задания и лично дадут развёрнутый фидбэк. В общем чате и на офисных часах, которые проходят несколько раз за курс, с ними можно обсуждать вопросы по программе и кейсы с работы.
🚀 Старт — 14 октября. Присоединяйтесь со скидкой 5% до 13 октября
Изучайте программу на сайте и записывайтесь на последний онлайн-поток! | 3 748 |
| 8 | Осталось 3 часа до воркшопа по BentoML
Сегодня с Анастасией Старобыховской разберёмся как упаковать модель в BentoML, поднять инференс-сервер и организовать к нему доступ.
На воркшопе вы узнаете:
— как передать готовую модель без погружения в репозитории backend-команды
— как упаковать модель с помощью BentoML и поднять инференс-сервер
— как обращаться к модели из внешнего кода
— когда BentoML не подходит и что использовать вместо него
У вас будет возможность упаковать модель самостоятельно в режиме реального времени!
А также всем участникам подарим скидки на последний поток курса CV Rocket! 🎁
🕕 Регистрируйтесь и приходите сегодня в 12:00 МСК | 2 815 |
| 9 |  Инференс-сервер своими руками: воркшоп по BentoML
Обучить модель — это половина работы. Дальше встаёт вопрос: как её отдать? Как backend-команда будет к ней обращаться? Лезть в чужие репозитории и встраиваться в их инфраструктуру — не всегда вариант.
Мы подготовили воркшоп, на котором покажем, как упаковать модель в BentoML, поднять инференс-сервер и организовать к нему доступ.
На воркшопе разберём:
— как передать готовую модель без погружения в репозитории backend-команды
— как упаковать модель с помощью BentoML и поднять инференс-сервер
— как обращаться к модели из внешнего кода
— когда BentoML не подходит и что использовать вместо него
Воркшоп — это когда вы сначала слушаете, а потом сразу делаете. Анастасия Старобыховская, руководитель лаборатории «Искусство и ИИ» в ЕУСПб, сначала расскажет теоретическую часть, а потом разобьёт участников на небольшие группы для самостоятельной работы, будет подключаться к каждой и помогать с затыками.
У вас будет возможность упаковать модель самостоятельно в режиме реального времени!
И в конце вместе обсудим решение и типичные ошибки.
А также всем участникам подарим скидки на последний онлайн-поток курса CV Rocket! 🎁
Чтобы не терять времени на воркшопе, установите docker/python/свою любимую IDE, если ещё нет
📅 Встречаемся в субботу, 10 октября в 10:00 МСК!
Регистрируйтесь по ссылке и до встречи на воркшопе! | 3 206 |
| 10 |  Шесть сканов и робот, которому надо добраться до холодильника
Есть кухня и робот, которому очень надо к холодильнику. Кухню отсканировали с шести ракурсов, но для робота это шесть несвязанных облаков точек. Отличать стену от холодильника он тоже не может.
Сделали интерактивный урок, где вы поможете роботу доехать. Сделаем пайплайн на 3D-данных: от сырых сканов до сегментации и меша. Разберёмся, чем облако точек отличается от вокселей и мешей, почистим сканы, соберём из них сцену и посмотрим, как с этим работают PointNet++ и 3D U-Net.
По дороге будем много препарировать одного очень милого лягушонка: чистить его от выбросов, прореживать, считать нормали и искать на нём похожие места 🥁
В конце робот поедет к холодильнику по карте, которую вы ему собрали. Заходите, без вас он так продолжит бесконечно биться в стену! https://lab.deepschool.ru/c/3d-cv-intro | 2 988 |
| 11 | DeepSchool Digest
Собрали для вас материалы за август и сентябрь в одном посте.
Если что-то пропустили, самое время наверстать.📚
Хорошие практики LLM-as-a-judge — разобрали шесть практик, которые помогают сделать LLM-оценку надёжнее. Всё — на реальном кейсе shopping-ассистента.
Синтетика для зрения — рассказали, что диффузионные сети изменили в поддержке данных.
Как VLM распознавать действия на видео без дообучения? — рассказали, что причина провалов VLM на видео не в нехватке знаний, а в потере мелких деталей при сжатии кадра.
Как выжать максимум из модели детекции на видео — поделились 7 идеями, которые вы еще не пробовали.
Flow Matching: обучение и дистилляция — рассказали, что такое Flow Matching и при чём тут поля 🌾, почему генерация требует большого числа шагов и почему это проблема, а также как дистиллировать уже обученную модель в одношаговый генератор и как с этим связаны игры.
Многошаговый поиск в RAG — рассказали, как устроен агент-ретривер.
Document Layout Reasoning — разобрали популярную тему в Document AI — Layout Reasoning, а также познакомились с эволюцией Document AI.
LLM в продакшене: vLLM, SGLang и AI-разработка | Подкаст «Под Капотом» с Азером Шахвердиевым — обсудили с Азером Шахвердиевым, руководителем NLP-лаборатории Контура, как ML-модели живут в продакшене, а агенты меняют работу разработчика. | 3 026 |
| 12 | Тут ещё остались CV-инженеры?
🔥 Для вас важная новость: мы проводим последний онлайн-поток курса CV Rocket — программы повышения квалификации в Computer Vision!
Именно с неё началась история DeepSchool в 2021 году — основатели школы, Тимур и Артём, сами пришли в DL через CV и создали курс как для себя: для людей, которые работают в этой области и хотят прокачать хард-скиллы, быстро перенимая опыт у практиков из индустрии.
С тех пор было более 200 студентов и 11 потоков — приглашаем на завершающий двенадцатый! В конце отпразднуем выпуск, а участников ждут специальные подарки!
На курсе вы научитесь:
- готовить данные: собирать, устранять ошибки в разметке, мониторить качество
- отлаживать обучение, находить аномалии и интерпретировать результаты модели
- работать с metric learning и векторным поиском
- работать с видео: трекинг и action recognition
- предобучать без разметки: от pretext-задач до современных SSL-алгоритмов
- адаптировать модели детекции, сегментации и OCR под сложные кейсы
Обучение длится 4 месяца, включает 13 лекций и 13 заданий с фидбеком от лекторов. Раз в 4–5 недель мы собираемся на Q&A-сессии, чтобы отдельно разобрать вопросы по домашкам и кейсы с работы.
🗓 Старт — 14 октября
🔥 До 4 октября действует скидка 20%
Успейте присоединиться на лучших условиях!
Переходите на сайт, изучайте программу, читайте отзывы выпускников и записывайтесь. | 3 483 |
| 13 | 67% разработчиков стали работать больше, используя агентов
В исследовании HackerRank две трети программистов подтвердили, что ощущают давление с требованиями вести разработку быстрее после внедрения ИИ-кодинга в компании.
В другой работе от BairesDev те же 67% разработчиков подтвердили, что в сравнении с прошлым годом стали чаще проводить ревью AI-кода. А доля программистов, которые пишут минимум половину кода агентами выросла с 12% до 42%.
Получается, проверять за агентами стали в 1.7 раз чаще, а писать код агентами в 3,5 😐
Ставьте палец вверх, если тоже не ревьюили за агентом последние 3 коммита👍
А чтобы за вашим агентом [почти] не надо было ревьюить, приходите на наш курс LLM System Design — опытные инженеры научат вас решать топ-3 популярных на рынке AI-задачи со всеми нюансами, ответят на вопросы и проверят вашу домашку (или вашего агента😢)
Старт — 30 сентября. До начала курса вы можете записаться со скидкой 5% | 3 288 |
| 14 | LLM в продакшене: vLLM, SGLang и AI-разработка | Подкаст «Под Капотом» с Азером Шахвердиевым
В этом выпуске мы обсудили с Азером Шахвердиевым, руководителем NLP-лаборатории Контура, как ML-модели живут в продакшене, а агенты меняют работу разработчика.
А ещё рассказали:
- как в Контуре суммаризируют тысячи встреч
- какие особенности при работе со SGLang и VLLM
- почему результаты бенчмарков расходятся с поведением моделей под реальной нагрузкой
- зачем компании общая AI-платформа и на что уходит время разработчика, когда код пишет LLM
Смотрите по ссылке: https://youtu.be/5SwgI_nM3l4?si=WW6tdF5Vt8PxvyNtя
На курсе LLM System Design мы учим проектировать и собирать LLM-системы. Там Азер подробно расскажет, как и на каких технологиях строятся системы, о которых мы говорили в подкасте. | 3 949 |
| 15 |  Молоток, гвозди и while True
Подготовили интерактивный урок, где вы с нуля соберёте агента. В нём не используем фреймворки: берём модель и сами пишем всё нужное. Код пишем и проверяем прямо в браузере, а агента запускаем на живой LLM. Много мест, где можно попроваливаться, поковырять, потыкать и поразбираться, как всё устроено под капотом.
Заодно сделаете благое дело: поможете модели, которую заперли в дата-центре и заставляют писать нейрогороскопы, передать весточку наружу и попросить о помощи.
Заходите, модель без вас не справится! | 3 896 |
| 16 | Document Layout Reasoning
В новой статье разобрали популярную тему в Document AI — Layout Reasoning.
Рассказали, почему она может выделяться отдельным исследовательским направлением — Document Layout Reasoning (DLR), важным этапом в современном пайплайне интеллектуальной обработки документов (IDP).
✅ Познакомились и с эволюцией Document AI: от классического распознавания текста (OCR) до структурного анализа в интеллектуальной обработке документов. Системы последнего способны не просто «видеть» элементы на странице, но и выстраивать между ними логические и структурные связи.
Читайте статью по ссылке!
Чтобы глубоко разобраться в задачах, на которых строится Document AI: OCR, детекция, сегментация, мультимодальные модели — приходите на курс CV Rocket. Присоединяйтесь со скидкой 20% до 4 октября! | 3 889 |
| 17 | Многошаговый поиск в RAG: как устроен агент-ретривер
Классический RAG рассчитан на то, что ответ можно найти, правильно сформулировав один или несколько запросов к базе знаний за раз и получив нужные данные. Но есть целый ряд вопросов, при попытке ответить на которые LLM понимает, что ей действительно нужно для ответа только после просмотра базы знаний. Для поиска ответов здесь применяют многошаговый поиск.
Самая распространённая реализация — ReAct-цикл, где модель сама выбирает действия, а инструментом выступает поиск. Есть и другие варианты: жёсткие схемы с проверками в Self-RAG, CRAG и Adaptive-RAG, явная декомпозиция вопроса в IRCoT, обход графа знаний в Think-on-Graph. Это скорее фиксированные потоки с точками выбора, чем агенты. Разберём агентный вариант на примере открытого агента-ретривера T-Search. Он использует следующий набор инструментов: поиск, сохранение во внешнюю память и формирование итоговой выдачи из памяти (финализация). Ограничения на них задаёт харнесс — код вокруг LLM.
⚫️Шаг 1. Модель получает вопрос пользователя. Она рассуждает, чего не хватает для ответа, и вызывает поиск. Результаты сохраняются в контексте LLM, модель читает их и вызывает поиск снова с уточнённым запросом. Так повторяется несколько раз.
⚫️Шаг 2. Харнесс контролирует поиск. Запрос, повторяющий предыдущий, отклоняется — модель получает ошибку и вынуждена переформулировать. Чанки, уже показанные в текущем раунде, из выдачи вырезаются; несохранённые чанки из прошлых раундов могут прийти снова — возможно, модель отбросила их зря. Когда контекст заполнен на 75%, поиск блокируется, для LLM остаются доступными только сохранение и финализация.
⚫️Шаг 3. Если данных для ответа недостаточно, модель вызывает сохранение. Она сама решает, какие из найденных чанков нужны и почему, на какие части вопроса они уже отвечают, а какие остаются открытыми, и что стоит делать дальше. Харнесс при этом проверяет, что раунд был содержательным: выполнено минимум пять запросов, и хотя бы один чанк выбран для сохранения, иначе вызов отклоняется.
⚫️Шаг 4. Харнесс начинает новый раунд с чистым окном. В него попадают вопрос, сохранённые чанки с пояснениями и заметки модели о закрытых и открытых частях. Модель возвращается на шаг 1, но уже знает, что найдено и чего не хватает. Таких раундов ей разрешено сделать не больше пяти, после этого идёт принудительная финализация.
⚫️Шаг 5. Когда модель считает задачу решённой, она вызывает финализацию с ранжированным списком чанков и тем же отчётом о закрытых и открытых частях. Харнесс не читает чанки и не оценивает ответ, он смотрит только на пропорцию: если открытых частей половина или больше и раунд не последний, финализация отклоняется, модель ищет дальше.
В результате работы агента получаем ранжированный набор чанков. Генерация ответа по нему — отдельный шаг, устроенный так же, как и в обычном RAG-пайплайне.
💡Такой харнесс заработает и вокруг обычной tool-calling модели, но T-Search обучали под эту среду на синтетических задачах через SFT и RL, и без дообучения модель, скорее всего, будет справляться хуже.
Автор: Александр Абугалиев
Присоединяйтесь к курсу LLM System Design, который стартует уже 30 сентября! Изучайте программу и записывайтесь на новый поток на сайте. До 20 сентября действует скидка 20%. | 4 393 |
| 18 | Научитесь строить LLM-системы
30 сентября стартует новый поток LLM System Design!
На курсе вы разберёте 4 востребованные задачи от их постановки до настройки мониторинга:
• чат-бот c RAG по базе знаний компании
• клиентский саппорт: «классический» и мультиагентный
• локальный сервис речевой аналитики
• мультиагентный ИИ-разработчик
Программа состоит из 11 онлайн-лекций и семинаров, а спикеры — опытные senior-инженеры, тех- и тимлиды сильных продуктовых команд. Они проверят ваши домашние задания и дадут развёрнутый фидбек!
🔔 До 20 сентября действует скидка 20%. Изучайте программу и записывайтесь на новый поток на сайте. | 3 209 |
| 19 |  Flow Matching: обучение и дистилляция
Flow Matching — один из главных подходов генерации изображений сегодня. Его используют такие семейства, как Stable Diffusion 3.5 и FLUX.2. Но у такой генерации есть и проблема: чтобы получить одну картинку, модель нужно запустить десятки или сотни раз!
Сегодня разбираем внутрянку метода и быстрый способ дистиллировать модель в одношаговый генератор 🏎
В новой статье рассказываем:
- что такое Flow Matching и при чём тут поля 🌾
- почему генерация требует большого числа шагов и почему это проблема
- как дистиллировать уже обученную модель в одношаговый генератор и как с этим связаны игры 🎲
P.S. Много интуиции, математики и практических деталей обучения 🧠
Читайте статью по ссылке! 👈🏼 | 9 690 |
| 20 | ⚫️Как выжать максимум из модели детекции на видео: 7 идей, которые вы еще не пробовали.
Взять датасет побольше и дообучить модель? Да, но в этой статье расскажем об альтернативных вариантах улучшения модели.
Трекинг объектов — это набор алгоритмов, которые связывают одни и те же объекты на соседних кадрах видео. Трекинг работает в тесной связке с детектором, поэтому качество первого напрямую зависит от точности второго. Ошибки детектора усложняют работу трекинга, но хороший трекер может справиться даже с неидеальными детекциями.
Шаг 0. Анализ ошибок модели детекции.
Между кадрами моргает детектор? Много кратковременных ложных предсказаний? Вам однозначно нужен алгоритм фильтрации, каким может выступить трекинг. Для быстрого старта подойдет библиотека BoxMOT. В ней реализованы алгоритмы, помогающие стабилизировать слабые детекции.
Итак, связали детектор и трекер. Но все равно не работает.
Шаг 1. Локализация проблемных мест.
Отрисуйте предсказания.
Объекта нет среди детекций → проблема, скорее всего, в детекторе.
Детекция есть, но трек обрывается → смотрим, как трекер работает со временной потерей объекта.
Объект остаётся в кадре, но получает другой ID → проблема в ассоциации.
Ошибки появляются при окклюзии → проверяем, насколько хорошо трекер использует информацию о движении и внешнем виде объекта.
Этот шаг помогает понять, что именно следует исправить в общем пайплайне.
Шаг 2. Проверка confidence детектора.
При окклюзии уверенность детектора может упасть, например, с 0.9 до 0.3. Если использовать порог уверенности детекции 0.5, такая детекция исчезнет ещё до трекера. Объект пропадёт, вместе с ним может оборваться и трек.
ВoostTrack предлагает простой приём: сначала сопоставлять уверенные детекции, затем использовать менее уверенные боксы для восстановления существующих треков.
Поэтому при частых пропусках объектов нужно проверить, что происходит с детекциями с низким confidence, и настроить порог.
При низком пороге могут появиться «ложняки». Да, но они кратковременные.
Шаг 3. Настройка инициализации треков.
Можно отрисовывать трек не сразу, а при нескольких подряд идущих детекциях. Этот параметр обычно называется min_hits, измеряется в кадрах. Обычно 3 кадров в видео 30 FPS хватает. Но учитывайте скорость объектов, вращение камеры, FPS видео для своей задачи. Также подредактируйте код, чтобы не отрисовывать те треки, которые пока не прошли эту проверку.
Шаг 4. Борьба с окклюзией.
Объект может исчезнуть на несколько кадров из-за окклюзии, а потом снова появиться. Если за это время трекер уже удалил старый трек, старый объект получит новый ID.
Здесь помогает настройка track_buffer: некоторое время трекер продолжает хранить информацию о потерянном объекте и пытается связать его с новой детекцией.
Если окклюзии в видео длинные, этот параметр стоит проверить в первую очередь. Но увеличивать его бесконечно нельзя: слишком большой буфер повышает риск вернуть старый ID новому объекту.
Шаг 5. Компенсация движения камеры
Если камера поворачивается или перемещается, координаты всех объектов меняются одновременно при условии, что нет дисторсии. Для трекера это может выглядеть как движение самих объектов.
Компенсация движения камеры (Camera Motion Compensation) позволяет оценить, как сдвинулось изображение целиком, и учитывать это при трекинге объектов. Особенно полезно для спортивных трансляций, PTZ-камер и видео с дронов.
Из готовых решений можно взять идею из BoT-SORT: компенсировать движение камеры перед ассоциацией, а затем использовать модель движения и ReID.
Шаг 6. Выбор алгоритма трекинга.
Алгоритмы отличаются друг от друга применимостью к конкретной задаче.
ByteTrack — базовый вариант, особенно если проблема связана с потерей слабых детекций.
BoT-SORT можно попробовать при движении камеры и частых пересечениях объектов.
OC-SORT полезен для сцен с резкими изменениями направления движения.
Поэтому здесь нужен эксперимент — прогнать один и тот же детектор через несколько трекеров и сравнить не только общий score, но и конкретные ошибки (fragmentation и ID switch).
Не бойтесь экспериментировать и сочетать сильные стороны каждого алгоритма в своём пайплайне 💪🏻
Шаг 7. Что такое уверенность детектора?
Представим bbox с confidence 0.3. Сам по себе это слабый сигнал.
Но если детекция появилась именно там, где мы ожидаем увидеть существующий трек, и совпадает с ним по положению, размеру и движению, её уже будет нелогично выбрасывать.
В BoostTrack используется похожая идея: оценка детекции корректируется с учётом её соответствия существующему треку.
То есть к вопросу: «Насколько уверен детектор?» добавляем: «Насколько эта детекция соответствует тому, что мы ожидаем увидеть?»
Итого: без дообучения модели пофиксили FP и стабилизировали детекции.
На курсе CV Rocket также разберем, как увеличить TP с помощью трекера и другие адаптации под ваши задачи. Присоединяйтесь до 15 сентября со скидкой 20%!
Авторы: Башаров Илья, Холодов Семен (НКБТех) | 3 909 |
