Инженерообязанный🫡 | Владимир Шустиков | Инженер Данных | Аналитик Данных
الذهاب إلى القناة على Telegram
Привет! Я Шустиков Владимир, Data Engeneer | Data Analytic 👉 RoadMap: https://roadmappers.ru/ 👉 Общий чат: https://t.me/+p-0NiSWmQ5ZhZmEy 👉 Youtube канал: https://www.youtube.com/@shust_de По сотрудничеству и рекламе: @ShustDE
إظهار المزيد4 068
المشتركون
+524 ساعات
+347 أيام
+12630 أيام
جاري تحميل البيانات...
القنوات المماثلة
لا توجد بيانات
هل تواجه مشاكل؟ يرجى تحديث الصفحة أو الاتصال بمدير الدعم الخاص بنا.
سحابة العلامات
الإشارات الواردة والصادرة
---
---
---
---
---
---
جذب المشتركين
يوليو '26
يوليو '26
+147
في 0 قنوات
يونيو '26
+192
في 2 قنوات
Get PRO
مايو '26
+247
في 2 قنوات
Get PRO
أبريل '26
+300
في 1 قنوات
Get PRO
مارس '26
+507
في 3 قنوات
Get PRO
فبراير '26
+510
في 3 قنوات
Get PRO
يناير '26
+101
في 1 قنوات
Get PRO
ديسمبر '25
+76
في 1 قنوات
Get PRO
نوفمبر '25
+119
في 2 قنوات
Get PRO
أكتوبر '25
+120
في 1 قنوات
Get PRO
سبتمبر '25
+116
في 1 قنوات
Get PRO
أغسطس '25
+184
في 4 قنوات
Get PRO
يوليو '25
+181
في 2 قنوات
Get PRO
يونيو '25
+181
في 2 قنوات
Get PRO
مايو '25
+243
في 5 قنوات
Get PRO
أبريل '25
+236
في 2 قنوات
Get PRO
مارس '25
+247
في 3 قنوات
Get PRO
فبراير '25
+252
في 5 قنوات
Get PRO
يناير '25
+353
في 4 قنوات
Get PRO
ديسمبر '24
+313
في 7 قنوات
Get PRO
نوفمبر '24
+249
في 2 قنوات
| التاريخ | نمو المشتركين | الإشارات | القنوات | |
| 22 يوليو | +2 | |||
| 21 يوليو | +7 | |||
| 20 يوليو | +9 | |||
| 19 يوليو | +14 | |||
| 18 يوليو | +4 | |||
| 17 يوليو | +3 | |||
| 16 يوليو | +9 | |||
| 15 يوليو | +3 | |||
| 14 يوليو | +4 | |||
| 13 يوليو | +6 | |||
| 12 يوليو | +2 | |||
| 11 يوليو | +8 | |||
| 10 يوليو | +6 | |||
| 09 يوليو | +12 | |||
| 08 يوليو | +10 | |||
| 07 يوليو | +8 | |||
| 06 يوليو | +9 | |||
| 05 يوليو | +3 | |||
| 04 يوليو | +4 | |||
| 03 يوليو | +7 | |||
| 02 يوليو | +10 | |||
| 01 يوليو | +7 |
منشورات القناة
Ребят у Жени вышел шикарный видос 2я часть вопросов собеседований на Инженера Данных.🙀
https://youtu.be/BWSXh1Ussms
Берём и залетаем👍
Комментарии, лайки и подписка, репосты – приветствуется все, что продвигает канал!🫰
| 2 |  +7Самое сложное в получении премии – это не работа
А написать самому про себя. 😂
Сейчас у меня в компании проходит мероприятие, так называетмое "Оценка 360 – Review". И когда приходит время, начитается: А что ты делал? Чем занимался? Каких успехов достиг?
Нууу... работу делал.
Потом открываешь список своих задач за полгода:
🤢Миграция
🤢Стриминг
🤢ClickHouse
🤢Flink
🤢Iceberg
И вроде понимаешь, что работы было дохрена, но писать про себя всё равно максимально неловко и не знаешь от чего оттолкнуться.
И в конце концов еще нужно описать коллег и коллеги пишут о тебе.
Я думал, что люди будут писать что-то вроде:
— Володя сделал миграцию.
— Володя шарит в ClickHouse.
— Володя настроил стриминг.
Но если почитать отзывы они в целом вообще были не про технологии.
Они про то, что:
• всегда можно прийти спросить
• объясняю сложные вещи простыми словами
• провожу митапы
• помогаю быстрее разобраться в новых технологиях
• и т.д. (можете почитать сами)
И в этот момент я поймал себя на мысли. Еще пол года назад думал, что премия зависит от количества закрытых карточек и от быстры выполнения задач.
На самом деле — нет!
Во многих компаниях оценивают не только что ты сделал, но и какое влияние оказал на команду.
Код рано или поздно перепишут. А вот то, что благодаря тебе люди стали работать быстрее и сильнее, — обычно запоминают надолго.
Мне кажется, это вообще одна из самых недооценённых тем в IT. Многие думают, что главное — закрывать тикеты. А потом удивляются, почему человек, который сделал меньше задач, получает выше оценку и большую премию. Очень часто разница именно в софт-скиллах и в том, какое влияние ты оказываешь на команду.
Софты решают! | 1 193 |
| 3 |  Ну всё, ухожу из IT на стройку. 👷
На самом деле просто давно не выходил на связь. Каюсь! Но, кажется, у меня есть уважительные причины. 😄
1️⃣ Работа
В последнее время на работе образовался настоящий завал. Новые задачи, новые направления, пришлось во всё это активно погружаться и разбираться.
2️⃣ Буткемпик
У нас сейчас идёт первый поток, и оказалось, что создать программу — это только половина дела. После каждой лекции собираем обратную связь и спрашиваем: что улучшить, где-то перестроить объяснение, добавить реальные кейсы, но при этом сохранить формат обучения с полного нуля. Приходится находить время и повторно читать лекции.
Короче говоря, курс для начинающий постоянно становится лучше!
3️⃣ И самое приятное...
🎉 Я ПОЛУЧИЛ КЛЮЧИ ОТ СВОЕЙ КВАРТИРЫ!🎉
А дальше всё как положено: приёмка, документы, замеры, дизайнер, бесконечные поездки в квартиру и ощущение, что ремонт — это ещё одна полноценная работа.
Теперь после основной работы, Буткемпа, менторства и созвонов начинается вторая смена — ремонт. 🔨
Так что если вдруг в канале начнут появляться стены, электрика, мешки с клеем и прочие радости взрослой жизни — не удивляйтесь. 😂
Если честно, тема ремонта меня уже начинает затягивать. Вчера, например, несколько часов с дизайнером бегали с рулеткой, размечали стены, окна и будущую мебель. И оказалось, что там тоже куча интересных нюансов.
Так что, если вам интересна тема ремонта или у вас есть опыт, которым готовы поделиться, — с удовольствием пообщаюсь. Думаю, ошибок я ещё успею наделать достаточно. 😄
И, кстати...
Нас уже больше 4000 человек! ❤️
Честно, до сих пор не верится. Хотя если бы каждый скинулся всего по 2000 рублей, я бы уже ипотеку закрыл... 😂
Ладно-ладно, это была шутка. (Ну почти.) | 1 347 |
| 4 |  ⏰ Сегодня последний день набора на Буткемпик!
Хочешь освоить **SQL и Python с нуля** и получить базу для старта в аналитике данных или Data Engineering?
За 2 месяца мы пройдем путь:
✅ от первого `SELECT` и `print()`;
✅ до оконных функций, ETL-процессов, работы с API и реальных задач.
Никакой воды — только практика, домашние задания, живые занятия и поддержка на протяжении всего обучения.
🚨 Сегодня набор закрывается.
Если давно хотел начать — сейчас самое время.
Подробности здесь – /bootcampik | 1 |
| 5 |  #кейсы
Как мы сократили время OPTIMIZE в ClickHouse почти в 2 раза
Есть таблица на ReplacingMergeTree, для которой регулярно выполнялся:
OPTIMIZE TABLE schema.table FINAL
SETTINGS optimize_throw_if_noop = 1;
Поначалу всё работало отлично. Но со временем таблица выросла примерно до 200 ГБ (в сжатом виде).
В какой-то момент начались инциденты.
📌Что произошло
Таблица была непартиционированной, поэтому OPTIMIZE FINAL каждый раз фактически проходил по всей таблице. Когда объем данных вырос, оптимизация перестала укладываться в таймаут драйвера с ClickHouse. На графике это видно как серию падений DAG (оранжевая область).
Чтобы восстановить работу, пришлось просто увеличить timeout драйвера. Выполнение стабилизировалось, но появилась другая проблема – каждая оптимизация стала занимать 3–4 часа. По итогу Time to Market у нас пошел по одному месту.
📌Решение
Так как нужно было удалять дубли в рамках ключа, применили хеш-партиционирование по ключу сортировки разбив её на 16 частей:
PARTITION BY cityHash64(id) % 16
После этого:
1) пересобрали таблицу;
2) выполнили EXCHANGE TABLE;
3) оптимизация стала выполняться параллельно по каждой партиции отдельно, а не по всей таблице сразу.
📌Итог
📊 На графике хорошо видно три этапа:
🟠 Инциденты – OPTIMIZE перестал укладываться в таймаут и начал падать.
🔵 Временное решение – Увеличили timeout соединения. Проблема исчезла, но время выполнения выросло до 3–4 часов.
🔴 Я тут как раз пересобирал таблицу
🟢 Окончательное решение – Перешли на хеш-партиционирование.
В результате время выполнения OPTIMIZE FINAL сократилось примерно в 1.5 раза, а сама операция стала значительно стабильнее.
Понятное дело, что мы можем еще поработать над параллельностью, над кодеками самих колонок, разложить не на 16 частей, а например на 32 и т.д. но важно понимать это инцидент, а не полноценная задача. Соответсвенно нужно сделать быстро и чтобы работало исправно, как только и тут зайдём на SLA в 2 часа, то начнём думать что делать дальше, вплоть до того чтобы оставлять только нужные данные, а остальные отправлять в архив.
_____________________
Хочешь изучить Python и SQL записывайся на 1й поток "Буткемпик" через @bootcampych_bot, старт через 2 дня – 1 июля! | 2 233 |
| 6 |  +2🎉 У меня сегодня день рождения — исполнилось 29 лет!
Если бы можно было дать совет себе из прошлого, я бы сказал всего одну фразу:
Красавчик. Ты и так всё делаешь правильно и добьёшься всего чего хочешь!
За последние несколько лет произошло столько всего, что вернувшись назад я(из прошлого) бы в это просто не поверил.
Так что погнали дальше. Инсульт в 40 сам себя не получит🤣 | 1 970 |
| 7 |  BootCamp Июль НАБРАН!
Друзья, мы набрали июльский поток полностью! Стартуем уже 1 июля.
Продажи на июльский поток мы АСТАНАВЛИВАЕМ!
Потому что BootCamp, как Москва, НЕРЕЗИНОВЫЙ. У нас с каждым новым потоком появляются все более свежие идеи. Теперь у нас есть ТРИ ПЕТ проекта, которые можно реализовать за время обучения. От простого к сложному. Т.е. буквально базовый делают все, а вот более сложные свзязки инструментов можно собрать добровольно.. но я рекомендую пробовать ВСЕ!
По поводу следующего потока! Он БУДЕТ! По датам сообщим в районе 10-15 июля. У нас есть мысли добавить опцию "Собираем легенду индивидуально". Это про то, чтобы переупаковать ваш опыт в релевантный и подходящий рассказ. Возможно мы сделаем буткемп длиннее и добавим дополнительные варианты оплаты в плане рассрочек. Также будет больше времени на тестирование своих пет проектов и постройку бОльшего числа пайплайнов.
Плюс я навайбкодил небольшой конструктор Пет Проектов, чисто для Дата Инженеров, чтобы можно было собрать связку под себя, под свой опыт. Потому что основная боль, которая возникает у ребят: "Много инструментов, но как все связано между собой, непонятно!"
КСТАТИ
Если вы хотите на BootCamp, но пока еще не знаете python и sql, то приглашаем на БуткемпИК!
Это для тех, кто совсем сейчас в нулевой точке и хочет спокойно со всеми разобраться в программировании. Старт 1 июля.
Записаться, оплатить и попасть сразу в чат можно тут
➡️ @bootcampych_bot | 1 535 |
| 8 |  Изучить SQL и Python не сложнее, чем собрать LEGO.
Главное — чтобы кто-то показал, какие детали нужны и в каком порядке их соединять.
Именно для этого мы создали Буткемпик. Для тех, кто уже давно хочет, но коллебается моё это или не моё и не знает с чего начать своё обучение.
Если ты ждал знак СВЫШЕ, вот он: "Это ТВОЁ! Ты главное прояви усидчивость!"
Хватит колебаться, переходи /bootcampik за всеми подробностями и не бойся задавать вопросы! | 76 |
| 9 |  ▶️ Пет Проект для Дата Инженера
https://youtu.be/pC9AvMwv10Y
https://youtu.be/pC9AvMwv10Y
https://youtu.be/pC9AvMwv10Y
Презентация + код проекта уже доступны в нашем боте
Пиши боту /pet и он пришлет тебе материалы по пет проекту
➡️ @bootcampych_bot | 1 541 |
| 10 |  Где искать задачи, которых нет в учебниках? На реальной инфраструктуре.
Ozon Tech открыл регистрацию на Робозон — хакатон по автоматизации сортировочного центра с призовым фондом 15 000 000 рублей.
В этих центрах Ozon ежедневно проходит до 55 млн операций. Товары, потоки, роботы, алгоритмы — всё это живая, высоконагруженная система, где каждая миллисекунда и каждый байт имеют цену.
Что нужно сделать?
1. Имитационное моделирование — построить цифровой двойник движения товаров, чтобы просчитывать сценарии без остановки производства.
2. Инженерные решения для сортировки — спроектировать механизмы и логику, которая ускорит физический процесс.
3. Компьютерное зрение — обучить систему классифицировать и обрабатывать товары быстрее и точнее человека.
Формат:
Хакатон пройдёт в два этапа. Сначала онлайн (со 2 июля по 12 сентября), где вы решаете задачи. Затем на конференции E-CODE, где вы защищаете решения и получаете призы за них. Дорога и проживание — за счёт Ozon Tech.
Почему это интересно?
Не только из-за призового фонда. Мне как инженеру интересно:
— пощупать инфраструктуру уровня e-com-гиганта. Это не pet-проект на коленке, а настоящий распределённый конвейер с петабайтами данных.
— увидеть, как принимаются инженерные решения в условиях реальных ограничений: время, точность, надёжность. Это лучший способ прокачать системное мышление.
— получить обратную связь от инженеров Ozon Tech, которые каждый день строят эту логистику. Это дороже любых онлайн-курсов.
Регистрация открыта до 11 июля. Всё просто: переходите по ссылке, заполняйте форму, собирайте команду или идите соло — и погружаетесь в мир высоконагруженной автоматизации.
P.S. Даже если не планируете побеждать, сам процесс решения живых инженерных задач — бесценный опыт. А опыт в резюме — это то, что работает всегда. | 2 079 |
| 11 |  🔥ЗАПУСКАЕМ НОВЫЙ ПРОЕКТ🔥
Друзья, команда Roadmappers.ru официально запускает новый продукт "Буткемпик"!
Мы запускаем первый поток, где за 18 занятий вы не просто изучите SQL и Python, а пройдёте путь от базовых запросов до решения настоящих рабочих кейсов Инженера Данных, Аналитика Данных и т.д.
📅 Продолжительность программы — 2 месяца.
Формат обучения:
Формат обуения будет ОДИН в ОДИН, как на Буткемпе, а это значнит:
🔥Живые лекци. Не заканчиваем лекцию пока не закроем все вопросы!
🔥Чуть ли не круглосуточная поддержка с живым чатом
🔥Домашние задания и конечная проектная работа
🔥Доступная инфраструктура, нужен только браузер
🔥Обучение проходит на реальных кейсах
🔥Каждая лекция записывается, так что если даже пропустил занятие не парься
SQL-блок:
1. Первый SELECT и фильтрация → SELECT, типы данных, простые функции, WHERE, AND/OR, IN, BETWEEN, LIKE, ILIKE, CAST.
2. Трёхсостоятельная логика, NULL, CASE, сортировка, уникальность → NULL, NULLIF, COALESCE, CASE, ORDER BY, DISTINCT. NULL, ломающий NOT IN.
3. Соединение таблиц → INNER JOIN, LEFT/RIGHT JOIN, FULL JOIN, CROSS JOIN.
4. Агрегация данных → GROUP BY, агрегатные функции, HAVING, типы (DATE, TIMESTAMP, INTERVAL), функции (date_trunc, extract)
5. DDL (структура базы) + DML (манипуляция данными) → CREATE, ALTER, DROP, ограничения. INSERT, UPDATE, DELETE, UPSERT, кейсы загрузки данных.
6. Операции над выборками → UNION, UNION ALL, EXCEPT, INTERSECT, подзапросы, CTE.
7. Оконные функции → ранжирование, агрегации, смещения (LAG/LEAD).
8. Сложные аналитические кейсы → «последнее действие пользователя», «перевод хранения срез → интервалы», «скользящее окно»,«сравнение таблиц до и после преобразований».
9. Оптимизация запросов → порядок выполнения, EXPLAIN, планы запросов, виды JOIN, VACUUM, ANALYZE. Индексы и партиции → B-tree, кластерные индексы, партиционирование.
Python-блок:
1. Почему именно Python и наша первая строчка кода → пеhвый print, переменные, типы данных, операции над данными, условия if/elif/else, ввод данных input()
2. Структуры данных → списки, словари, кортежи, множества. (list, dict, tuple, set). Основные их методы.
3. Циклы и обработка данных → for для различных структур данных, while и бесконечные циклы.
4. Функции и структурирование кода → функции def, генераторы, передача аргументов (*args, **kwargs)
5. Работа с файлами → как считывать файлы, как их обрабатывать. Pandas – наше всё! Ехууууу.... Строим первый ETL-процесс.
6. Ошибки, исключения и логирование → try/except/finaly наше всё! Правильное логирование ошибок, залог успешного разработчика!
7. Работа с API и загрузка данных в БД → Библиотека requests, ну и познакомимся с загрузкой данных через psycopg и pandas
8. Рабочий кейс → по выгрузке, трансформации и загрузки данных. Посмотрим на реальную рабочую задачу Инженера Данных/Аналитика Данных.
Стоимость.
Вся эта красота стоит всего 12_000 рублей за весь поток. Также доступны беспроцентные рассрочки на 2 месяца.
Подытожим, за эти деньги вы получаете:
✅ 18 полноценных занятий с преподавателями.
✅ Проверку домашних заданий.
✅ Поддержку в чате.
✅ Итоговый проект.
✅ Практические навыки, которые можно применять в работе уже во время обучения.
И всё это в десятки раз дешевле, чем индивидуальная работа с ментором или с репетитором. Всего 650 рублей за занятие.
🚀 Если давно хотели начать путь в IT, подтянуть SQL и Python или сделать первый шаг в сторону Data Engineering и Data Analytics — сейчас самое время.
Старт уже скоро. Приобретай и залетай на первый поток через бота @bootcampych_bot и выбирай "Хочу на БуткепИК"!
P.S.
Первый поток будет обкатываемый(где-то материал добавим, где то уберём), поэтому стоимость составляет всего 12_000 ₽. В следующих потоках цена может быть пересмотрена. Кол-во мест ограничено! | 1 652 |
| 12 |  🔥ЗАПУСКАЕМ НОВЫЙ ПРОЕКТ🔥
Друзья, команда Roadmappers.ru официально запускает новый продукт "Буткемпик"!
Мы запускаем первый поток, где за 18 занятий вы не просто изучите SQL и Python, а пройдёте путь от базовых запросов до решения настоящих рабочих кейсов Инженера Данных, Аналитика Данных и т.д.
📅 Продолжительность программы — 2 месяца.
Формат обучения:
Формат обуения будет ОДИН в ОДИН, как на Буткемпе, а это значнит:
🔥Живые лекци. Не заканчиваем лекцию пока не закроем все вопросы!
🔥Чуть ли не круглосуточная поддержка с живым чатом
🔥Домашние задания и конечная проектная работа
🔥Доступная инфраструктура, нужен только браузер
🔥Обучение проходит на реальных кейсах
🔥Каждая лекция записывается, так что если даже пропустил занятие не парься
SQL-блок:
1. Первый SELECT и фильтрация → SELECT, типы данных, простые функции, WHERE, AND/OR, IN, BETWEEN, LIKE, ILIKE, CAST.
2. Трёхсостоятельная логика, NULL, CASE, сортировка, уникальность → NULL, NULLIF, COALESCE, CASE, ORDER BY, DISTINCT. NULL, ломающий NOT IN.
3. Соединение таблиц → INNER JOIN, LEFT/RIGHT JOIN, FULL JOIN, CROSS JOIN.
4. Агрегация данных → GROUP BY, агрегатные функции, HAVING, типы (DATE, TIMESTAMP, INTERVAL), функции (date_trunc, extract)
5. DDL (структура базы) + DML (манипуляция данными) → CREATE, ALTER, DROP, ограничения. INSERT, UPDATE, DELETE, UPSERT, кейсы загрузки данных.
6. Операции над выборками → UNION, UNION ALL, EXCEPT, INTERSECT, подзапросы, CTE.
7. Оконные функции → ранжирование, агрегации, смещения (LAG/LEAD).
8. Сложные аналитические кейсы → «последнее действие пользователя», «перевод хранения срез → интервалы», «скользящее окно»,«сравнение таблиц до и после преобразований».
9. Оптимизация запросов → порядок выполнения, EXPLAIN, планы запросов, виды JOIN, VACUUM, ANALYZE. Индексы и партиции → B-tree, кластерные индексы, партиционирование.
Python-блок:
1. Почему именно Python и наша первая строчка кода → пеhвый print, переменные, типы данных, операции над данными, условия if/elif/else, ввод данных input()
2. Структуры данных → списки, словари, кортежи, множества. (list, dict, tuple, set). Основные их методы.
3. Циклы и обработка данных → for для различных структур данных, while и бесконечные циклы.
4. Функции и структурирование кода → функции def, генераторы, передача аргументов (*args, **kwargs)
5. Работа с файлами → как считывать файлы, как их обрабатывать. Pandas – наше всё! Ехууууу.... Строим первый ETL-процесс.
6. Ошибки, исключения и логирование → try/except/finaly наше всё! Правильное логирование ошибок, залог успешного разработчика!
7. Работа с API и загрузка данных в БД → Библиотека requests, ну и познакомимся с загрузкой данных через psycopg и pandas
8. Рабочий кейс → по выгрузке, трансформации и загрузки данных. Посмотрим на реальную рабочую задачу Инженера Данных/Аналитика Данных.
Стоимость.
Вся эта красота стоит всего 12_000 рублей за весь поток. Также доступны беспроцентные рассрочки на 2 месяца.
Подытожим, за эти деньги вы получаете:
✅ 18 полноценных занятий с преподавателями.
✅ Проверку домашних заданий.
✅ Поддержку в чате.
✅ Итоговый проект.
✅ Практические навыки, которые можно применять в работе уже во время обучения.
И всё это в десятки раз дешевле, чем индивидуальная работа с ментором или с репетитором. Всего 650 рублей за занятие.
🚀 Если давно хотели начать путь в IT, подтянуть SQL и Python или сделать первый шаг в сторону Data Engineering и Data Analytics — сейчас самое время.
Старт уже скоро. Приобретай и залетай на первый поток через бота @bootcampych_bot и выбирай "Хочу на БуткепИК"!
P.S.
Первый поток будет обкатываемый(где-то материал добавим, где то уберём), поэтому стоимость составляет всего 12_000 ₽. В следующих потоках цена может быть пересмотрена. Кол-во мест ограничено! | 1 |
| 13 |  🔥 СТАРТУЕМ!!!!
ПЕТ-ПРОЕКТ DATA ENGINEER — В ПРЯМОМ ЭФИРЕ, ПРЯМО СЕЙЧАС!
Разбираем реальный пет-проект выпускника BootCamp.
Артём покажет полный путь данных:
NYTimes API → S3 → Spark → Greenplum → dbt → ClickHouse 🚀
Если думаешь над своим первым DE-проектом или хочешь посмотреть, как выглядит хороший pet-project на практике — залетай.
➡️ https://telemost.yandex.ru/live/0659244a923644079e4f819b342e64f4
Запись будет! | 312 |
| 14 |  ВСЕ НА СТРИМ!
ПЕТ-ПРОЕКТ ДАТА ИНЖЕНЕРА
➡ ссылка на стрим
➡ ссылка на стрим
➡ ссылка на стрим
🎙 Спикеры:
— @halltape
— @shustDE
— Артём Хорват (выпускник 6-го потока BootCamp)
📅 Среда 17 ИЮНЯ
⏰ 20:00 МСК | 267 |
| 15 | 🔥 ПЕТ-ПРОЕКТ ДАТА ИНЖЕНЕРА
В эту СРЕДУ 17 ИЮНЯ в 20:00 МСК у нас будет довольно интересный стрим. Причём проводить его будет не только команда BootCamp, но и один из наших выпускников.
К нам придёт Артем — участник 6-го потока BootCamp. За время обучения он собрал полноценный пет-проект и теперь покажет его нам от начала до конца.
➡️ ссылка на стрим
Что вообще будет в проекте?
Берём данные из API New York Times, складываем их в S3, грузим через Spark в Greenplum, строим витрины через dbt и публикуем результат в ClickHouse. Плюс логирование Airflow-задач в Postgres.
Ну т.е. это буквально пример рабочего пайплайна для Дата Инженера. Причем довольно внушительного по кол-ву используемых технологий.
На стриме Артём покажет:
— как устроен проект
— как принимались архитектурные решения
— почему были выбраны именно эти инструменты
— какие сложности возникли во время разработки
— что можно улучшить дальше
Будет полезно всем, кто сейчас думает над своим первым серьёзным проектом или хочет посмотреть, как выглядит нормальный DE pet-project в 2026 году.
🎙 Спикеры:
— @halltape
— @shustDE
— Артём (выпускник 6-го потока BootCamp)
📅 Среда 17 ИЮНЯ
⏰ 20:00 МСК
➡️ ссылка на стрим
Приходите, послушаем лекцию, посмотрим код и разберём проект по косточкам.
Запись будет!
Будет интересно 🚀 | 1 387 |
| 16 |  +1🟠ВОТ ЧТО БЫЛО И ВОТ ЧТО СТАЛО🟠
На первом скрине — наш Буткемп год назад. На втором — то, во что он превратился сегодня.
Если честно, когда мы с Женей только начинали, всё было намного проще. Тогда мы работали со Spark, ClickHouse и Airflow, показывали ребятам реальные процессы из своей работы и вели всех через один небольшой и простой пет-проект. Для этого двух месяцев было более чем достаточно.
Мы сами ещё многого не знали. Учились, набивали шишки, меняли работу, попадали на новые проекты и каждый раз приносили этот опыт обратно в Буткемп.
За этот год программа сильно изменилась.
Появились:
🌟 GreenPlum
🌟 DBT
🌟 Trino
🌟 Iceberg + S3
🌟 дополнительные проекты
🌟 больше практики
🌟 больше домашних заданий
И это ещё не конец! Уже сейчас мы активно работаем со стримингом и практически уверены, что в будущих потоках появятся Kafka, Flink, NiFi и другие инструменты потоковой обработки данных.😈
Но вместе с этим появилась и другая проблема.🤢
Когда-то мы говорили, что для комфортного обучения понадобится 7–10 часов в неделю. Сегодня реальность такая, что многим требуется уже 10–15 часов.😠
Материала стало настолько много, что два месяца перестали быть идеальным форматом. Нам даже пришлось сократить количество мок-собеседований, чтобы успевать проходить всю техническую программу.
Поэтому после завершения 7 потока(июль-август) мы планируем взять паузу и подумать над дальнейшим развитием проекта.
🤔Возможно, Буткемп станет длиннее.
🤔Возможно, обучение инструментам и подготовка к собеседованиям станут отдельными продуктами.
🤔Возможно, появятся совершенно новые форматы.
😭А возможно его больше вообще не будет!
Но одно можем сказать точно.
За этот год Буткемп перестал быть просто набором лекций. Сегодня это уже полноценный путь от SQL и Python до современного Data Engineering стека.
И всё это благодаря Вам — людям, которые доверили нам своё обучение и свое будущее ❤️
Попасть на 7 поток можно здесь: @bootcampych_bot | 2 130 |
| 17 |  🚀 Data Engineer за 2 месяца
Не кликбейт. Мы реально сделали супер интенсив за 2 месяца в DE.
Это буквально копия вашей будущей работы.
Представьте, что вы приходите на новое место работы, и увольняющийся коллега передаёт вам дела. У него есть две недели, чтобы показать, что и как делать. Вы буквально впитываете всё как губка, потому что потом спрашивать будет не у кого.
Так вот именно эту идею мы и вложили в Bootcamp!
За короткое время вы погружаетесь в работу инженера данных, осваиваете современный стек и получаете навыки прохождения собеседований и составления резюме.
Мы реально вычеркнули большую часть бесполезной теории. Упор исключительно на практику.
Чтобы вы пришли на работу и сказали: "Мы это уже делали"
Что внутри буткемпа
Вы получаете доступ к инфраструктуре, максимально приближенной к продакшену:
• Postgres
• ClickHouse (распределённый, 2 шарда)
• GreenPlum (8 сегментов)
• Spark
• S3
• AirFlow
• Kafka
• DBT
• GitHub
• Jira
• Confluence
Как часто занятия?
• 3 раза в неделю (Живые лекции, на которых можно задать вопрос и сразу получить ответ)
• Вечером (после работы) в 20:00 по МСК
• Все лекции записываются и доступны навсегда
Поддержка и практика
• Чат с ответами почти 24/7
• Можно задать любой вопрос
• Можно попросить задачу сложнее
• Разбор ваших решений на созвонах
Подготовка к работе
• Mock собеседования
• Прожарка резюме
• Разбор реальных кейсов
После буткемпа все выпускники приглашаются в чат, где мы делимся ситуацией на рынке, вопросами с собесов, а также поддерживаем друг друга!
Кстати, мы добавили классную фишку — доступ к лекциям из новых потоков. Даже после окончания буткемпа вы остаетесь в обучении и можете следить за обновлениями.
А если не успеваете?
У нас есть InfraSharing. Это тот же самый буткемп, но без лекций. Просто готовая инфраструктура. Даже если не успеваете сделать все задачи в Bootcamp, можете продолжить в InfraSharing. Тем более для всех выпускников мы даем огромную скидку!
Ближайший старт потока — 1 июля
Переходите в наш бот @bootcampych_bot и жми Хочу на BootCamp | 1 978 |
| 18 |  Большой подкаст про дата-инжиниринг и аналитику!
Обсудили, чем на практике отличаются дата-инженеры, дата-аналитики и продуктовые аналитики, какие задачи у каждой роли, какие инструменты нужно знать и почему между аналитиками и инженерами иногда возникают конфликты.
▶️ https://youtu.be/rNkFGDsvCog
▶️ https://youtu.be/rNkFGDsvCog
▶️ https://youtu.be/rNkFGDsvCog
О чем:
— зарплаты Data Engineer и Data Analyst
— SQL, Python, Airflow, Spark и другие инструменты
— собеседования, резюме и карьерный рост
— AI в Data-сфере
— обучение, курсы и переход в IT после 30+
Про деньги, вход в профессию, накрутку опыта, возраст, курсы, софт-скиллы, ответственность и реальную работу с данными.
Если думаете, куда идти — в аналитику или дата-инжиниринг — этот выпуск поможет лучше понять обе профессии изнутри.
ссылки на авторов:
Я — Дата Инженер
Инженерообязанный
Аналитический джаз | 2 161 |
| 19 | 📸 Отзывы участников
#BootCampDE — ноябрь-декабрь
Очередной оффер у буткемповцев.
________
Запись на 7 поток(Июль-Август) уже в самом разгаре!
Записывайся @bootcampych_bot | 2 356 |
| 20 |  Всем ёуууу!😎✌️
Давно не писал ничего нормального и душевного. А знаете почему?
Я обленился до нельзя. Вот прям максимально.
Работа ещё как-то держит меня на плаву — и всё.
Сейчас мой день выглядит примерно так:
Проснуться -> открыть комп -> сходить на встречки -> поделать задачки -> лечь спать.
И самое забавное — когда-то я о таком графике мечтал. Но, как оказалось, когда у тебя пропадает какая-либо движуха, ты начинаешь потихоньку превращаться в овоща. Я перестал развиваться как физически, так и умственно. Из-за этого начинаешь сам себя загонять в какой-то депресняк: тяжело вставать по утрам, ничего не хочется делать, энергия на нуле и так далее.
Но хватит это терпеть!
Если с физической частью всё понятно — пойду куплю абонементик в зал, и на вас это никак не повлияет, то вот с МОЗГАМИ ситуация интереснее.⚪️
Хотя кого я обманываю… Я просто купил такой же “абонемент”, только для мозга — записался на курс Глеба Михайлова по алгосам.
Почему именно туда:
1. Глебушка — один из первых IT-блогеров, которого я начал смотреть ещё когда хотел стать “Аналитиком Данных”. У него какая-то уникальная харизма, он как родной человечик. Чего только стоит объяснение матстата на примере “Виноградного дня”(Кто помнит — тот сейчас пустил скупую слезу. И это я про напиток).
2. Да, я мог просто открыть LeetCode и решать задачки сам. Но мне захотелось именно какого-то группового и дружеского вайба.
3. Это ещё и повод снова писать вам про обучение. А то блог про учёбу\работу\продукты – есть, а когда я сам в последний раз рассказывал, что чему-то учусь — уже и не помню.
4. Ну и как говорил один дед: “Алгосы для того учить надо – потому что они ум в порядок приводят”.
Я уже пообщался с Глебом лично, и мы оба пришли к выводу, что я сутулая псина🐶🐶, которой срочно нужно трансформироваться в леопарда 🐆
Так что с 1 июня стартует процесс – ЭЭЭВВВООООООЛЛЛЛЮЮЮЮЦЦЦИИИИИИИИИ.(тут типо замеднение)
А ещё у меня в планах начать подрубить стримы на YouTube и Twitch с процессом моего обучения. Начну как раз с прохождения этого курса, а дальше буду разбавлять всё интересным и весёлым контентом.
Идей уже накопилось прилично. А исполнять их лень. Вон вторую часть про движки клика уже 2 месяца сделать не могу!
Но об этом чуть позже! | 2 056 |
