Я – Дата Инженер | Евгений Виндюков
前往频道在 Telegram
💵 Как стать Data Engineer 🗄 Смотри Roadmap в закрепе! _____________________________ Автор @halltape Все вопросы по рекламе @k_shredinger
显示更多5 849
订阅者
+524 小时
+447 天
+10930 天
数据加载中...
吸引订阅者
九月 '26
九月 '26
+111
在0个频道中
八月 '26
+200
在2个频道中
Get PRO
七月 '26
+239
在0个频道中
Get PRO
六月 '26
+219
在4个频道中
Get PRO
五月 '26
+313
在2个频道中
Get PRO
四月 '26
+339
在1个频道中
Get PRO
三月 '26
+399
在4个频道中
Get PRO
二月 '26
+355
在1个频道中
Get PRO
一月 '26
+170
在1个频道中
Get PRO
十二月 '25
+122
在1个频道中
Get PRO
十一月 '25
+183
在2个频道中
Get PRO
十月 '25
+249
在2个频道中
Get PRO
九月 '25
+157
在1个频道中
Get PRO
八月 '25
+183
在3个频道中
Get PRO
七月 '25
+214
在0个频道中
Get PRO
六月 '25
+204
在2个频道中
Get PRO
五月 '25
+276
在2个频道中
Get PRO
四月 '25
+237
在6个频道中
Get PRO
三月 '25
+272
在6个频道中
Get PRO
二月 '25
+215
在5个频道中
Get PRO
一月 '25
+300
在2个频道中
Get PRO
十二月 '24
+227
在7个频道中
Get PRO
十一月 '24
+229
在3个频道中
Get PRO
十月 '24
+284
在1个频道中
Get PRO
九月 '24
+161
在1个频道中
Get PRO
八月 '24
+205
在4个频道中
Get PRO
七月 '24
+215
在2个频道中
Get PRO
六月 '24
+178
在1个频道中
Get PRO
五月 '24
+221
在3个频道中
Get PRO
四月 '24
+214
在2个频道中
Get PRO
三月 '24
+166
在3个频道中
Get PRO
二月 '24
+123
在2个频道中
Get PRO
一月 '24
+109
在2个频道中
Get PRO
十二月 '23
+76
在1个频道中
Get PRO
十一月 '23
+303
在2个频道中
| 日期 | 订阅者增长 | 提及 | 频道 | |
| 16 九月 | +6 | |||
| 15 九月 | +9 | |||
| 14 九月 | +8 | |||
| 13 九月 | +5 | |||
| 12 九月 | +6 | |||
| 11 九月 | +4 | |||
| 10 九月 | +14 | |||
| 09 九月 | +8 | |||
| 08 九月 | +9 | |||
| 07 九月 | +12 | |||
| 06 九月 | +4 | |||
| 05 九月 | +6 | |||
| 04 九月 | +4 | |||
| 03 九月 | +8 | |||
| 02 九月 | +7 | |||
| 01 九月 | +1 |
频道帖子
☁️☁️☁️☁️☁️☁️☁️
Дата-инженерия — это не только про ETL и пайплайны, это ещё и про то, куда движется вся экосистема данных. 24 сентября Yandex Cloud проведёт Yandex Scale 2026 — и в Data-треке будет ровно то, что стоит смотреть, если хотите понимать рынок, а не только свой стек.
🎨🎨🎨🎨🎨🎨🎨🎨🎨🎨 🎨🎨🎨🎨🎨🎨🎨🎨🎨🎨 🎨🎨🎨🎨🎨🎨🎨🎨🎨 Расскажут, как Yandex Cloud собирает аналитику в единую бесшовную среду — от загрузки данных до готовых инсайтов, с ИИ на каждом шаге. Покажут, как YDB используют для рекомендательных и поисковых систем и ИИ-ассистентов. Отдельно — кейс «Додо Пиццы»: как компания перенесла десятки терабайт в Yandex Cloud и сравнивала опыт с западным облаком. Хороший пример для тех, кто когда-нибудь будет защищать миграцию перед своим CTO.
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
Ещё разберут путь Yandex Cloud к самоуправляемым базам данных — на опыте эксплуатации тысяч баз в Яндексе, и
миграцию Oracle Exadata на Lakehouse
без единого аврала («Азбука вкуса» поделится). На воркшопах — практика: разберём сценарии
Нейроаналитика в DataLens
, посмотрим, как
PGHouse даёт PostgreSQL
выполнять
OLAP-запросы в ClickHouse без переписывания SQL
, и соберём поисковую систему на Serverless YDB с полнотекстовыми и векторными индексами.
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
🎨
Офлайн
будет 2000+ человек
— есть с кем обсудить свой roadmap вживую, а не только в комментариях. Знакомиться удобно через
бот-мэтчер
— работает по принципу Tinder, сам подбирает собеседников.Участие бесплатное, регистрация на сайте — заносите в календарь.
| 2 | У кого также?
https://youtube.com/shorts/t3jNP7uKLA8?si=uBELMi6JTjznj1xU | 1 301 |
| 3 | Что происходит с рынком DE?
его нет. все кончено. только на завод. надо было раньше. раньше было лучше.
ОТСТАВИТЬ ПАНИКУ!
У нас есть чат выпускников BootCamp, и я сгрузил оттуда сообщения и пропустил через ChatGPT.
Вот, что вышло:
Рынок живой, но неоднородный:
- вакансий достаточно, особенно в крупных банках, ритейле и интеграторах
- работодатели стали заметно строже проверять реальный опыт
- основной фильтр — SQL, Python, Spark и понимание DWH
- удалёнка по РФ встречается часто, но хорошие предложения конкурируют за сильных специалистов
- зарплаты для middle/senior в сильных командах находятся примерно в диапазоне 250–350 тыс. ₽ на руки
- одновременно сохраняется большой слой вакансий на 150–200 тыс. ₽, часто с более тяжёлыми требованиями;
- работодатели нередко ищут сразу нескольких инженеров, но вакансии могут долго висеть и пересматривать требования.
Зарплаты
150–170 тыс. ₽ - junior/middle, небольшие компании, локальные требования
около 200 тыс. ₽ - middle, аутсорсинг и банковские проекты
230–260 тыс. ₽ - middle с хорошим SQL/Python/Spark
300–350 тыс. ₽ - senior, streaming, ML-инфраструктура, крупные команды
350 тыс. ₽ и выше - сильный senior, удалёнка по миру, сложные data-платформы
Примеры из чатов:
Райффайзенбанк — от 300 тыс. ₽ на руки;
X5 — 320–350 тыс. ₽ на руки;
Selecty — 320–350 тыс. ₽ на руки;
Kostylworks — около 350 тыс. ₽ на руки;
Петрович Tech — 320–350 тыс. ₽ на руки;
Альфа-проекты — примерно 200–320 тыс. ₽;
отдельные вакансии — 150–170 тыс. ₽.
Самый востребованный стек
- SQL (Особенно CTE, оконные функции, JOIN, индексы, уровни изоляции, оптимизация запросов)
- Python (Часто проверяют структуры данных, ООП, итераторы, декораторы, асинхронность и простые алгоритмические задачи)
- Spark / PySpark (Партиционирование, shuffle, форматы Parquet/Avro, оптимизация, обработка больших объёмов данных)
- Airflow (Построение и сопровождение DAG, расписания, пайплайны, отказоустойчивость)
- Хранилища и DWH (ClickHouse, Greenplum, PostgreSQL, Hadoop, S3/MinIO, Trino, Iceberg)
- Streaming (Kafka, Flink, Debezium и real-time-пайплайны появляются в более дорогих вакансиях)
- Прочее (Мониторинг загрузок, поддержка продуктивных процессов, разбор инцидентов и качество данных становятся частью обычной работы DE)
Как проходят собеседования
HR-скрининг;
техническое интервью;
кейс или live coding;
интервью с заказчиком или командой;
иногда финальный этап непосредственно с банком;
в отдельных компаниях — проверка документов, полиграф или дополнительные анкеты
Типичные вопросы:
как обработать 100 ГБ данных в Spark;
почему Spark медленный;
как устроены партиции и shuffle;
отличие DWH от обычной БД;
индексы, JOIN и уровни изоляции;
проектирование схемы данных;
решение SQL-задач;
небольшие Python-задачи;
опыт с реальными объёмами и архитектурой.
При этом часть собеседований проходит без алгоритмов и live coding — только разговор по опыту и кейсам.
Продолжение в комментах... | 2 736 |
| 4 | Как же мне было влом решать задачу!
Собес на деньги:
320к - 350к на руки
Скажу честно, когда вижу задачу на собесе с лайвкодингом, сразу хочется просто скопировать в LLM и выдать ответ. Потому что оно реально так и решается. Я просто потерял смысл попыток решений таких задач. Кто пишет код вручную.. ну скорее всего сын маминой подруги. И тот самый айтишник, который в ОЙТИ еще со времен Рюрика. Кстати, выражаю огромный респект всем трушным программистам. Сейчас ОЙТИ уже не то...
Я в этот раз решил честно все пройти, попробовать. Но, как же мне было влом... Ну буквально надо вырыть яму лопатой, когда рядом стоит эксаватор)
Я написал где-то четверть и полностью забил на все нюансы из условий задачи.
Задача на мой взгляд непростая. В плане надо сразу несколько условий держать в голове. Плюс это CLICKHOUSE.
Какая компания, говорить не буду. Ну либо за 1млн долларов.
Есть таблица ClickHouse:
CREATE TABLE default.migration_report
(
RunId UUID,
CollectionName String,
DocumentName String,
StartedAt Nullable(DateTime),
CompletedAt Nullable(DateTime),
LastError String
)
ENGINE = ReplacingMergeTree
ORDER BY RunId
SETTINGS index_granularity = 8192;
Необходимо посчитать количество успешных и неуспешных загрузок за последний календарный месяц.
Результат должен содержать два столбца:
| succeeded | failed |
Условия:
1. Расчёт выполняется отдельно для каждого источника (`CollectionName`) и каждого календарного дня.
2. В течение одного дня у одного источника может быть несколько загрузок.
3. Если у источника произошла неуспешная загрузка (`LastError != ''`), то эта загрузка учитывается как failed, а все последующие загрузки этого источника в этот же день не учитываются.
4. Успешной считается загрузка, у которой `LastError = ''`.
5. Для преобразования даты и времени можно использовать функцию `toDate()`.
Напишите SQL-запрос для ClickHouse.
Решение задачи
WITH
toStartOfMonth(addMonths(today(), -1)) AS month_start,
toStartOfMonth(today()) AS month_end
SELECT
countIf(LastError = '' AND previous_failed = 0) AS succeeded,
countIf(LastError != '' AND previous_failed = 0) AS failed
FROM
(
SELECT
CollectionName,
toDate(StartedAt) AS upload_date,
LastError,
sum(LastError != '') OVER
(
PARTITION BY CollectionName, toDate(StartedAt)
ORDER BY StartedAt, RunId
ROWS BETWEEN UNBOUNDED PRECEDING AND 1 PRECEDING
) AS previous_failed
FROM default.migration_report
WHERE StartedAt >= month_start
AND StartedAt < month_end
) | 2 673 |
| 5 | 🚀 8-й поток стартует уже ЗАВТРА!
Ребят, кто хотел залететь на BootCamp по Data Engineering, но всё откладывал — вот он, тот самый последний момент 😁
Сегодня и завтра — последняя возможность присоединиться к 8-му потоку.
Дальше закрываем набор и начинаем учиться: SQL, Python, DE-стек, много практики, домашки, pet-проекты и живые занятия.
Кто с нами — погнали в Буткемпыч бот 🚀 | 2 197 |
| 6 | Хочу написать отзыв про буткемп. Меня зовут Тимур, я проходил курс буткемпа и разделил бы свой отзыв о курсе на несколько направлений:
1) Преподаватели
Женя и Володя — классные ребята, которые очень хорошо подают материал, объясняют всё максимально понятно. Даже если возникают какие-то тупые вопросы, они подробно на них ответят и помогут донести информацию максимально понятно. Почти всегда находятся на связи вне уроков в чате в Telegram и всегда готовы помочь.
2) Формат и структура курса
Очень классная идея, что курс максимально похож на рабочий процесс: есть Jira, Wiki, общий репозиторий и т. д. Благодаря этому те, кто с нуля приходит в профессию, будут гораздо увереннее чувствовать себя при устройстве на работу и в целом на собеседованиях.
Отдельно хочется отметить идею с крупным пет-проектом. Это очень классный опыт, который позволяет поработать со всеми возможными задачами, которые могут встретиться в работе Дата инженера. Конечно, глубина погружения зависит от самого ученика — захочет ли он усложнять проект или глубже разбираться в каких-то темах. Но за счёт того, что пайплайн строится с нуля и от начала до конца, можно хорошо понять, что и как происходит на каждом этапе работы деешника.
3) Инфраструктура
Очень круто настроена инфраструктура. За время обучения я вообще не сталкивался с проблемами, когда что-то падает или не работает, ресурсов более чем хватает. Также есть довольно широкий спектр инструментов на выбор, поэтому можно попробовать поработать практически со всеми актуальными «игрушками» дата-инженера в песочнице.
Исходя из моего опыта, далеко не на каждой работе DevOps так хорошо настраивали инструменты.
4) Учебные материалы
Мне нравится, что в видео даётся базовая, понятная и, наверное, самая необходимая информация по каждому из инструментов. А уже более глубокие темы можно изучить в Wiki — там довольно подробно и хорошо описаны различные детали. Если этого недостаточно, всегда можно обратиться к официальной документации. Но на первых этапах Wiki обычно вполне хватает.
При этом важно понимать, что желательно иметь хорошую базу по SQL и Python — это обязательно. Также желательно иметь хотя бы общее представление о базах данных и принципах работы с данными, чтобы было проще усваивать и понимать информацию. Но это не является обязательным условием: если что-то непонятно, всё объяснят и помогут разобраться.
В целом моя общая оценка крайне положительная. Мне всё понравилось, ставлю 10 из 10, всем советую) | 1 992 |
| 7 | У нас украли Буткемп. Но есть один нюанс — походу, люди сами не поняли, что именно они украли💩
Сегодня нашли наш Roadmappers BootCamp на одном сайте со слитыми курсами.
Стоит 500 рублей.
Ну думаем, ладно. Дожили. Буткемп слили!
Захожу посмотреть описание.
И тут выясняется, что мы, оказывается, всё это время преподавали...
СИСТЕМНОЕ АДМИНИСТРИРОВАНИЕ 😂
Цитирую описание нашего Буткемпа:
«Востребованный курс по администрированию. Осваивайте системное администрирование, сетевые технологии и управление серверами».
Блять! 7 потоков. Больше года:
Spark. Kafka. Airflow. ClickHouse. PostgreSQL. GreenPlum. Iceberg. Trino.
Строили ETL-пайплайны. Поднимали инфраструктуру. Работали с хранилищами. Разбирали архитектуру.
А оказывается, готовили – сисадминов.
Спасибо пиратам, хоть объяснили, чем мы занимаемся 😂
Но если серьёзно, эта ситуация очень хорошо показывает одну вещь.
Слить Буткемп невозможно!
Можно слить видеозаписи лекций. И если вам нужны именно они — ребят, ну вот они, оказывается, стоят 500 рублей.(покупка на свой страх и риск, мы не знаем чем на самом делел они там торгуют)
Только сам Буткемп никогда не был набором видео. Ты можешь посмотреть 50 часов про Spark, GreenPlum и ClickHouse и остаться ровно на том же месте.
Потому что самое важное начинается после лекции. Когда тебе нужно самому:
1. Написать пайплайн.
2. Сломать его.
3. Получить ошибку.
4. Не понять, почему оно не работает.
5. Разобраться.
6. Прийти к нам с вопросом.
7. Переделать.
8. Сделать домашку.
9. Собрать pet-проект.
А потом соединить всё это в одну из работающих систем:
📍 API → S3 → ClickHouse
📍API → S3 → GreenPlum → DBT → ClickHouse
📍API → Spark → Iceberg → Trino → ClickHouse
Вот это уже Буткемп!💪
Плюс менторы, обратная связь, разборы, инфраструктура, дополнительные блокноты, комьюнити, проекты и работа над тем, как потом весь полученный опыт нормально упаковать и выйти с ним на рынок.
Этого в папку на торренте не положишь!
Так что если хотите купить «курс системного администратора»(за ваш переход по сторонним ссылкам администраторы каналов, где находится пост отвественности не несут) за 500 рублей — велком ⚪️
А мы пока продолжим работать в направлении Data Engineer.
Видео можно скачать.
Опыт придётся получить самому.
__________
И, кстати, раз уж пираты бесплатно подогнали нам рекламную интеграцию 😂
1 сентября стартует 8-й поток Буткемпа.
Осталось — 7 мест.
Записаться можно через нашего бота Буткемпыч. | 3 186 |
| 8 | На 8-й поток Буткемпа осталось 10 мест.
Уже через неделю — 1 сентября. И вместе с новым учебным годом стартует новый поток Буткемпа 🚀
За время 7-го потока мы успели очень сильно докрутить программу.
Доработали материал по Iceberg и Trino и выстроили полноценный рабочий пайплайн:
API → Spark → Iceberg → Trino → ClickHouse
Плюс мы подготовили систему для формирования легенды и описания опыта в резюме.
Причём сделали её так, что она подойдёт даже охраннику, который вчера сидел на шлагбауме, а сегодня решил залететь в IT.💪
Кому вообще нужен Буткемп?
Если ты уже знаешь SQL и Python, но дальше смотришь на Spark, Airflow, ClickHouse, Trino, Iceberg и думаешь:
«Так... а как всё это изучать и как вообще между собой связано?»
— тебе к нам.
Если ты уже работающий Data Engineer / Data Analyst или на смежных IT вакансиях и хочешь расширить стек, закрыть пробелы и структурировать знания — тебе тоже к нам!
На онлайн-занятиях мы подробно разбираем технологии, механизмы их работы и, самое главное, учимся структурно мыслить и понимать, зачем мы вообще используем тот или иной инструмент.
А материала уже стало настолько много, что физически запихнуть всё в лекции невозможно. Поэтому по технологиям мы дополнительно подготовили отдельные блокноты: можно открыть нужную тему, пройти её самостоятельно, посмотреть примеры и разобраться глубже.
Короче.
1 сентября — старт 8-го потока.
Осталось 10 мест.
Для записи переходи в бот Буткемпыч 👈 | 2 175 |
| 9 | Ребят, чек лист для общения с HR
Я понимаю, что не все доходят в Roadmap до Резюме и Работа
Там если что есть удобный чек лист. Когда общаетесь с рекрутером, задавайте пожалуйста, тоже вопросы. Это во первых показывает вашу реальную заинтересованность в позиции, а во вторых не надо вспоминать, какие условия в компании.
Ниже пример заполнения чек листа:
roadmappers.ru
1млн на руки
География: удаленка мир
Направления работы:
Ставки на кликстрима, проектирование ДАТА контура ОКОЛОРеайлтайм (в Clickhouse).
Собирают команду. Платформенная команда.
Команда: Состав команды: 14 DE (1 руководитель)
Заказчики: Аналитики и Млщики
Источники данных: Cыряк из Кафки, PG, Оракл
Технологии: Hudi на HDFS, Kafka, CH, PG, Oracle
Техника: мак или винда выдают
Рабочий процесс: Agile, спринты
Задачи: Переезд на новую платформу. Есть база AeroSpike. Переезжают на Redis.
Этапы: Тех скрининг - лайвкодинг (Spark + SQL) -> Софт собес
Оформление: ТК РФ
Все совпадения случайны. Все компании вымышлены.
Ссылка на roadmap | 3 096 |
| 10 | Самый быстрый вкат в IT, который я видел
Мой кореш из универа вкатился в DE быстрее, чем кто-либо другой.
Чтобы вы понимали, он вообще не из IT. Ему было ровным счетом по-барабану на это ваше программирование, он просто работал инженером в компании и все. Ну там электричество, энергетика... сами понимаете, денег там нет. Хорошо... я знаю, что какой-то сын маминой подруги работает в энергетике, купил Ламбу Урус и сейчас в МОНАКО, но везде есть исключения.
Знаете, что его сильно отличало? Вы скажете: ПРЕДРАСПОЛОЖЕННОСТЬ И СУДЬБА ЦКАТИНА!
Вообще нет. Он не ссал.
Как это выглядело. Где-то в январе-феврале он открыл наш Roadmap и начал потихоньку проходить SQL и Python (кстати у него уже был заход год назад, но он благополучно бросал это скучное дело). Поэтому честнее сказать, он вернулся к основам и начал все повторять. Дальше он записался на наш мартовский поток BootCamp.
Т.е. он тупо шел по roadmap, как по списку и не бросал. В буткемпе он взял самый простой пайплайн (связку инструментов) и буквально повторил за примером, немного добавляя свои идеи. БОЛЬШЕ НИЧЕГО ДОПОЛНИТЕЛЬНОГО! По Кликхаусу прошел наш огромный файлик сколько мог. По спарку аналогично занимался. Т.е. он не утопал в теории. Например в Clickhouse реально необходимо знать ТРИ движка базово - MergeTree, ReplacingMergeTree и ReplicatedMergeTree. Нет смысла сидеть и учить все движки подряд. Вас об этом на собесе не спросят.. потому что сами собеседующие об этом не знают.
По времени он занимался по 6–8 часов в неделю. На втором месяце BootCamp, ещё до лекции по резюме, он уже начал делать РЕЗЮМЕ. При этом за основу взял уже готовое резюме с HH, которое если что и вы можете найти и тупо списать. Так вот он взял и переделал уже хорошее релевантное резюме под себя. Я до сих пор не понимаю, почему люди не хотят делать АНАЛОГИЧНО?! Люди уже сто пицот раз писали эти CV... да скатайте просто у лучших.
В итоге. Он послушал лекцию → немного поправил → сразу вышел на рынок. СРАЗУ! На втором месяца BootCamp прям посередине потока. Пока остальные еще ждали мок собесы. Типа чувак вообще не парился и шел, как паровоз.
Естественно, первые три собеса он провалил. На каком-то даже его спалили с нейронкой, что он пользовался. Ну и ладно.. Где не получилось, идем дальше. Собеседующие забыли его в ту же секунду. Пошёл на следующее.
Примерно на 8–9 собеседовании получил оффер на 250 000 ₽ на руки на офис (это важно). Сейчас он уже работает и получает ЗП. Вы скажите, что ОФИС — это не тру. А ваше мнение кто-то спрашивает? :)
У человека задача получить работу и зарплату. Через полгода год выйдет на рынок и сменит на другое место. Тут факт, что он не тупил и действовал.
Самое забавное, что я сам на него особо не ставил. Не думал, что именно он так быстро вкатится. А он взял и оказался одним из первых. Пока другие ребята, в том числе те, кто уже работал в IT или около IT, продолжают готовиться, сомневаться и ждать подходящего момента.
1 сентября стартует новый поток BootCamp - @bootcampych_bot | 3 034 |
| 11 | Легенда для Дата Инженера за 1 промпт! Составляем Резюме
Буквально 1 промпт, который из любой твоей истории сделает готовую легенду для Дата Инженера. Это не кликбейт. Я реально на вайбкодил готовый сервис для сборки вашего рассказа на собесе и резюме. А также показал, как его составить, чтобы вас не скипали.
Смотрите на Youtube
▶️ https://youtu.be/okvu18S7h2U
Кстати, мы уже набираем поток на BootCamp. Старт 1 сентбяря
@bootcampych_bot | 5 158 |
| 12 | Ты не достоин Валютной Удаленки!
Короче это не так. Конечно, сложнее точно, но не ставьте на себе крест. Я потихоньку начинаю разбираться в этом вопросе. Мне на ютубе попался видос (да сто процентов и вам тоже) от айти красавчика, который на GO пишет.
Весь видос я не смотрел, потому что я скинул видос в ChatGPT и попросил вывести суммаризацию.
Из ключевых моментов, которые мне откликнулись:
- Надо точно отрепетировать свою само-презентацию на английском вплоть до мелочей
- Язык должен быть уровня B1 - B2
- Акцент не важен
- Если есть вариант субтитров на созвонах, надо использовать их
- Набрать 300-500 контактов в Линкедин (желательно не индусов)
- Не всегда есть work life balance (будьте готовы к любой ерунде)
- Забудьте про свои ДМС
- Постоянно общаться на English сильно утомляет
Что я сам думаю?
Я проходил год назад собесы на английском языке, но правда в русскоязычные команды. Т.е. там, где люди умеют ПО РУССКИ говорить.
В целом идея в том, чтобы застолбить свою самопрезентацию — это прям БАЗА точно. А кстати еще чуваки в видосе сказали, что если будете учить Английский с репетитором, не надо брать с уклоном в IT, так как мы с вами уже знаем айтишный английский. Нам нужно больше описательных и разговорных оборотов. Вот этого может как раз не хватать в работе.
А если вам тоже интересно двигаться в эту сторону, то пройдите опрос
https://forms.gle/KWcWJFwtiZbosugR7
У нас много ребят, кто живет в разных странах и есть те, кто уже работает в таких компаниях. Поэтому предлагаю понять, какой у нас у всех уровень, потом созвонимся и обсудим: ЧТО НАМ С ЭТИМ ВСЕМ ДЕЛАТЬ!
Ну английский это ладно. На самом деле меня больше всего интересует стек, а именно AWS, GCP, Azure, Databricks и дальше по списку. Это мне более непонятно пока. Но разве у нас есть преграды? Пффф.. хорошо, что чат гпт есть)) ахахах
P.S. В комменты закину TXT файлик с более подробным описанием | 3 375 |
| 13 | Валютная удаленка СЮДА!
Есть идея прочекать этот рынок и понять, какие есть трудности и боли, а самое главное требования на рынке для ДЕ. Например знаете ли вы, как оформить линкедин, а ИП в какой-то стране? Или может не знаете, что учить из облачных технологий. А английский нужен? А он у вас точно нормальный или на уровне, когда вы все еще путаете has и have?
Что я хочу?
Пройдите плиз мой опрос. Я соберу ваши ответы и начну собирать инфу. Актуальную и объективную.
https://forms.gle/KWcWJFwtiZbosugR7
Потом сделаем с вами, кому интересно, общий созвон и поговорим на эту тему. Анонс сделаю в этом канале!
Сразу скажу, идея в голове в том, чтобы стать условным HR у компаний, чтобы сразу поднатаскать под позицию и устроить. Именно под западный стек. | 3 299 |
| 14 | Старт 8 потока BootCamp!
Для тех, кто пропустил стрим, я сделал специально отдельный ролик про наш мощнейший BootCamp для Дата Инженера.
Кто не знает, что такое BootCamp DE. Мы сделали супер интенсив за 2 месяца в DE.
Это буквально копия вашей будущей работы.
Смотрите на Youtube!
▶️ https://youtu.be/O4GD-zSkgcE
▶️ https://youtu.be/O4GD-zSkgcE
▶️ https://youtu.be/O4GD-zSkgcE
Ближайший старт потока — 1 сентября
Переходите в наш бот @bootcampych_bot и жми Хочу на BootCamp
Кол-во мест ограничено! | 2 830 |
| 15 | Топовые темки-связки для ДЕшника!
Знаете, в альтернативной реальности существуют люди-темщики со своими криптой, P2P и арбитражем. Кто не в курсе — это граждане, которые мутят околонелегальные схемы заработка в интернете. Мутные типы, короче.
А при чём тут дата-инженеры?
Ну теперь это и они тоже.. Ладно шучу. Да ни при чём. Просто нужно было привлечь ваше внимание, пока вы бездумно листаете рилсы и шортсы, сидя на белом троне.
В общем, я сделал завайбкодил сайт-приложение для дата-инженеров, где можно собрать топовую схему собственного пайплайна.
Мне надоело постоянно рисовать архитектуру в Miro вручную, когда можно просто выбрать нужные инструменты и собрать красивую анимированную схему со всеми связями.
➡️ https://databuilder.roadmappers.ru
Сейчас там уже есть Kafka, Spark, Airflow, S3, ClickHouse, Trino и другие инструменты.
В планах добавить AWS, Google АБЛАКА, МИКРОСОФТ АЖУР, Snowflake, DataБРИКС и вообще всё, что нужно для создания практически любой data-схемы. Кстати уже можно делать выгрузку готовых картинок-схем.
Если не знаете, как работает какой-то инструмент, можно дважды кликнуть по нему и получить ссылку на соответствующий раздел нашего Roadmap. Там внутри на самом деле есть готовые схемки + также можно импортировать свою или эскпортировать текущую - я думаю разберетесь.
Короче, всё в одном месте для дорогих дата-инженеров!
Кстати, если вы ещё не смотрели мой видос про инструменты дата-инженера — обязательно гляньте:
▶️ Смотреть на YouTube | 3 094 |
| 16 | Lakehouse для аналитиков и инженеров данных
Приглашаем изучить популярный подход построения хранилищ данных Data Lakehouse c разделенным Compute и Storage на основе Iceberg и Trino.
В программе курса:
• Современная архитектура аналитических систем от DWH и Data Lake до Lakehouse с разделением Compute и Storage на базе Apache Iceberg и Trino.
• Iceberg: управление файлами, снимками, каталогами, схемами изменений и очисткой.
• Практическое использование Iceberg Catalog, работа с кластером Trino (на Kubernetes), подключение данных на S3 и выполнение SQL/ Python-запросов.
• Работа с Iceberg+Trinо на больших масштабах: сложные запросы к датасету TPC-DS (2.8 млрд строк), интеграция с DBT, Apache Airflow, оценка производительность систем.
• Построение пайплайнов, инструменты для корректной поддержки, обновления и масштабирования Lakehouse-инфраструктуры на уровне предприятия.
Кто мы: R&D-центр Devhands, наш канал.
Автор курса — Алексей Белозерский, CDO в inSales (Сбер 2B),
ex: VK Tech, М.Видео, Эльдорадо
🗓 Старт курса: 27 августа
Изучить программу и записаться можно здесь.
Ждём вас!
Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzquZf5с8 | 2 790 |
| 17 | Антон Чигур отчитывает Джуна Дата Инженера!
https://youtube.com/shorts/t5zUcI0_EVk?is=B2v211CnYhwm68EO
Кто не видел, срочно смотреть - этот шедевр потихоньку набирает свои просмотры уже! | 3 298 |
| 18 | Спасибо за стрим!
Запись была, кто пропустил, всегда можете посмотреть в записи. Запись скоро будет на YouTube!
если остались вопросы, то здесь можно задать - @bootcampych_bot | 827 |
| 19 | https://telemost.yandex.ru/live/5ea3216116e14a1888a9be12bb047e56
заходим на стрим | 336 |
| 20 | Подлюкчаемся к стриму
https://telemost.yandex.ru/j/36138409850196 | 1 |
