ar
Feedback
Data Engineer Работа Вакансии

Data Engineer Работа Вакансии

الذهاب إلى القناة على Telegram

Вакансии Data Engineer Размещение вакансий и рекламы - @hr_rus Стоимость размещения - t.me/it_rab/11 Каналы вакансий других IT профессий - @it_rab

إظهار المزيد
4 874
المشتركون
+624 ساعات
+347 أيام
+13030 أيام
جذب المشتركين
سبتمبر '26
سبتمبر '26
+35
في 0 قنوات
أغسطس '26
+214
في 1 قنوات
Get PRO
يوليو '26
+269
في 0 قنوات
Get PRO
يونيو '26
+175
في 0 قنوات
Get PRO
مايو '26
+180
في 1 قنوات
Get PRO
أبريل '26
+263
في 1 قنوات
Get PRO
مارس '26
+183
في 1 قنوات
Get PRO
فبراير '26
+185
في 1 قنوات
Get PRO
يناير '26
+246
في 1 قنوات
Get PRO
ديسمبر '25
+222
في 1 قنوات
Get PRO
نوفمبر '25
+224
في 2 قنوات
Get PRO
أكتوبر '25
+133
في 1 قنوات
Get PRO
سبتمبر '25
+201
في 1 قنوات
Get PRO
أغسطس '25
+141
في 3 قنوات
Get PRO
يوليو '25
+234
في 1 قنوات
Get PRO
يونيو '25
+199
في 1 قنوات
Get PRO
مايو '25
+214
في 1 قنوات
Get PRO
أبريل '25
+279
في 2 قنوات
Get PRO
مارس '25
+260
في 1 قنوات
Get PRO
فبراير '25
+168
في 3 قنوات
Get PRO
يناير '25
+257
في 28 قنوات
Get PRO
ديسمبر '24
+241
في 22 قنوات
Get PRO
نوفمبر '24
+300
في 3 قنوات
Get PRO
أكتوبر '24
+581
في 19 قنوات
Get PRO
سبتمبر '24
+492
في 25 قنوات
Get PRO
أغسطس '24
+396
في 24 قنوات
Get PRO
يوليو '24
+117
في 29 قنوات
Get PRO
يونيو '24
+87
في 26 قنوات
Get PRO
مايو '24
+769
في 31 قنوات
Get PRO
أبريل '24
+268
في 30 قنوات
Get PRO
مارس '24
+73
في 4 قنوات
Get PRO
فبراير '24
+137
في 17 قنوات
Get PRO
يناير '24
+109
في 0 قنوات
Get PRO
ديسمبر '23
+226
في 27 قنوات
Get PRO
نوفمبر '23
+1 169
في 0 قنوات
Get PRO
أكتوبر '23
+1 260
في 15 قنوات
Get PRO
سبتمبر '23
+190
في 0 قنوات
Get PRO
أغسطس '23
+234
في 0 قنوات
Get PRO
يوليو '23
+3 542
في 0 قنوات
التاريخ
نمو المشتركين
الإشارات
القنوات
04 سبتمبر+12
03 سبتمبر+6
02 سبتمبر+12
01 سبتمبر+5
منشورات القناة
Как устроен hh.ru изнутри Что происходит до того, как новая фича появляется у миллионов пользователей? Показываем реальные ке
Как устроен hh.ru изнутри Что происходит до того, как новая фича появляется у миллионов пользователей? Показываем реальные кейсы, людей, инженерные решения и всё самое интересное из жизни IT-команд hh.ru. Подписаться #реклама О рекламодателе

2
Junior Data Engineer Работа в Big4. Разработка и сопровождение ETL/ELT-процессов с акцентом на обработку данных и поддержку дата-пайплайнов. Фокус на выполнении технических задач под наставничеством опытного специалиста без прямого взаимодействия с заказчиком. Ищем специалиста с кверенным знанием Python/Pyspark. Локация: Удаленно (Беларусь/Польша) ЗП: от 600 до 1100 $ Занятость: Полная Обязанности - Разработка и сопровождение ETL/ELT-процессов - Написание SQL-запросов и Python-скриптов для обработки данных - Работа с реляционными базами данных - Поддержка и оптимизация дата-пайплайнов - Интеграция данных из различных источников - Подготовка данных для BI и аналитики - Работа с Git и участие в командной разработке Требования - Уверенное знание Python и SQL - Базовый опыт работы с PySpark - Понимание принципов ETL/ELT и построения DWH - Опыт работы с Git, Linux/Bash - Базовое понимание CI/CD - Английский язык — Intermediate и выше (обязательно). - Важно понимать как составлять грамотные и вежливые сообщения для коммуникации со стейкхолдерами проекта. Будет плюсом - Azure Databricks - SparkSQL / PySpark - Azure / AWS - Copilot AI - GitHub Actions - Service Bus Формат работы: Junior Data Engineer под руководством ментора. В обязанности входит выполнение технических задач под наставничеством опытного специалиста. Работа ведется от имени другого инженера. Прямое взаимодействие с клиентом, участие в созвонах и прохождение интервью с заказчиком не требуются. контакт в Телеграме: @Valerijadus
872
3
Стать инженером данных всего за 10 недель — это реально! Если вы давно смотрите в сторону дата-инженерии или хотите зайти в п
Стать инженером данных всего за 10 недель — это реально! Если вы давно смотрите в сторону дата-инженерии или хотите зайти в профессию системно, а не одной ногой — сейчас самый подходящий момент. Симулейтив — школа аналитики, где обучают через практику и реальные кейсы, запускает пересобранный курс-буткемп - Профессия «Инженер данных». Курс разделен на 2 этапа: за первые 10 недель вы осваиваете базу и доходите до уровня junior-специалиста. А на втором этапе — углубленное изучение ключевых инструментов, где вы дорастаете до мидла. Что вас ждет на курсе: ➖SQL, Python, пайплайны сбора и обновления данных, хранение и обработка, DWH; ➖Живые занятия с ментором каждую неделю — не записи, а разборы вживую; ➖Подготовка к собеседованиям с первых недель, а не в самом конце; ➖ИИ-инструменты как часть программы — учите работать с ними, а не избегать; ➖Гостевые лекции от практикующих дата-инженеров из Яндекса, Т-Банка, Авито, Сбера, OZON; ➖Официальный диплом о профессиональной переподготовке. Кому подойдёт: 1. Тем, кто хочет войти в дата-инженерию с нуля или перейти из аналитики; 2. Тем, кто пробовал учиться самостоятельно, но теряет темп без структуры; 3. Тем, кому интереснее не просто считать метрики, а выстраивать систему, на которой держатся данные. Почему сейчас: специалистов, которые управляют данными как системой, на рынке меньше, чем нужно, — а спрос растёт, потому что без инженерии любые данные быстро превращаются в хаос. 🔥ВАЖНО: Симулейтив дают возможность получить грант обучение и гарантируют трудоустройство своих студентов. Количество грантов ограничено! Оставляйте заявку до завтра включительно, чтобы занять одно из 5 оставшихся мест нового потока! 🔗 ЗАБРОНИРОВАТЬ МЕСТО
845
4
#intern #100k #удаленка Aston Дата-инженер (ученик) Первая заработная плата: от 85 000 ₽ до вычета НДФЛ (плюс стипендия на обучении) Оформление: официальное трудоустройство Формат работы: удалённо на обучении (для регионов без офиса); после старта на проекте — гибрид Обучение «Дата-инженер» с последующим трудоустройством: онлайн-интенсив 1 месяц, затем стажировка 3–4 месяца. ☑️ Чем предстоит заниматься -Онлайн-интенсив 1 месяц: изучение теории и отработка на практических заданиях (можно совмещать с работой) -Стажировка 3–4 месяца: практика на учебных проектах под руководством опытного технического руководителя, еженедельные проверки изученного материала -Подготовка к собеседованию и самопрезентации -После успешного окончания — выход на коммерческий проект дата-инженером ☑️ Наши пожелания к кандидатам -Законченное высшее или среднее специальное профильное образование -Готовность пройти стажировку в компании ASTON Контакты: recruiting.official@astondevs.ru 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 216
5
Высшее образование онлайн — поменяйте жизнь в 2026 году! ✅Идёт набор: от 7500 ₽/мес.* Московский технологический институт пре
Высшее образование онлайн — поменяйте жизнь в 2026 году! ✅Идёт набор: от 7500 ₽/мес.* Московский технологический институт предлагает: — Высшее образование в московском вузе без выезда на сессии — Полностью дистанционный онлайн-формат — Возможность обучаться дома, на работе, в путешествии — Диплом государственного образца — Более 60 направлений на выбор (IT, инженерные, экономические, педагогические, управленческие и другие) — 5 способов оплаты обучения — Поддержка персонального куратора: от поступления до получения диплома Узнать больше #реклама 16+ mti-vuz.ru О рекламодателе
1 188
6
Читаешь статьи “Как пройти собеседование” и не получаешь никакого результата? Универсальные советы из интернета не работают, когда у тебя сложный технический бэкграунд. Кириллу, Senior Data Scientist, нужна была конкретика, а не вода про софт-скиллы и правильную самопрезентацию. При подготовке к интервью ему не хватало объективной обратной связи: где он проседает, а где недопродает свой реальный опыт. Он протестировал карьерного ИИ-коуча от AINA. И вот что оказалось: 1. Никаких шаблонных вопросов. ИИ цепляется только за твои ответы и спрашивает точечно по твоему стеку и опыту. 2. Измеримый фидбек. Коуч показал, где рассказ звучит слишком абстрактно и не подсвечивает собственный вклад. 3. Оцифрованный профиль. Вместо PDF вы получаете Digital Profile, который соединяет ваши реальные навыки, пожелания и запросы рынка. В поиске работы тоже нужны метрики и дата-дривен подход. Подготовьтесь к собеседованиям с ИИ-коучем, оцифруйте свой опыт и получайте предложения, основанные на точных данных, а не на ключевых словах из резюме. Протестировать AI-коуча и собрать профиль можно здесь 👉 ссылка
1 150
7
#middle #офис МТС Банк Разработчик DWH и BI ЕХД Oracle Полная занятость Формат работы: Москва (офис) МТС Банк — одно из ключевых направлений экосистемы МТС. Стек: Oracle PL/SQL, Oracle Developer Data Modeler, Informatica, Golden Gate, MS PowerBI, MS Analysis Service, Jira, Confluence. ☑️ Чем предстоит заниматься -Разработка и анализ процедур загрузки данных в хранилище банка из систем-источников -Разработка витрин данных и отчётности по данным хранилища данных -Оптимизация работы хранилища данных и аналитической отчётности -Взаимодействие с ИТ и бизнес-подразделениями банка для решения задач по развитию хранилища данных -Выявление и исправление ошибок загрузки и формирования отчётности на базе хранилища данных ☑️ Наши пожелания к кандидатам -Опыт разработки Oracle PL/SQL -Опыт работы в подразделениях отчётности и DWH -Понимание процессов банковской отрасли (желательно) -Умение работать с бизнес-заказчиком напрямую -Интерес к проектам по внедрению, развитию хранилища или разработке финансовой отчётности в банках Откликнуться (https://job.mtsbank.ru/vacancies/4995) 🔥 Подписаться на наши каналы (https://t.me/addlist/8QASR3uThEI2ZjVi) / @best_itjob (https://t.me/best_itjob) / @it_rab (https://t.me/it_rab)
1 630
8
#senior #удаленка #гибрид CHOICEIT Middle / Senior Data Engineer DWH Опыт работы: Data Engineer от 5 лет Полная занятость Формат работы: удалённо, гибрид или офис (Москва) Digital-подразделение крупной производственной компании ищет Data Engineer в команду, которая строит Корпоративное Хранилище Данных и data-платформы для всего бизнеса. Стек: Python, Greenplum и PostgreSQL, DBT, Spark, Kafka, Airflow, Kubernetes. ☑️ Чем предстоит заниматься -Разработка и поддержка ETL/ELT-процессов в Корпоративное Хранилище Данных -Организация и оптимизация пайплайнов данных -Разработка витрин данных и обеспечение качества данных -Настройка и поддержка инфраструктуры данных (Airflow, Spark, Kafka, DBT) -Взаимодействие с заказчиками: от сбора требований до внедрения и сопровождения решений -Документирование и презентация результатов ☑️ Наши пожелания к кандидатам -Опыт работы Data Engineer от 5 лет -Высшее образование (IT / математика / математическая статистика / физика) -Отличное знание Python и SQL -Опыт работы с реляционными БД (Greenplum / PostgreSQL) -Знание современных технологий обработки больших данных -Опыт с Airflow, Spark, Kafka, DBT — будет преимуществом Контакты: hello@choiceit.me 🔥 Подписаться на наши каналы (https://t.me/addlist/8QASR3uThEI2ZjVi) / @best_itjob (https://t.me/best_itjob) / @it_rab (https://t.me/it_rab)
1 676
9
#middle #удаленка Т-Банк Data Engineer Опыт работы: работа с DWH в качестве аналитика или разработчика от 5 лет Полная занятость Формат работы: офис или удалённо — по договорённости В Т-Банке большое хранилище данных: 8000 объектов, 800 ТБ в Greenplum и 110 ТБ в Clickhouse. С данными работают более 16 тысяч пользователей из бизнес-команд. В Т-Банке можно развиваться в системном анализе или ETL-разработке. ☑️ Чем предстоит заниматься -Участвовать в формировании модели данных -Проектировать и разрабатывать витрины и потоки данных на основе потребностей бизнес-пользователей -Участвовать в проектах по развитию Data Platform -Писать скрипты SQL и Python (опционально) -Прорабатывать интеграции с внешними системами для Data Platform ☑️ Наши пожелания к кандидатам -Свободно владеете SQL -Работали с DWH в качестве аналитика или разработчика минимум 5 лет -Понимаете теорию СУБД- и ETL-процессов -Знаете Python или другой язык программирования -Есть опыт проектирования объектов БД на основании бизнес-требований Откликнуться (https://www.tbank.ru/career/it/data-engineer/) 🔥 Подписаться на наши каналы (https://t.me/addlist/8QASR3uThEI2ZjVi) / @best_itjob (https://t.me/best_itjob) / @it_rab (https://t.me/it_rab)
1 732
10
#senior #офис #гибрид БЮРО 1440 Старший разработчик сервисов данных (Python) Опыт работы: разработка на Python от 3 лет (на позиции Middle — от 1 года) Полная занятость Формат работы: офис или гибрид (Москва, м. Мнёвники) БЮРО 1440 — разработчик и оператор низкоорбитальной спутниковой группировки связи. Ищем сильного разработчика на Python для бэкенда Экосистемы Моделирования Космической Системы. Стек: Python 3.12+, FastAPI (Pydantic v2), Numba, NumPy, Pandas, SQLAlchemy 2+, Kafka (FastStream), Redis, Postgres, Clickhouse. ☑️ Чем предстоит заниматься -Разработка микросервисов управления данными Модели Космической Системы -Разработка пайплайнов обработки данных ETL/ELT -Интеграция вычислительных модулей (микросервисов) -Реализация процессов контроля качества данных -Разработка моделей данных и согласование дата-контрактов -Работа с СУБД Postgres, Clickhouse -Обработка и анализ данных в Pandas, NumPy, Polars ☑️ Наши пожелания к кандидатам -Инженерное или техническое образование (обязательно) -Опыт разработки на Python от 3 лет (на позиции Middle — от 1 года) -Опыт работы с библиотеками для анализа данных: Pandas, NumPy, Polars -Понимание принципов проектирования и работы с хранилищами данных -Опыт работы с базами данных PostgreSQL, ClickHouse -Опыт работы с инструментами ETL/ELT (например, Airflow, Dagster) -Понимание принципов работы систем потоковой обработки данных -Опыт разработки веб-приложений (FastAPI) -Опыт работы с контейнерами Docker -Опыт работы с инструментами командной разработки: Confluence, Jira, Git Контакты: join@1440.space 🔥 Подписаться на наши каналы (https://t.me/addlist/8QASR3uThEI2ZjVi) / @best_itjob (https://t.me/best_itjob) / @it_rab (https://t.me/it_rab)
1 764
11
Яндекс Музыка до 360 дней бесплатно Яндекс Музыка для вас и 3-х ваших близких. Кинопоиск и Яндекс Книги тоже в мультиподписке
Яндекс Музыка до 360 дней бесплатно Яндекс Музыка для вас и 3-х ваших близких. Кинопоиск и Яндекс Книги тоже в мультиподписке Плюс. Попробуйте бесплатно❤️ Слушать #реклама 18+ music.yandex.ru О рекламодателе
1 154
12
#intern #удаленка #офис #гибрид ИТ-компания «Лоция» Стажёр-инженер данных BI (Data Engineer) Неполный рабочий день (срочный трудовой договор на 3 месяца, 5/2, не более 30 часов в неделю) Формат работы: удалённо, офис или гибрид Стажировка в команде BI. Рассматриваем студентов из любых вузов и форм обучения, включая заочную и магистратуру. ☑️ Чем предстоит заниматься -Построение ETL-процессов: разработка и настройка конвейеров по сбору и трансформации данных из различных источников -Работа с современным стеком трансформации: освоение и применение DBT для превращения «сырых» данных в чистые аналитические витрины -Оркестрация данных: настройка и поддержка рабочих процессов (pipelines) в Dagster -Управление хранилищами: работа с Postgres и колоночной базой данных Clickhouse -Визуализация: разработка интерактивных BI-отчётов в Apache Superset -Оптимизация выборок: анализ и ускорение тяжёлых запросов ☑️ Наши пожелания к кандидатам -SQL: уверенное владение языком (сложные выборки, агрегатные функции, понимание принципов оптимизации запросов) -Базы данных: понимание устройства реляционных БД (в частности, PostgreSQL) и общих принципов построения аналитических хранилищ -Python: базовые знания языка, умение писать скрипты для обработки данных и автоматизации простых задач -Аналитический склад ума: способность работать с большими массивами данных, выявлять закономерности и структурировать информацию Контакты: welcome@loodsen.ru 🔥 Подписаться на наши каналы (https://t.me/addlist/8QASR3uThEI2ZjVi) / @best_itjob (https://t.me/best_itjob) / @it_rab (https://t.me/it_rab)
1 941
13
Станете ли вы студентом в этом году? Многие откладывают высшее образование, потому что это «долго и дорого». МТИ ломает этот
Станете ли вы студентом в этом году? Многие откладывают высшее образование, потому что это «долго и дорого». МТИ ломает этот стереотип. Получите востребованную профессию без отрыва от работы: ⚡ Онлайн-формат: лекции и экзамены в удобное для вас время. ⚡ Московский диплом государственного образца. ⚡ Сильная поддержка: личный куратор закроет все орг. вопросы. ⚡ Инвестиция в себя: от 7500 ₽ в месяц. ⚡ Более 100 направлений: IT, ПГС, экономика, психология и др. Как сократить срок обучения? Если у вас есть диплом СПО, мы перезачтем профильные дисциплины (минимальный срок — 3,5 года). Пора получить диплом, который работает на вас. Получить консультацию #реклама 16+ mti-vuz.ru О рекламодателе
997
14
🚀 Вакансия: Data Engineer (удаленно/гибрид) Компания: ООО "ОДСС" https://odsscompany.ru (аккредитованная IT-компания) Локация Москва Зрплата от 150 до 170 т.р. Оформление по ТК РФ Мы ищем в свою команду инициативного Data Engineer для разработки и поддержания инфраструктуры данных для большого проекта озера данных, включающего себя сложные сценарии приема и обработки данных из разных источников. Что предстоит: • разработка и поддержание парсеров • автоматизация обработки и преобразования данных • отладка и мониторинг конвейеров данных Технологический стек: Python, PostgreSQL, Dagster, Selenium Что мы ждем от тебя: - знание основных библиотек Python для работы с данными - опыт обработки и скрейпинга/парсинга сложных и слабоструктурированных документов в форматах pdf, doc, docx, xls, xlsx - опыт работы автоматизации конвейеров данных и знание соответствующих программных инструментов - представление об управлении качеством данных - представление о возможностях отладки мониторинга - понимание специфики форматов данных (JSON lines, Parquet, XML, CSV и тд.) - понимание методов получения и поставки данных (как, например, S3, REST API, SOAP, RPC) - знание английского языка на уровне, достаточном для чтения технической документации - знание Git - готовность осваивать новые технологии и разрабатывать индивидуальные технические решения под поставленные задачи. Плюсами будут: - опыт работы с данными из открытых источников и понимание их специфики - опыт долгосрочного поддержания работы парсеров - опыт работы с библиотеками Python для computer vision Преимущества проекта ✅ Проект только стартовал — мало легаси, много свободы для экспериментов ✅ Можно влиять на выбор технологий и архитектурных решений Для быстрой связи @LvovaOV
2 226
15
#middle #удаленка #data OZON Data Engineer, Ozon fresh Опыт работы: в роли Data engineer от 2 лет Формат работы: удалённая работа Ozon fresh — сервис быстрой доставки свежих продуктов питания, товаров повседневного спроса, бытовой техники, электроники. Ищем Data engineer в группу товародвижения в отдел Data Science. ☑️ Чем предстоит заниматься -Писать алгоритмы обработки больших данных (несколько сотен миллионов строк в таблице) -Исследовать и подготавливать данные -Оптимизировать текущие вычисления -Заниматься продуктивизацией алгоритмов и их сопровождением -Делать ревью кода и анализ инцидентов ☑️ Наши пожелания к кандидатам -Наличие опыта в роли Data engineer от 2 лет -Уверенное владение Python, PySpark, SQL -Знание устройства Hadoop, HDFS, Hive -Будет плюсом: опыт работы с Go, Airflow, DBT Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
2 062
16
Регистрируйтесь на Yandex Scale 2026 Главная конференция Yandex Cloud. Узнайте о сервисах, которые меняют ваш бизнес. 4 офлай+5
Регистрируйтесь на Yandex Scale 2026 Главная конференция Yandex Cloud. Узнайте о сервисах, которые меняют ваш бизнес. 4 офлайн-трека (AI, Infra + DevTools, Data, Security), онлайн-трек Deep Tech, воркшопы по ИИ и интерактивы. Подробнее о программе читайте в карточках🗒 📅24 сентября 🚗Москва + 💻онлайн Участие бесплатное! Зарегистрироваться #реклама 16+ scale.yandex.cloud О рекламодателе
1 099
17
#middle #удаленка #москва МГТС DataOps до 300 000 ₽ Формат работы: можно удалённо (Москва) МГТС — основной телекоммуникационный партнёр города Москвы и часть экосистемы МТС. Нужен инженер с DevOps-руками и системным DataOps-мышлением: подготовить хранилище и вывести lakehouse-MVP в прод на Kubernetes, выстроить эксплуатацию вокруг него. ☑️ Чем предстоит заниматься -Разобраться в действующем хранилище (MSSQL) и текущей инфраструктуре дата-платформы (S3-хранилище, оркестрация, мониторинг) -Настроить и проверить бэкапы и восстановление -Настроить GitFlow и DataOps-workflow: контракты, тесты, CI/CD -Развернуть и донастроить мониторинг (Grafana, Prometheus) -Управлять сертификатами (TLS/PKI), ролевой моделью через AD ☑️ Наши пожелания к кандидатам -Kubernetes в проде: эксплуатация и умение довести сервис до устойчивого прод-развёртывания -S3-совместимое хранилище (MinIO / Ceph RGW) -CI/CD, GitFlow и DataOps-workflow -IaC на Ansible (основной инструмент) и скриптинг на Python -Готовность работать в регулируемом контуре под требования ФСТЭК Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 539
18
На маркетплейсах можно не только тратить, а зарабатывать Пока одни покупают на маркетплейсах, другие зарабатывают на их оформ
На маркетплейсах можно не только тратить, а зарабатывать Пока одни покупают на маркетплейсах, другие зарабатывают на их оформлении. Речь про дизайн карточек для маркетплейсов — навык, с которого многие начинают путь в удалённую работу. Если давно хочешь попробовать себя в этом направлении, сейчас открыт бесплатный курс по инфографике для маркетплейсов. На курсе познакомишься с профессией, выполнишь первые практические задания и поймёшь, как создавать карточки, которые цепляют внимание и помогают продавать. Хороший вариант для тех, кто хочет освоить понятный digital-навык и сделать первый шаг к удалённому доходу. Узнать больше #реклама 16+ yudaevschool24.online О рекламодателе
1 319
19
#middle #гибрид #москва Cloud.ru Data Engineer Опыт работы: от 3 до 6 лет Формат работы: гибрид (Москва) Cloud.ru — ИТ-компания в сфере облачных и ИИ-технологий. Направление кибербезопасности, команда проектирует и развивает data-пайплайны для обработки событий кибербезопасности. ☑️ Чем предстоит заниматься -Проектирование и развитие data-пайплайнов для обработки событий кибербезопасности -Нормализация и обогащение событий безопасности -Проектирование и оптимизация аналитического хранилища данных (ClickHouse / StarRocks / аналоги) -Подготовка витрин данных под быстрые запросы и аналитику -Эксплуатация data сервисов в Kubernetes: деплой, ресурсы, отказоустойчивость, масштабирование ☑️ Наши пожелания к кандидатам -Опыт построения с нуля DWH или Data lake -Опыт построения и эксплуатации data pipelines (ETL, ELT и/или streaming) в production среде -Уверенный SQL, включая оптимизацию запросов и анализ производительности -Опыт работы с OLAP-СУБД (ClickHouse/StarRocks/Druid/Pinot или аналоги) -Уверенные знания Kubernetes и опыт эксплуатации сервисов в production среде Контакты: hr@cloud.ru / Telegram-канал @cloudruprovider 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 518
20
#middle #офис X5 Tech Data Engineer (Python + Spark) Формат работы: офис (Москва) В команде разрабатывается ML-система, детектирующая Out-of-stock ситуации и аномалии в продажах, которая в near-real-time выявляет потенциальные проблемы с наличием товара и отправляет предупреждения сотрудникам магазинов. ☑️ Чем предстоит заниматься -Разрабатывать и оптимизировать Spark-пайплайны для обработки данных в масштабе (200+ млн строк ежедневно) -Настраивать хранение и доступность данных в DWH -Автоматизировать интеграцию данных: продажи, акции, цены, остатки, погода, календари -Работать в связке с Data Science-командой, обеспечивая стабильный и качественный поток данных для моделей -Участвовать в развитии платформы прогнозирования спроса ☑️ Наши пожелания к кандидатам -Стек: PySpark 2/3, Spark SQL -Hadoop / Hive / Trino / S3 / ClickHouse / Postgres / Greenplum -Airflow, Python3, Docker, YARN/k8s, pytest Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 501