fa
Feedback
Data Engineer Работа Вакансии

Data Engineer Работа Вакансии

رفتن به کانال در Telegram

Вакансии Data Engineer Размещение вакансий и рекламы - @hr_rus Стоимость размещения - t.me/it_rab/11 Каналы вакансий других IT профессий - @it_rab

نمایش بیشتر
4 696
مشترکین
+524 ساعت
+437 روز
+19730 روز
جذب مشترکین
ژوئیه '26
ژوئیه '26
+237
در 0 کانال‌ها
ژوئن '26
+175
در 0 کانال‌ها
Get PRO
مه '26
+180
در 1 کانال‌ها
Get PRO
آوریل '26
+263
در 1 کانال‌ها
Get PRO
مارس '26
+183
در 1 کانال‌ها
Get PRO
فوریه '26
+185
در 1 کانال‌ها
Get PRO
ژانویه '26
+246
در 1 کانال‌ها
Get PRO
دسامبر '25
+222
در 1 کانال‌ها
Get PRO
نوامبر '25
+224
در 2 کانال‌ها
Get PRO
اکتبر '25
+133
در 1 کانال‌ها
Get PRO
سپتامبر '25
+201
در 1 کانال‌ها
Get PRO
اوت '25
+141
در 3 کانال‌ها
Get PRO
ژوئیه '25
+234
در 1 کانال‌ها
Get PRO
ژوئن '25
+199
در 1 کانال‌ها
Get PRO
مه '25
+214
در 1 کانال‌ها
Get PRO
آوریل '25
+279
در 2 کانال‌ها
Get PRO
مارس '25
+260
در 1 کانال‌ها
Get PRO
فوریه '25
+168
در 3 کانال‌ها
Get PRO
ژانویه '25
+257
در 28 کانال‌ها
Get PRO
دسامبر '24
+241
در 22 کانال‌ها
Get PRO
نوامبر '24
+300
در 3 کانال‌ها
Get PRO
اکتبر '24
+581
در 19 کانال‌ها
Get PRO
سپتامبر '24
+492
در 25 کانال‌ها
Get PRO
اوت '24
+396
در 24 کانال‌ها
Get PRO
ژوئیه '24
+117
در 29 کانال‌ها
Get PRO
ژوئن '24
+87
در 26 کانال‌ها
Get PRO
مه '24
+769
در 31 کانال‌ها
Get PRO
آوریل '24
+268
در 30 کانال‌ها
Get PRO
مارس '24
+73
در 4 کانال‌ها
Get PRO
فوریه '24
+137
در 17 کانال‌ها
Get PRO
ژانویه '24
+109
در 0 کانال‌ها
Get PRO
دسامبر '23
+226
در 27 کانال‌ها
Get PRO
نوامبر '23
+1 169
در 0 کانال‌ها
Get PRO
اکتبر '23
+1 260
در 15 کانال‌ها
Get PRO
سپتامبر '23
+190
در 0 کانال‌ها
Get PRO
اوت '23
+234
در 0 کانال‌ها
Get PRO
ژوئیه '23
+3 542
در 0 کانال‌ها
تاریخ
رشد مشترکین
اشارات
کانال‌ها
25 ژوئیه+3
24 ژوئیه+6
23 ژوئیه+6
22 ژوئیه+11
21 ژوئیه+8
20 ژوئیه+14
19 ژوئیه+4
18 ژوئیه+2
17 ژوئیه+6
16 ژوئیه+1
15 ژوئیه+5
14 ژوئیه+3
13 ژوئیه+6
12 ژوئیه+7
11 ژوئیه+6
10 ژوئیه+9
09 ژوئیه+6
08 ژوئیه+8
07 ژوئیه+21
06 ژوئیه+82
05 ژوئیه+2
04 ژوئیه+5
03 ژوئیه+8
02 ژوئیه+2
01 ژوئیه+6
پست‌های کانال
Ведущий инженер данных в VK Видео, Москва #удаленка #senior Компания:VK 🔹Задачи -Разрабатывать и поддерживать процессы обработки и доставки данных для аналитических и ML команд -Собирать витрины, оптимизировать -Писать адхоки и выгрузки, раздебаги -Собирать требования 🔹Требования -Понимание работы параллельных вычислений на кластере -Опыт с Airflow, Spark, Hadoop, ClickHouse, YT (опционально) -Знание Python: алгосы базовые (для понимания оптимального кода), классы и прочий сложный код (для чтения исходников и создания велосипедов типа операторов/сервисов) -Знание Git и работа с кодом в команде (ревью) Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab

2
Внимание! Онлайн-подработка. Платят 5 000 ₽ в день Нужно заполнять карточки товаров на ВБ, писать описания товаров и отвечать
Внимание! Онлайн-подработка. Платят 5 000 ₽ в день Нужно заполнять карточки товаров на ВБ, писать описания товаров и отвечать на отзывы. Все это вы делаете из дома. Опыт, знания и город — не важны! От вас требуется только телефон. Занятость 3-4 часа в день. График свободный. Заработок зависит от вас. Для старта в профессии нужно пройти бесплатное 3х-дневное обучение. ✅ Все проходит онлайн по 30-40 минут в день. ✅ Поймете всю суть работы с нуля от А до Я ✅ Все бесплатно. От вас только желание работать и зарабатывать. Всего осталось 30 мест. Успевайте зарегистрироваться, пока есть возможность: Зарегистрироваться #реклама 16+ course.wildmanager.ru О рекламодателе
1 206
3
Тимлид команды data‑инженеров #удаленка #офис #lead Компания: Т-Банк 🔹Обязанности -Взаимодействовать с бизнес‑партнерами, заказчиками и владельцами продукта, выравнивать цели и планы команды -Руководить командой: нанимать, адаптировать, развивать сотрудников и проводить регулярные 1‑1 -Проектировать архитектуру ИТ‑систем и участвовать в выборе технологий -Выстраивать, внедрять и развивать процессы разработки с фокусом на доставку ценности -Контролировать метрики команды и продукта, принимать тактические и стратегические решения на основе данных -Обеспечивать соблюдение нефункциональных требований и технических стандартов -Проводить code review и техническую экспертизу решений -Настраивать и развивать CI/CD и процессы автоматизации -Оптимизировать процессы разработки, устранять узкие места и решать сложные технические проблемы -Формировать и развивать инженерную культуру, включая практики DevOps и SRE 🔹Требования -Имеете опыт проектирования и построения DWH и процессов доставки данных от 3 лет -У вас есть опыт управления командой от 7 человек от 2 лет -Имеете опыт проектирования ИТ‑систем и микросервисной архитектуры -У вас есть опыт разработки на Python, Java или Go -Имеете опыт выстраивания процессов разработки по Agile‑подходам (Scrum, Kanban) и управления командой: делегирование, целеполагание, 1‑1 встречи -У вас есть опыт контроля нефункциональных требований: качество, надежность, доступность, безопасность, производительность -Работали с базами данных и хранилищами: ClickHouse, GreenPlum, Oracle, Hadoop, S3 -Понимаете современные подходы к разработке и проектированию: DDD, DevOps, SRE -Будет преимуществом опыт Data‑разработки и применения SRE‑практик: SLA, observability, postmortems, автоматизация Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 301
4
Data Engineer #удаленка #офис Компания: Островок! 🔹Ключевые задачи: -Создание и поддержка витрин для нужд data science; -Настройка и поддержка ETL; -Повышение и поддержка качества данных. 🔹Требования: -Опыт работы от 2 лет с данными, нужными для ML-решений — особенности хранения, архитектура, эффективная историчность; -Опыт работы с DS-командой/задачами, опыт сбора ТЗ у DS и его формализации; -Опыт работы с Spark и MPP базами данных; -Опыт работы с dbt (большой плюс), Airflow, HDFS, Hive; -Опыт с Python, SQL, Git, Docker; -Настройка систем мониторинга процессов ETL; -Английский язык на уровне чтения документации. Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 557
5
Data Engineer #удаленка Компания: Авиасейлс 🔹Что нужно делать -активно участвовать в командном чате: отслеживать запросы, оперативно реагировать на вопросы и задачи в рабочее время; -мониторить системы и решать возникающие инциденты вместе с дежурными дата инженерами; -оптимизировать текущие процессы обработки данных; -модернизировать текущую дата платформу вместе с Core командой дата инженеров. 🔹Чего ждём от тебя -опыт работы инженером данных от 1 года; -знание языков программирования: Python/SQL (обязательно), опыт работы с другими языками будет плюсом. -понимание принципов ETL/ELT процессов и опыт работы с инструментами -понимание как работают распределенные вычисления -опыт работы в нашем стеке Apache Spark, Apache Airflow, DBT, Trino будет плюсом; -самостоятельность и ответственность, умение коммуницировать с разными командами и людьми желание развиваться и выстраивать процессы вокруг себя. Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 672
6
Получи грант до 1,35 млн руб. на обучение в магистратуре Хочешь развиваться в сфере ИТ и получить фундаментальные знания с пр
Получи грант до 1,35 млн руб. на обучение в магистратуре Хочешь развиваться в сфере ИТ и получить фундаментальные знания с практикой? Поступай в магистратуру Центрального университета! — 4 офлайн программы по востребованным направлениям ИТ — 2 онлайн-программы: машинное обучение и продуктовый менеджмент — 550 грантов до 75% — Вечерние занятия и учеба по выходным — удобно совмещать с работой — Обучение по модели STEM-образования: на стыке науки, технологий и бизнеса — Возможность стажировок и трудоустройства в ведущих компаниях — Государственный диплом за 2 года Магистратура в Центральном университете — это современный подход к образованию, сильный преподавательский состав и актуальные кейсы от индустрии. Оставляй заявку на грант уже сейчас! Зарегистрироваться #реклама 16+ cu.ru О рекламодателе
1 433
7
Data Engineer ClickHouse #офис Москва Компания: Сбер 🔹Обязанности -поддержка, развитие и оптимизация кластеров ClickHouse -проектирование и реализация ETL-процессов с использованием Kafka и Bash -мониторинг, анализ и повышение производительности баз данных -разработка и поддержка скриптов автоматизации на Bash -участие в проектировании архитектуры хранения и обработки данных. 🔹Требования -ClickHouse: опыт проектирования таблиц, понимание движков таблиц (MergeTree, ReplicatedMergeTree, Kafka), оптимизация хранения данных, партиционирование и шардирование -Kafka: настройка, разработка пайплайнов обработки данных уверенное владение Bash: написание и поддержка скриптов для автоматизации рутинных задач -Linux: опыт работы в консоли навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе будет преимуществом Откликнуться IT Jobs в Telegram | в VK | в Max
1 661
8
Инженер данных #гибрид Москва Компания: Альфа-Банк 🔹Чем предстоит заниматься -Реализация высоконагруженных конвейеров обработки данных для обеспечения надежной и бесперебойной репликации данных из ИТ-систем Банка. -Реализация комплексных задач по подготовке данных в целевых аналитических хранилищах (DataLake, SandBox, FeatureStore) для построения признаков, необходимых для разработки моделей машинного обучения. -Разработка и поддержание в актуальном состоянии документации по разработанному функционалу. -Своевременное отражение статуса выполнения задач в Jira. -Проверка качества кода (код-ревью), написанного инженерами и младшими инженерами данных. 🔹Наши пожелания к кандидатам -Python - уверенное знание структур данных и алгоритмов, эффективное применение принципов ООП и ФП (Функциональное программирование), опыт написания модульных и интеграционных тестов, знание и опыт применения библиотек обработки и анализа данных - numpy, pandas. -Опыт разработки и внедрения в промышленную эксплуатацию сервисов загрузки и обработки неструктурированных и слабо структурированных данных (текст, xml, json) из внешних источников. -Способность разобраться с API поставщиков данных, используя доступную документацию. -SQL - умение создавать сложные запросы с использованием аналитических оконных функций и использовать инструменты профилирования для оптимизации их производительности, опыт работы с БД Oracle, Postgres, Greenplum. -Уверенное знание и опыт работы с инструментами разработки, планирования и мониторинга рабочих процессов (workflow engines) пакетной обработки данных. -Airflow- Опыт разработки сложных, высоконагруженных приложений обработки данных на основе PySpark, уверенное знание настроек Spark и их влияния на производительность приложений Spark. Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 777
9
Ведущий инженер данных в VK Видео, Москва #удаленка #senior Компания:VK 🔹Задачи -Разрабатывать и поддерживать процессы обработки и доставки данных для аналитических и ML команд -Собирать витрины, оптимизировать -Писать адхоки и выгрузки, раздебаги -Собирать требования 🔹Требования -Понимание работы параллельных вычислений на кластере -Опыт с Airflow, Spark, Hadoop, ClickHouse, YT (опционально) -Знание Python: алгосы базовые (для понимания оптимального кода), классы и прочий сложный код (для чтения исходников и создания велосипедов типа операторов/сервисов) -Знание Git и работа с кодом в команде (ревью) Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 792
10
Data Engineer (Python + Spark) #офис Москва Компания: X5 Tech ☑️ Задача Мы строим end-to-end пайплайны, которые собирают данные из разных источников (онлайн и оффлайн-продажи, ERP, внешние API), очищают, трансформируют и подготавливают их для моделей машинного обучения (бустинг и нейронные сети). От качества этих пайплайнов зависит точность прогноза и миллионы управленческих решений в закупках и логистике • Разрабатывать и оптимизировать Spark-пайплайны для обработки данных в масштабе (200+ млн строк ежедневно) • Настраивать хранение и доступность данных в DWH • Автоматизировать интеграцию данных: продажи, акции, цены, остатки, погода, календари • Работать в связке с Data Science-командой, обеспечивая стабильный и качественный поток данных для моделей • Участвовать в развитии платформы прогнозирования спроса, делая её более надёжной, масштабируемой и удобной ☑️Наш стек • PySpark{2,3} / Spark SQL • Hadoop / Hive / Trino / S3 / clickhouse / postgres/ greenplum • Airflow • Python3 • Docker, YARN / k8s • pytest Откликнуться Python Job в Telegram | в VK | в Max
1 498
11
Data engineer #удаленка #middle #100k Компания: AGIMA ЗП: до 178 000 ₽ 🔹Что нам важно: -Уверенное знание MPP-баз данных — Greenplum (или аналогов: Redshift, Vertica). -Умение писать сложные SQL-запросы, понимание партиционирования, distribution keys, работы с большими объёмами данных. Знание PostgreSQL: индексы, транзакции, оконные функции, работа pg-драйверами. -Уверенное владение Python для задач обработки данных: pandas, psycopg2 / SQLAlchemy для работы с БД, boto3 для Object Storage, requests для работы с REST API. Умение писать читаемый, поддерживаемый код. -Опыт работы с Apache AirFlow: написание DAG-ов на Python, управление зависимостями, настройка расписаний, мониторинг и отладка. -Понимание принципов ETL. Опыт работы с Informatica (или аналогами: Talend, dbt, SSIS) будет плюсом. Умение реализовывать загрузку CSV и структурированных данных в БД. -Опыт работы с S3-совместимыми хранилищами (Yandex Object Storage, AWS S3 и пр.) — загрузка, хранение промежуточных и выходных данных. 🔹Что предлагаем: -гибкий график: 5/2 с 10:00 до 19:00, но при необходимости часы работы подстроим под вас; -теплая атмосфера: клубы по интересам, летний выезд на природу AGIMA Camp и корпоративные вечеринки, куда можно приглашать и свою семью; -сильная команда: открытость к решению любых вопросов и поддержка в создании вашего личного бренда для профессионального роста; -особые бонусы: бесплатные билеты на культовый забег для IT-специалистов RUNIT; -профессиональное развитие: участие в профильных конференциях — оплатим дорогу и участие, если выступаете как спикер; -обучение: доступ к разработанным нами курсам по UX-дизайну, проджект-менеджменту, тимлидингу и другим направлениям. Контакты: v.klimova@agima.ru IT Jobs в Telegram | в VK | в Max
2 091
12
Рекрутёр решает за 6 секунд — и чаще это «нет» без объяснения причины 🤍 Отправляешь резюме — и в ответ тишина? Дело не всегд
Рекрутёр решает за 6 секунд — и чаще это «нет» без объяснения причины 🤍 Отправляешь резюме — и в ответ тишина? Дело не всегда в опыте. Чаще всего резюме просто не проходит ATS-систему, которая отсеивает кандидатов ещё до того, как их увидит живой рекрутёр. Offerly — AI-сервис для анализа и улучшения резюме, который покажет, что реально мешает тебе получить приглашение на собеседование. Как работает сервис: Загружаешь резюме или его наработки, выбираешь цель: соответствие конкретной вакансии, смена роли, повышение грейда или просто проверка текущего уровня резюме. Offerly даёт развёрнутый анализ по шкале от 0 до 100 на основе актуальных критериев отбора: разбирает сильные и слабые сторон, подсвечивает недостающие навыки, дает рекомендации по улучшению. А ещё задаёт наводящие вопросы и помогает сформулировать достижения по формуле XYZ, опираясь на твой реальный опыт. Кому полезно: 1. Тем, кто откликается, но не получает приглашений на собеседования. 2. Тем, кто планирует смену роли, сферы деятельности или повышение грейда и не понимает, как это правильно упаковать в резюме. 3. Тем, у кого большой опыт, но резюме давно не обновлялось и не отражает реальный уровень. 4. Тем, кто хочет объективно оценить, насколько востребованы его навыки на рынке труда сейчас. 5. Тем, кто выходит на международный рынок: Offerly переводит и адаптирует резюме под нужный язык и уровень. 6. Тем, кто не хочет тратить время на внесение правок самостоятельно: Offerly собирает готовое резюме, с которым ты точно дойдёшь до оффера. 🔥Полный анализ резюме — абсолютно бесплатный, а получить готовое резюме со всеми правками стоит всего 499 ₽ до конца июля! При покупке готового резюме — сопроводительное письмо под вакансию в подарок. [ПРОВЕРИТЬ РЕЗЮМЕ БЕСПЛАТНО] Реклама. Костоломова Алиса Владимировна. ИНН: 772589042300. Erid: CQH36pWzJqVHzWjqU7CJw6QepdhtNRseECe2ehsaZjTV6q
1 703
13
Junior Python Data Engineer Разработка и сопровождение ETL/ELT-процессов с акцентом на обработку данных и поддержку дата-пайплайнов. Фокус на выполнении технических задач под наставничеством опытного специалиста без прямого взаимодействия с заказчиком. Ищем специалиста с кверенным знанием Python/Pyspark. С акцентом на ООП. Локация: Удаленно (Беларусь) ЗП: от 600 до 1100 $ Занятость: Полная Обязанности - Разработка и сопровождение ETL/ELT-процессов - Написание SQL-запросов и Python-скриптов для обработки данных - Работа с реляционными базами данных - Поддержка и оптимизация дата-пайплайнов - Интеграция данных из различных источников - Подготовка данных для BI и аналитики - Работа с Git и участие в командной разработке Требования - Уверенное знание Python и SQL - Базовый опыт работы с PySpark - Понимание принципов ETL/ELT и построения DWH - Опыт работы с Git, Linux/Bash - Базовое понимание CI/CD - Английский язык — Intermediate и выше (обязательно). • Важно понимать как составлять грамотные и вежливые сообщения для коммуникации со стейкхолдерами проекта. Будет плюсом - Azure Databricks - SparkSQL / PySpark - Docker - Azure / AWS Формат работы: Junior Data Engineer под руководством ментора. В обязанности входит выполнение технических задач под наставничеством опытного специалиста. Работа ведется от имени другого инженера. Прямое взаимодействие с клиентом, участие в созвонах и прохождение интервью с заказчиком не требуются. контакт в Телеграме: @Valerijadus
1 787
14
Нужен мессенджер для работы? Битрикс24. Лидер рейтинга российских корпоративных мессенджеров (ComNews Research). Решайте рабо
Нужен мессенджер для работы? Битрикс24. Лидер рейтинга российских корпоративных мессенджеров (ComNews Research). Решайте рабочие вопросы в чате и на видеозвонках, ставьте задачи и встречи прямо из диалога. Искусственный интеллект поможет креативить, писать тексты, ставить ТЗ и многое другое. 10+ рабочих инструментов в одном окне. ✅ Начните работать в бесплатном Битрикс24 А как у вас с рабочими чатами? ❤️ — живут своей жизнью 📱— полный винегрет Зарегистрироваться #реклама 16+ bitrix24.ru О рекламодателе
1 364
15
Руководитель разработки DWH / Team Lead Data Engineering Обязанности: Стратегическое развитие архитектуры данных: проектирование и развитие хранилищ (DWH, Data Lake, Data Mesh), выбор технологического стека для ETL/ELT-процессов. Руководство командой инженеров данных (найм, онбординг, наставничество, проведение 1-to-1, развитие сотрудников). Участие в разработке и код-ревью ETL/ELT-процессов, обеспечение качества и доступности данных. Планирование и приоритизация задач, контроль сроков и качества выполнения. Внедрение best practices по CI/CD, тестированию, документированию и мониторингу потоков данных. Организация взаимодействия с бизнес-командами и аналитиками для бесперебойного доступа к данным. Решение сложных технических инцидентов, обеспечение SLA пайплайнов. Организация безопасности данных, отказоустойчивости и систем оповещения. Требования: Опыт работы от 5 лет в роли Team Lead / Tech Lead в области Data Engineering. Опыт построения и эксплуатации хранилищ данных (DWH / Data Lake). Глубокое знание Python и SQL (разные диалекты), понимание ООП и принципов чистого кода. Опыт работы с реляционными (PostgreSQL, Oracle, SQL Server) и колоночными (ClickHouse) СУБД. Понимание методологий моделирования данных (Kimball, Inmon, Data Vault). Экспертный уровень владения NiFi, Kafka, Airflow, DBT. Опыт работы с Docker и Kubernetes. Будет плюсом: опыт построения команды Data Engineering с нуля, понимание MLOps и поддержка ML-пайплайнов. Условия: Конкурентный уровень дохода (обсуждаемо, зависит от опыта). Официальное трудоустройство, ДМС, оплата профессионального обучения и конференций. Работа в амбициозной команде профессионалов, влияние на технологическую стратегию компании. Современный офис в центре Москвы. Отклики: тг @Sidorenkova_Kseniya
1 670
16
Data Engineer/ MLOpsE #офис #гибрид #middle Москва Компания: Bell Integrator ☑️ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА: -Понимание основ облачных технологий и технологий виртуализации и контейнеризации; -Опыт с экосистемой Hadoop (HDFS, Hive, Spark и п-р.); -Опыт промышленной разработки Python; -Опыт работы с ETL (Airflow и пр.); -Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket / Git. БУДЕТ ПЛЮСОМ: Опыт работы с платформами оркестрации контейнеров K8s, OpenShift; Опыт внедрения DS-моделей в промышленный контур; Опыт работы с Kafka; Опыт работы с популярными РСУБД (Greenplum, Teradata, Oracle, PostgreSQL); Понимание принципов построения хранилищ данных DWH; Знания в RL и Графовых нейросетях; Отличные знания в области классического ML и DL. ☑️ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ: -Разработка, поддержка и оптимизация ETL-процессов команды на платформах банка; -Внедрение разработанных DS-моделей в промышленную среду (MLOps); -Поддержка промышленной эксплуатации разработанных решений. ☑️МЫ ПРЕДЛАГАЕМ: -Возможность участия в интересных проектах. -Возможность профессионального и карьерного роста в компании. -Опыт работы в команде профессионалов. -Специальные тарифы для сотрудников в спортивные клубы и языковые курсы и пр. -Офисный\гибридный формат работы в Москве. Контакты: hr@bellintegrator.ru IT Jobs в Telegram | в VK | в Max
1 162
17
Яндекс Музыка до 360 дней бесплатно Яндекс Музыка для вас и 3-х ваших близких. Кинопоиск и Яндекс Книги тоже в мультиподписке
Яндекс Музыка до 360 дней бесплатно Яндекс Музыка для вас и 3-х ваших близких. Кинопоиск и Яндекс Книги тоже в мультиподписке Плюс. Попробуйте бесплатно❤️ Слушать #реклама 18+ music.yandex.ru О рекламодателе
1 336
18
Инженер данных #гибрид Москва Компания: Альфа-Банк 🔹Чем предстоит заниматься -Реализация высоконагруженных конвейеров обработки данных для обеспечения надежной и бесперебойной репликации данных из ИТ-систем Банка. -Реализация комплексных задач по подготовке данных в целевых аналитических хранилищах (DataLake, SandBox, FeatureStore) для построения признаков, необходимых для разработки моделей машинного обучения. -Разработка и поддержание в актуальном состоянии документации по разработанному функционалу. -Своевременное отражение статуса выполнения задач в Jira. -Проверка качества кода (код-ревью), написанного инженерами и младшими инженерами данных. 🔹Наши пожелания к кандидатам -Python - уверенное знание структур данных и алгоритмов, эффективное применение принципов ООП и ФП (Функциональное программирование), опыт написания модульных и интеграционных тестов, знание и опыт применения библиотек обработки и анализа данных - numpy, pandas. -Опыт разработки и внедрения в промышленную эксплуатацию сервисов загрузки и обработки неструктурированных и слабо структурированных данных (текст, xml, json) из внешних источников. -Способность разобраться с API поставщиков данных, используя доступную документацию. -SQL - умение создавать сложные запросы с использованием аналитических оконных функций и использовать инструменты профилирования для оптимизации их производительности, опыт работы с БД Oracle, Postgres, Greenplum. -Уверенное знание и опыт работы с инструментами разработки, планирования и мониторинга рабочих процессов (workflow engines) пакетной обработки данных. -Airflow- Опыт разработки сложных, высоконагруженных приложений обработки данных на основе PySpark, уверенное знание настроек Spark и их влияния на производительность приложений Spark. Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
1 952
19
Дата-инженер в Такси #удаленка #гибрид Компания: Яндекс 🔹Какие задачи вас ждут -Проектировать, реализовывать и оптимизировать сложные ETL-процессы У нас широкий инструментарий и огромные объёмы данных. Мы активно развиваем своё хранилище и реализуем новые сложные пайплайны обработки данных. Наши инженеры работают с данными на всех этапах, начиная от появления в источниках и заканчивая финальными витринами и отчётами. -Обеспечивать стабильность и качество того, что уже есть Нашими данными пользуется очень много людей, и важно не сломать существующую функциональность. Можно и нужно заниматься техдолгом: мы всячески поддерживаем любые улучшения, автоматизации, правки и отключение ненужного или устаревшего. -Участвовать в проработке и пилотировании нового Flink, Spark, инкрементальное построение, Data Quality, развитие собственного ETL-фреймворка, тесные интеграции с аналитическими инструментами и многое другое — нужно исследовать, сравнивать, пилотировать, думать, превращать в инструменты для всех. Что-то из этого у нас есть, что-то нужно переосмыслить, что-то внедрить — во всём можно участвовать. 🔹Мы ждём, что вы -Уверенно программируете на Python -Разбираетесь в классических алгоритмах и структурах данных -Хорошо знаете SQL и понимаете устройство современных баз данных и фреймворков обработки -Можете объяснить, для чего нужны CI/CD, выделить преимущества использования Git и ревью кода Откликнуться 🔥 Подписаться на наши каналы / @best_itjob / @it_rab
2 059
20
Прошла половина лета Выгореть ещё успеем. А пока лето — отправляемся загорать. И не просто так, а со скидкой 5000 рублей по п
Прошла половина лета Выгореть ещё успеем. А пока лето — отправляемся загорать. И не просто так, а со скидкой 5000 рублей по промокоду NETSIL от Яндекс Путешествий. Забронировать #реклама travel.yandex.ru О рекламодателе
1 161