Python разработчик (middle+, senior)
#гибрид #офис #полныйдень
З/П от 350 000 до 450.000
Проект: платформа МТС BigDatа (DataOps platform)
MTS Big Data стратегически развивает направление собственной платформы хранения и обработки больших данных - DataOps platform. Мы делаем все, чтобы наши клиенты могли получать технологии для организации непрерывного потока данных от загрузки до потребления. У нас амбициозные планы по потреблению платформы. Cейчас платформа предоставляется внутренним заказчикам из МТС, мы же хотим повысить потребление и сделать платформу публичной с помощью облака как это делают AWS, GCP, Yandex и другие.
Создавать инструменты для обработки и хранения больших данных, которые способны работать в облачной среде и предоставлять удобный self-service это большая и амбициозная задача. Сегодня в компании запущена и успешно работает первая версия платформы, которой пользуются потребители. Мы приглашаем тебя бросить вызов разработке промышленной версии платформы, как аналог AWS, в части Big Data.
Вместе с тобой нам предстоит:
• создание self-service инструментария для работы с технологиями BigData по хранению, обработке и визуализации данных.
• стать экспертом в технологиях spark поверх k8s/openstack, Yarn
• сделать так, чтобы все предоставляемые технологии отлично работали друг с другом с минимальными затратами клиента
• отправить все инструменты и системы хранения в облако
• подключить весь МТС как потребителей нашей платформы
Работая у нас вы будете на стыке самых трендовых технологий - Big Data и AWS-like Cloud.
Задачи:
• Нужно сделать так, чтобы весь МТС и компании за пределами МТС были потребителями нашей DataOps платформы;
• Проработка требуемого функционала с потенциальными потребителями вместе с PO;
• Проработка интеграций с системами, которые нам требуется для создания своего функционала;
• Постановка задач другим членам команды и смежным подразделениям, код-ревью, контроль выполнения задач;
• Разработка backend маркетплейса в части BigData;
• Разработка self-service инструментария для работы с технологиями BigData по хранению, обработке и визуализации данных;
• Реализовать набор микросервисов для интеграции с cloudmts;
• Познакомиться с технологией spark поверх k8s/openstack, Yarn и разработать вспомогательные решения для удобного совместного функционирования;
• Проводить RND новых инструментов/решений на рынке, c целью замены существующих или закрытия потребностей в новых;
• Взаимодействие с конечными потребителями платформы и их командами разработки в рамках развития DataOps platform;
• Разработчик (lead/tech pm) менторство и помощь мидл/джун разработчикам.
Обязательно:
• Опыт разработки на Python от 3 лет;
• Опыт применения Flask, Django, Celery;
• Опыт проектирования схем баз данных, хорошие знания SQL;
• Знание и понимание принципов реализации систем мониторинга (Prometheus, Grafana);
• Знание процессов непрерывной интеграции и развертывания (GitlabCI, Jenkins, Artifactory);
• Опыт работы в продуктовой команде.
Желательно:
• Практический опыт работы с технологиями Big Data (Spark, Airflow, Hadoop, Hive, MPP (YDB, Greenplum, Teradata, Vertica), S3, Kafka, Flink, etc.);
• Понимание архитектуры маркетплейсов Yandex Cloud, AWS, GCP и их основных компонент, связанности компонент между собой;
• Понимание процессов взаимодействия с пользователями provisioning/billing/autorization и внешними сервисами marketplace;
• Знание Golang.
🔝 Условия: зп+аванс, премии (20% от годового оклада), есть система ревью, выдаем 16 MacBook Pro, hp или Dell на выбор и многое другое 😉
📲 Пиши:
@golyboglazayaaa_99 🙃
#вакансия #IT #devs #developer #django #python #sql #senior