#jobs #Almaty
📍 Формат/working arrangement: офлайн, Алматы
✔️ Должность/position: Data Engineer
🏢 Место работы/workplace: Nemo Travep
💸 Заработная плата/salary estimate: от 800,000 до 1,400,000 тг
📈 Обязанности/responsibilities:
Поддерживать и развивать ETL из внутренних и внешних систем в хранилище данных.
Поддерживать и развивать хранилище данных на всех слоях от сырых данных до витрин.
Автоматизировать и оптимизировать процессы, связанные с аналитикой и обработкой данных.
Разбираться в источниках данных и общаться с разработчиками/админами этих систем: нужно разбираться в тонкостях, знать какие данные вообще есть и как их достать.
📌 Требования/requirements:
Уровень: сеньор или как минимум очень сильная техническая база
Оркестраторы. Airflow: 2+ года (или 3+ года, если аналоги).
Колоночные СУБД. Clickhouse или аналоги: 2+ года.
MPP СУБД. Greenplum 1+ лет или аналоги 2+ лет.
Облака. Yandex Cloud: 1+ лет. Понимание принципов построения аналитики в облаке, какие сервисы для каких целей лучше. Общее понимание какие сервисы существуют и как их можно применить.
Опыт построения/доработки архитектуры аналитических хранилищ. Понимание основных архитектурных подходов, чем они отличаются, и когда какой лучше применить: Data Vault (обязательно), звезда/снежинка (обязательно), Anchor.
Опыт работы с S3, в идеале с Yandex Object Storage.
Опыт интеграции со сторонними сервисами с помощью HTTP API.
Хороший Python и отличный SQL.
Опыт отладки пайплайнов данных. Умение разобраться в причинах проблем и устранить их (в том числе через договоренности с разработчиками систем-источников).
Опыт автоматического мониторинга и контроля качества данных.
Опыт командной работы: Git, ревью, внедрение улучшений стиля кода и других процессов, автоматизация рутины.
Опыт общения с разработчиками систем-источников: уметь докопаться до тонкостей через правильные вопросы и договориться, если надо.
Необязательно, но будет плюсом:
Опыт построение моделей данных для Power BI. Большой плюс: опыт самостоятельного построения дашбордов и понимание архитектуры Power BI стека.
Опыт работы с dbt или аналогами.
Опыт работы с MariaDB, MySQL, PostgreSQL.
Опыт работы с Docker и знание DevOps практик
Понимание особенностей travel-индустрии.
Портрет идеального кандидата
Минимум один подтвержденный кейс самостоятельного построения ДВХ или в команде, где был на ведущих ролях
Минимум один кейс проекта (что угодно про аналитику) длиной не менее полугода, где был главным мозговым центром. Или много небольших по несколько месяцев
Минимум несколько кейсов (или один очень долгий), когда общался с разработчиками систем-источников, договаривался на изменение источников и потом эти данные забирал
Минимум один кейс использования DataVault
Минимум один кейс использования Схемы Звезды/Снежинки
📢❗🚨 Контакты для связи/contact information:
🌐 Ссылка на вакансию/Link to the job description:
ЗДЕСЬ