Аналитика данных / Data Study
Відкрити в Telegram
Помогаю аналитикам расти в профессии и доходе Курс по продвинутому SQL и автоматизации потоков данных https://datastudy.ru/sql_advanced По всем вопросам: @daniildzheparov Канал в MAX https://max.ru/id591908196110_biz
Показати більше9 453
Підписники
-124 години
-127 днів
-930 днів
Архів дописів
Топ вакансий на аналитика-инженера с интересными задачами
BI/ Data Engineer (SQL, Airflow) - 250+ тыс.
Ключевой навык: Отличное знание SQL и опыт написания сложных запросов
Full Stack Data (engineer + analyst) - 220 тыс. на руки
Ключевой навык: уверенное знание SQL, понимание нормализации, опыт разработки витрин.
70% времени занимает аналитика, 30% разработка
Middle+/Senior Data-аналитик - 200-300 тыс.
Ключевые навыки: продвинутый SQL, опыт построения аналитических витрин,навыки работы в BI инструментах, опыт с ETL инструментами
Data-аналитик - 260-320 тыс. на руки
Ключевые навыки: опыт работы с ETL-процессами (описание, мониторинг, разработка), написание сложных SQL запросов для витрин данных
Data Analyst - 200 тыс. на руки
Ключевой навык: опыт подготовки системных требований формата source to target, уверенное владение SQL, разработка систем обработки данных на базе DWH и ETL
Кайфую от таких вакансий, потому что сам работаю на стыке аналитика и инженера данных и вижу что такое ценится на рынке и востребовано судя по кол-ву открытых вакансий
Сейчас на курсе идёт 1-й практический спринт
1️⃣ Ученик разрабатывает логику сборки и обработки данных в хранилище на SQL, проверяет качество данных, считает нужные метрики. Важно, чтобы витрина соответствовала техническому заданию и данные в ней были верные и качественные.
2️⃣ Когда логика сбора данных готова, начинаем реализовывать автоматическую загрузку данных с помощью Airflow или Cloud Functions.
Можно сделать частичную или полную загрузку, создать таблицу или мат. представление.
При этом нужно учесть нюансы применения витрины из задания
- частота обновления и использования витрины
- количество источников и их тип загрузки и частоту обновления
И многое другое, о чем рассказано в уроках
Приглашаю тебя на бесплатный индивидуальный созвон
🔹обсудим твой опыт в аналитике и чего ты хочешь дальше
🔹найдем шаги развития в профессии конкретно для тебя
🔹покажу материалы обучения "Продвинутый SQL и автоматизация витрин данных"
🔹отвечу на любые вопросы в сфере аналитики/инженерии, обучения и карьеры
Записаться на бесплатную консультацию
В работе нравится использовать ИИ помощников для ускорения разработки и анализа
Закрываю ИИ 2 задачи
1. Задать вопросы по документации или помочь исправить ошибку в коде. Для этого подходит любой ИИ-чат
2. Автодополнение кода. Использую когда пишу на Python, очень помогает ускорить работу, т.к. инструменты могут и просто строку дописывать или целые код-блоки
Вот для второй задачи есть бесплатно классное расширение - Kodacode
Использую его в VS Code, в документации все написано про установку и быстрый старт 🎹
С масленицей!
Весна в Москве пока не ожидается, опять все замело. Но не забываем себя радовать вкусными блинами)
Мой личный топ
1. незаменимая классика со сгущенкой
2. начинка из красной рыбы и творожного сыра, это максимально вкусно
3. блины с творогом и сметаной
4. блины из гречневой муки со сметаной. если не пробовали, очень рекомендую
5. если где-то заказываю, то ветчина/сыр или курица в сливочном соусе
пока писал пост от мыслей проголодался 😄
Операторы в Apache Airflow
Для создания логики задач в Apache Airflow удобно использовать различные операторы. Это как готовая логика, в которую только передаешь нужные параметры на вход.
Например:
PythonOperator - используется для вызова python функций
SQLExecuteQueryOperator - используется для вызова SQL запросы к базе данных по указанному соединению
BashOperator - вызов команд терминала на Bash
EmailOperator - для формирования и отправки писем на электронную почту
Мы работаем с PythonOperator как самым часто применяемым в компаниях. Это дает максимальную гибкость в формировании логики задачи с помощью Python кода, в котором можно если нужно и SQL вызвать, и API запрос сделать, и на email письмо отправить. А что еще важней правильно сделать обработку ошибок, логирование и повторные попытки вызовов если необходимо.
#вопрос_от_ученикаОптимизируем SQL запросы
Кейс: использование подзапросов в джойнах
обычно такое встречается, когда хотят соединить таблицу только на определенную выборку данных из другой таблицы
Как переписать более оптимально: напиши обычный join, при этом добавь нужное условие соединения в on
Избавляйтесь от подзапросов в джойнах когда это возможно. Эффективней будет дописать условие соединения, чем вызывать подзапрос
--так не делай
SELECT *
FROM customer_reg r
LEFT JOIN (SELECT * FROM customer_auth WHERE rn_first = 1) af
ON r.customer_id = af.customer_id
LEFT JOIN (SELECT * FROM customer_auth WHERE rn_last = 1) al
ON r.customer_id = al.customer_id
;
--делай так
SELECT *
FROM customer_reg r
LEFT JOIN customer_auth af
ON r.customer_id = af.customer_id
AND af.rn_first = 1
LEFT JOIN customer_auth al
ON r.customer_id = al.customer_id
AND al.rn_last = 1У нас в группе обучения собрались очень классные специалисты из разных компаний, разным опытом и сферой деятельности. Очень ценно, что у каждого есть своя цель в обучении:
🎯 научиться оптимизировать SQL запросы
🎯 освоить автоматизацию через Airflow
🎯 самостоятельно разрабатывать витрину, не только ставить ТЗ инженерам
🎯 усилить знания и практику чтобы сменить работу
Все это максимально достижимо, стоит лишь выделить свой ресурс времени на 1.5 месяца и впитывать как губка все материалы и практику
Подробно про обучение
➡️ предзапись в группу через созвон со мной
Книги по SQL
📗 SQL: быстрое погружение / Уолтер Шилдс
📗 SQL. Сборник рецептов / Энтони Молинаро, Роберт де Грааф
📗 Изучаем SQL / Алан Бьюли
📗 SQL для чайников / Аллен Тейлор
Книги конечно хорошо, но потом наступает этап когда нужно закреплять и усиливать свои знания на практических задачах, а не в симуляторе или в теории. А если нет опыта или возможности сразу брать задачи на работе, то максимально приближенные к рабочим условия создал на курсе по продвинутому SQL - старт 2 марта
Завтра выступаю на конференции c докладом
Расскажу чем занимались в компании прошлый год в рамках клиентской аналитики, приходите послушать в 14:00
- определение клиентского статуса в зависимости от целевого действия
- атрибуция клиента на уровне компании и отдельных продуктов
- техническая реализация единой аналитической витрины клиентских продуктовых действий
Регистрация
Топ баз данных по популярности
Почитал исследования по рынку по популярности использования разных баз данных. В целом топ привычных реляционных баз устойчив: корпоративный гигант Oracle, а широко известные MySQL, PostgreSQL, SQL Server.
Рейтинг здесь
MongoDB широко применяется, но она не хранит данные в привычном табличном виде и SQL запросы к ней не попишешь - она чисто применяется для backend части информационных систем.
А вот топ аналитических (OLAP) баз много где возглавляет Clickhouse. И много где на 2-3 месте стоят Apache Druid и Apache Pinot. Нужно потрогать их, возможно добавлю в песочницу на курс для учеников.
Как выстроить карьеру аналитика
Сегодня легко начать учиться, но сложно понять, что действительно приведет к профессии, а не просто к очередному набору знаний. Без понимания рынка и траекторий роста путь в аналитику становится хаотичным.
Чтобы разобраться в этом, karpovꓸcourses собрали бесплатный стартер-пак в аналитику данных: вебинар с Анатолием Карповым о рынке аналитики в 2026 году, навыках, дающих преимущество, и возможных траекториях в профессии, а также 4 полезных гайда — про собеседования, нейросети, карьерный рост от Junior до Senior и A/B-тесты без ошибок.
Переходите по ссылке и забирайте стартер-пак бесплатно: https://clc.to/erid_2W5zFGofY32
Реклама. ООО "КАРПОВ КУРСЫ". ИНН 7811764627. erid: 2W5zFGofY32
Собрал пиццу, вообще это мое наверно одно из самых любимых блюд с детства. Помню как в детстве еще собирал ее дома с мамой, потом уплетал, запивая черным чаем с сахаром 😋
Собеседования для аналитиков
Еще пару лет назад участвовал в проведении мок-собеседования на роль BI аналитика.
Кто сейчас в поиске, можно погрузить себя в атмосферу собеса, посмотреть что спрашивают у аналитиков
по разным направлениям:
- BI
- Продуктовая
- Системная
- Data
Собеседования проводились для кандидатов уровня junior
📍Моковое собеседование Junior BI-аналитик | Даниил Джепаров, Senior BI Analyst, RNT Group
📍Моковое собеседование Junior Бизнес-аналитика | Ольга Мазур, Head of Business Analysis, Samokat.tech
📍Моковое собеседование на позицию Junior Системного аналитика | Наталья Золотова, Ведущий системный аналитик
📍Моковое собеседование на позицию Junior Data Analyst | Дмитрий Лапин, DA/DS Team Lead, JSA Group
Делюсь фильмов на выходные
Скажу честно, я обожаю животных, поэтому фильмы с сюжетом вокруг животных мне сильно нравятся. Рекомендую к просмотру в уютный пятничный или выходной вечер фильм "Марли и я"
Очень трогательный фильм оказался для меня, думаю вам тоже понравится
⚡️Пошаговый план: как получить оффер на аналитика в 2026 году?
Когда начинаешь изучать новую профессию, тебе сложно разобраться в потоке информации куда и как правильно развиваться.
Непонимание уходит, если вы уверены в правильности своих действий, которые может подсказать специалисты с опытом.
Приглашаем на бесплатный вебинар, где Андрон Алексанян - эксперт в области аналитики и CEO школы аналитики Simulative — в прямом эфире разберет все важные аспекты в работе аналитика, а также расскажет как получить оффер быстрее других.
Это очень полезное событие для тех кто только зашел в аналитику и для тех, кто хочет зайти в ближайшее время. Особенно если вы не понимаете, какие навыки действительно важны или боитесь, что без опыта вас не возьмут на работу. Кстати, на вебинаре также разберут: как стать аналитиком в 30/40/50 лет и т.д.
На вебинаре:
🟠Разберем полный роадмап: что учить, в каком порядке, до какого уровня;
🟠Покажем структуру хорошего портфолио с примерами;
🟠Обсудим, что говорят реальные наниматели - какие у них требования:
— Покажем примеры, как оформить резюме и портфолио, чтобы привлекать внимание — Рассмотрим как выглядит найм изнутри от лица HR💬 Всем зарегистрировавшимся Simulative пришлют полезный материал — карту компетенций аналитика данных со всеми нужными инструментами для освоения. 😶Зарегистрироваться на бесплатный вебинар
На прошлой неделе проводил несколько интервью в поисках аналитика
Каждому кандидату задал вопрос использует ли он временные таблицы при написании SQL запросов? и если да, то для каких целей
И каждый почему-то перепутал временную таблицу с CTE. Это совсем разные вещи, хоть и схожи в целях их применения - получить промежуточный результат для дальнейшей обработки данных.
Больше информации писал здесь
📍 про CTE
📍 про TEMPORARY TABLE
БЕСПЛАТНЫЙ ВЕБИНАР 05/02
Три секрета собеседований, без которых не получить сильный оффер (+20%, +40%, +80%)
Разница между обычным и топовым оффером часто кроется не в хард-скиллах, а в умении себя презентовать. Как доказать, что вы стоите +40%, +80% к рынку?
Как понять, соответствуете ли вы культуре компании до того, как получите отказ?
Об этом и поговорим на вебинаре:
🔥 Реальный роадмап аналитика: какие компетенции нужны рынку и за что реально готовы платить.
🔥 Как адекватно оценить свою стоимость и аргументировать повышение зарплаты на собесах.
🔥 Cultural Fit подписчика без воды в прямом эфире (разбор того, что усиливает, а что убивает оффер).
Почему мне можно верить:
Я практик, а не теоретик.
✅ 7 лет в Data & Product Analytics (Ozon, Avito, 2 стартапа в России и за рубежом).
✅ Сейчас работаю в международной AI-компании.
✅ Автор канала @jazzlitics.
А также расскажу про свою программу карьерного сопровождения — не пропустите!
🎁 Бонус для тех, кто досмотрит до конца: Фишки для кейсов по прайсингу - UX психология 🎁
❗️Ссылка на вебинар будет опубликована в канале спринта
ХОЧУ НА СПРИНТ
Реклама. ИП Денисова Анна Алексеевна
ИНН 771920968221. erid: 2Vtzqv4Dvvw
Сегодня написал автоматизацию создания репозиториев для учеников с помощью GitHub API
Раньше каждый раз у меня уходило по 40-45 минут на монотонные действия
- создать репозиторий из шаблонного
- добавить нужные секреты для деплоя
- добавить права доступа ученику
Сейчас все это можно сделать буквально за 3 минуты 👨💻
- закинул на вход нужные параметры
- на выходе получил эксельку с ссылками на готовые репозитории с привязкой к ученику
До этого также написал автоматизацию по доступам в БД
- создать схему
- создать пользователя
- накинуть все нужные права и роли
- закинуть креды в таблицу учеников
- сформировать сообщение для отправки кредов в телеграм каждому индивидуально
ну кайф просто, скоро в DevOps подамся 😄
