Аналитика данных / Data Study
الذهاب إلى القناة على Telegram
Помогаю аналитикам расти в профессии и доходе Курс по продвинутому SQL и автоматизации потоков данных https://datastudy.ru/sql_advanced По всем вопросам: @daniildzheparov Канал в MAX https://max.ru/id591908196110_biz
إظهار المزيد9 455
المشتركون
+224 ساعات
-147 أيام
-1030 أيام
أرشيف المشاركات
Открепляю сообщени о стажировке в Сравни
Мы набрали стажеров, по впечатлениям от собесов все ребята мотивированы погружаться с головой в аналитические задачи. В понедельник поедем знакомиться в офис, делать онбординг и есть пиццу 😉🍕
Нашёл вот такую визуальную карту Chart Suggestions для выбора более оптимального и эффективного визуального элемента в зависимости от данных и решаемой потребности визуализации
Забирайте себе, может кому-то пригодится на практике 😉
Подборка вакансий для аналитиков: продукт, операции, маркетинг 👀
Tech-команда СберМаркета ищет крутых специалистов уровня Middle и Senior. Подробнее про их Data-культуру в тг-канале — SberMarket Tech.
🟡 Операционный аналитик (Доставка)
Будешь заниматься расчётом метрик, подготавливать дашборды, отрисовывать данные в BI системах (Tableau, Metabase).
🟡 Middle Product Analyst (Experimentation platform)
Будешь развивать методологию глобальной контрольной группы (holdout), создавать методологию экспериментов с рандомизацией по регионам.
🟡 Маркетинговый аналитик (Retail)
Будешь заниматься аналитической поддержкой команды маркетинговой активации ретейлеров, которая реализовывает проекты, нацеленные на увеличение количества заказов / GMV / AOV / new users / частоты покупок в Сбермаркете.
🟡 Маркетинговый аналитик (CRM&Promo)
Будешь проводить маркетинговые ресерчи, А/B-тесты, строить отчетности в Tableau и поддерживать её.
🟡 Продуктовый аналитик (Marketing&Promo)
Будешь заниматься аналитической поддержкой команды, поиском инсайтов, генерацией гипотез, а также проводить А/B-тесты.
🟡 Маркетинговый аналитик (B2B)
Будешь формировать и оптимизировать отчетность, разрабатывать и поддерживать тригерные цепочки коммуникаций с партнерами.
🟡 Старший продуктовый аналитик
Будешь проводить исследования данных для поиска инсайтов и проверок гипотез, внедрять их в текущие процессы.
Больше вакансий в СберМаркет Tech ищи вот тут!
Реклама. ООО «ИНСТАМАРТ СЕРВИС», ИНН: 9705118142. Ерид: LjN8KVEiH
Лучшие вопросы средней сложности по SQL на собеседовании аналитика данных
Хорошая статья для повторения тем по SQL перед собеседованием
Статья
Live-интенсив: разбираем тестовое задание в OZON на junior-аналитика! 🔥
Мы знаем, что разбор тестовых заданий - ваш любимый формат. Поэтому мы приглашаем вас на интенсив, где мы в прямом эфире будем разбирать настоящее тестовое задание в OZON на аналитика данных!
Собираемся в прямом эфире 25 июня (вт) в 19:00 (Мск). Ссылка на трансляцию придет в бота, записывайтесь!
👉🏻 Записаться на live-интенсив 👈🏻
Что будем делать на интенсиве:
◾️ Проанализируем заказы пользователей по retention, времени доставки, сумме заказа т.д.
◾️ Научимся легко генерировать большой DataFrame с синтетическими данными
◾️ Посчитаем описательные статистики
◾️ Изучим полезные фичи Pandas: apply, map, pct_change и др.
◾️ Построим интерактивные графики с помощью plotly
◾️ Научимся строить и читать необычные графики - например, violinplot
Вебинар подойдет даже если вы только-только начинаете свой путь в аналитике - будем разбирать все по шагам понятным языком 🧡
Короче, ждем всех – будет мега-круто!
👉🏻 Записаться на live-интенсив 👈🏻
Реклама. ООО «АЙТИ РЕЗЮМЕ». ИНН 4025460134.
Erid:LjN8KUuEM
Бесконечно можно радоваться 3 вещам:
1. Когда светит солнышко ☀️
2. Когда твои ученики находят работу 💼
3. Когда твои посты читают и обсуждают в проф. сообществах 🧑💻
Вообще сегодня отличное настроение, жена сдала госы и защитила красный диплом 📕👩🎓 В медицинском ВУЗе!!! Это вам не аналитике учиться, у них там думать и зубрить кучу материала нужно 😃
Пытаюсь сейчас ее переманить в аналитику или в IT в целом, она говорит смотря на мои открытые экраны со скриптами, что «более скучную работу чем у тебя я не видела» 😅 Вот так, каждому свой выбор)
Для тех, кто хочет в финтех
Т-Банк растет и зовет сильных специалистов в команду. Условия — мед: задачи нескучные, коллеги недушные. Есть над чем подумать и когда отдохнуть.
Приходите прокачивать навыки, развивать финтех и работать в команде единомышленников. Посмотреть вакансии и откликнуться, если у вас больше двух лет опыта, можно здесь
Реклама. АО «Тинькофф Банк», ИНН 7710140679
Классная статья, в которой можно посмотреть устройство хранилища данных по слоям хранения.
Расписаны виды источников данных и даже применяемые SCD типы для загрузки данных 👍
Кто задается вопрос «что это такое ваше DWH и почему придумали новое название для базы данных» - вам обязательно к прочтению 😉
Статья начала 2022 года, видно что описанный стэк технологий явно неактуален. Думаю ребята уже съехали как минимум с Oracle (в конце написано что в планах был переезд на Greenplum), SAP Business Objects и Power BI тоже скорее всего чем-то заменены.
Читать статью
Статья про миграцию Big Data платформы и огромное количество данных 🤯
📍2 года миграции
📍1000+ привлеченных специалистов
📍5 Пб объема данных
Читать статью
Бесплатный интенсив по подготовке к собеседованиям на позицию аналитика данных 🔥
📣 Всем привет! Хотим пригласить вас на уникальный 4-дневный интенсив по подготовке к собеседованиям на позицию аналитика данных!
Программа насыщенная и затрагивает сразу много аспектов подготовки к собеседованиям:
◾️ День 1: Составление резюме, cover letter, портфолио и самомаркетинг
◾️ День 2: Решение задач с собеседований
◾️ День 3: Разбор вопросов с технических собеседований
◾️ День 4: Разбор продуктовых кейсов
Каждый день мы будем присылать вам материалы по одной из тем. А по некоторым темам даже будет дополнительное «домашнее задание»!
👉🏻 Записаться на бесплатный интенсив 👈🏻
Интенсив подходит всем, кто изучает аналитику и планирует искать работу. Участие в нем займет не более 1 часа в день, но даже в таком формате вы получите для себя массу пользы!
Кстати, вы можете вписаться и получить весь материал абсолютно бесплатно. А если хочется более глубокой проработки и персональных консультаций - мы предусмотрели 30 VIP-мест. Так что записывайтесь, выбирайте формат участия и погнали 🔥
👉🏻 Записаться на бесплатный интенсив 👈🏻
Реклама. ООО «АЙТИ РЕЗЮМЕ». ИНН 4025460134.
Erid:LjN8KLZJz
🚀 Исследуем данные с помощью
ydata-profiling
Сегодня расскажу про инструмент, который вы можете использовать для первичного анализа данных (EDA) и оценки их качества (Data Quality Check) - это библиотека ydata-profiling.
Этот инструмент позволяет в считанные минуты получить полный отчёт о ваших данных, исследовать их основные характеристики и выявить потенциальные проблемы до глубокого погружения в анализ.
Основные возможности ydata-profiling:
1. Генерация отчётов
С помощью библиотеки можно быстро подготовить отчет , который включает в себя статистику по каждой переменной, распределения, корреляций, пропущенных значений и многое другое.
2. Оценка качества данных
Этот же отчет поможет обратить внимание на проблемы в ваших данных, такие как пропущенные значения, дубликаты или неоднозначные форматы, что позволит оперативно перейти к очистке данных.
3. Интерактивные визуализации
Можно визуально посмотреть на распределения и корреляции благодаря встроенным графикам и интерактивным элементам.
Как начать работу?
Для начала работы с ydata-profiling нужно установить библиотеку, например с помощью pip:
pip install ydata-profiling
После установки загрузите ваш DataFrame и сгенерируйте отчёт в несколько строк кода:
import pandas as pd
from ydata_profiling import ProfileReport
df = pd.read_csv('data.csv')
profile = ProfileReport(df, title="Profiling Report")
И на выходе вы получаете отчет, который можно просматривать прямо в Юпитер ноутбуках, либо сохранить например в html и
открыть просто в браузере и даже поделиться с коллегами)
🔗 Официальная документация ydata-profilingСиндром самозванца
Синдром самозванца - психологический синдром, при котором человек не может реально оценить свои качества и личные достижения. Человеку кажется, что он знает меньше других и не достоин того что сейчас имеет. Это проблема адекватной оценки своих достижений и умений.
Лично у себя я ловлю такие мысли иногда, что я "делаю мало", "знаю недостаточно хорошо", "не заслуживаю чего добился" или "мог бы в свои годы достичь большего".
Знакомо❓
Несколько способов как бороться с этим:
1️⃣ Сравнивайте свое текущее состояние с тем что было 1/2/3 года назад
В моменте может показаться, что вы непродуктивны или двигаетесь не так быстро как хотелось бы. Но если вы сравните себя текущего с собой из прошлого, то скорее всего удивитесь как много вы сделали и достигли за это время.
2️⃣ Спрашивайте обратную связь о себе со стороны
Мы себя видим одним образом, люди со стороны могут видеть вас совсем по-другому. Спросите у своих родственников, друзей, коллег что они думают про вас.
- Как бы они вас описали в нескольких предложения, подчеркнув ваши основные черты
- Какие они видят в вас сильные стороны
- Какие они видят в вас недостатки (увы, они есть у всех, но с ними можно работать 👌)
Вы удивитесь сколько нового можно узнать о себе взглядом других людей со стороны.
3️⃣ Всегда занимайтесь саморазвитием и ставьте перед собой цели
Банально, но это дает гарантию, что вы можете оцифровать свои достижения по явному чек-листу прописанных целей. Достижение цели и проставление заветной галочки done ✅ напротив нее дают вам заряд положительных эмоций и фактическое признание своего достижения.
Это пункты, которые я взял себе на вооружение, вы их тоже можете попробовать 😉
+1
Это я получил костюм для эндуро-покатушек и мысленно газую на мотике в нем 😂
Сегодня праздничный день, а значит проведите его с пользой для себя и своего здоровья, пополните силы перед еще 2-мя рабочими днями!
Приглашаем на вебинар: Разбираемся с продуктовыми метриками с нуля 🔥
Основа любой аналитики - продуктовые метрики. Если аналитик их не знает, нет смысла учить Python, SQL, математику и прочее. Это база.
Поэтому мы решили провести вебинар, где подробно разберем все основные продуктовые метрики, их классификацию, способы расчеты и примеры из разных бизнесов: от торговли до банкинга.
📅 Дата: 13 июня, четверг
🕘 Время: 19:00 по Мск
🔗 Доступ к трансляции придет в бота, записывайтесь → ссылка
Вебинар подойдет даже если вы только-только начинаете свой путь в аналитике - будем разбирать все по шагам понятным языком 🧡
Реклама. ООО «АЙТИ РЕЗЮМЕ». ИНН 4025460134.
Erid:LjN8Jx43c
Привет
Я являюсь ментором в Solvery и сейчас мне ребята написали, что сегодня в 19:00 есть отличная возможность пройти moc-собеседование на middle бизнес-аналитика.
Собеседование будет записываться в прямом эфире, для вас это классная возможность потренироваться + добавить в резюме такой публичный опыт 😉
Напишите мне в личку @daniildzheparov кто готов принять участие
🔍 ETL с помощью SQL: Инкрементальная загрузка 🔍
✨ В отличие от полной перезагрузки (Full Reload), описанного в этом посте, инкрементальная загрузка перемещает только новые или обновленные данные. Это экономит ресурсы и время, особенно при работе с большими объемами данных.
Давайте поговорим о ключевых этапах этого процесса:
1️⃣ Определение инкремента данных
Инкремент - набор данных, которые нужно загрузить. Он может определяться как набор новых строк в источнике, так и набор строк с обновленными значениями. Для определения инкремента обычно используются поля со смыслом как "дата обновления записи", "дата создания записи" и др. с похожим смыслом, по которым можно сделать выборку нужного инкремента.
Пример выделения инкремента из таблицы source по условию, что поле
update_date имеет сегодняшнюю дату
SELECT *
FROM source s
WHERE update_date = CURRENT_DATE()
2️⃣ Вставка инкремента в target таблицу
Пример запроса может выглядеть так:
INSERT INTO target
SELECT *
FROM source s
WHERE update_date = CURRENT_DATE();
Здесь есть нюанс, что в таблицу target попадут все записи инкремента и останутся те, которые были уже в таблице например под одним и тем же id. Таким образом может собираться накопительная историческая таблица, например с продажами. К примеру в таблице target уже была запись по продаже с id = 5 и status = 'buy'. А в новом инкременте из source прилетит обновленная строка с id = 5 и status = 'cancelled'. Таким образом в target будет зафиксирована вся история обновления строк.
Если в target таблице нужно оставить только актуальную версию данных без исторического состояния, такой способ я распишу в одном из следующих постов этой серии.
Оставляйте реакции, если пост был полезен 😉Компания ВТБ — один из лидеров на российском рынке, который предоставляет аналитикам возможность развиваться в банкинге и работать над крупными бизнес-проектами страны.
Сейчас открыт набор на программу "РОСТ" по направлению аналитика. Кандидатам предлагают:
— зарплату 100 000 рублей на старте программы и трудоустройство по ТК;
— ДМС, корпоративный спорт и бонусы;
— личный план развития и поддержку ментора;
— участие в реальных проектах в офисе или в гибридном формате;
— разные направления на выбор: координация и сопровождение цифровых каналов, цифровые витрины, анализ данных и моделирование, риски и другие.
Из интересного — задачи на программе:
— проектирование и разработка цифровых витрин;
— развитие инструментов геймификации;
— автоматизация и моделирование крупных бизнес-процессов.
Короче, это отличное место для старта карьеры в аналитике!
Присоединиться к команде ВТБ можно тут: https://u.to/OOy4IA
Реклама, ПАО "ВТБ", ИНН 7702070139. erid: 2VtzqxhndfU
Начитаешься таких статей про подключения из одной базы данных в другую и думаешь «а может ETL вообще не нужен 😅»
🔗 dblink для подключение из Postgres к другим БД
🔗 Интеграция Postgres и Hadoop
Все это конечно хорошо, но применение зависит от поставленных задач. Большая часть практических кейсов все равно требует полноценного ETL пайплайна, где не обойтись выполнением запросов к одной БД из другой
⭐️ Хакатон ARCHI.Tech от ВТБ – уникальный шанс сделать проект в роли ИТ-архитектора. Приглашаем начинающих и опытных ИТ-специалистов – студентов и выпускников технических вузов, разработчиков, архитекторов, аналитиков.
🔹 Выбирайте задачу любого уровня — простую, среднюю или сложную
🔹 Собирайте архитектурные артефакты, спрятанные в заданиях, и зарабатывайте баллы
🔹 Презентуйте свои решения экспертам ВТБ
🔹 Не упустите возможность решить «разминочную» задачу и получить дополнительные баллы
🔹 Заработанные баллы, найденные артефакты и коэффициент сложности задачи помогут определить победителей
🔹 Три категории: «Архитектор стрима», «Архитектор системы» и «Архитектор данных»…
🔹… и три призовых места в каждой
🔹 Лучшие из лучших разделят призовой фонд в 1 200 000 рублей!
Начало предварительного этапа – 14 июня. Соревнование стартует 28 июня – у участников будет 24 часа на решение задачи.
👉 Продемонстрируй свои знания об архитектуре – участвуй в ARCHI.Tech от ВТБ: https://cnrlink.com/architechvtbdatastudy
Реклама. БАНК ВТБ (ПАО). ИНН 7702070139. erid: LjN8KTUta
Сегодня начали собесить стажеров в нашу команду, до конца недели ребята уже получат решение по приглашению на стажировку в Сравни 👨💻
Кто пропустил, Сравни запускает летнюю стажировку по направлению аналитики данных и продуктовой аналитике. Вот здесь писал об этом
📍Отличная новость для тех кто еще не подал заявку - старт стажировки сдвигается на 1 июля, чтобы все комфортно могли стартовать после сдачи сессий, дипломов и т.п.
Оставляйте заявку, решайте тестовые задания, и возможно с вами уже скоро начнем работать в одном коллективе 😉
