Аналитика данных / Data Study
Kanalga Telegram’da o‘tish
Помогаю аналитикам расти в профессии и доходе Курс по продвинутому SQL и автоматизации потоков данных https://datastudy.ru/sql_advanced По всем вопросам: @daniildzheparov Канал в MAX https://max.ru/id591908196110_biz
Ko'proq ko'rsatish9 469
Obunachilar
-424 soatlar
-47 kunlar
+3830 kunlar
Postlar arxiv
Ломаем баррикады рынка труда!
Еще одно трудоустройство, поздравим Максима! 🎉
У Максима есть опыт с 2023 года в менеджменте и стратегическом консалтинге, на этих позициях он уже сталкивался частично с задачами визуализации данных и подготовки презентаций.
Как мы знаем для анализа данных нужны технические навыки, без SQL и Python никто рассматривать не будет, поэтому Максим принял решение пройти курс, а после него еще пойти на 5 занятий менторинга.
Созданные на курсе в рамках практики витрины данных использовали в процессе менторинга чтобы BI инструменты изучить. В общем отличное комбо получилось, результативное 👍
#кейс
#менторинг
#отзыв_курс
Кто я | Навигация | Обучение
💃От чего я кайфую на работе
Захотелось поделиться мыслями с вами почему я обожаю свою работу
1️⃣Смесь задач аналитики и инженерии данных
Обожаю разнообразие задач, особенно когда задача внутри себя содержит аналитику и инженерную часть. Например, когда нужно построить витрину данных, прогнать скрипт сборки локально, задеплоить все это в тестовое окружение, протестировать логику сборки и определения инкремента данных. После этого приступить к аналитике: расчет метрик, построение отчета, документация и общение с заказчиком. Обширный список задач и применение разных инструментов - это то, что не дает повязнуть в рутинных задачах 🔥
2️⃣Открытое общение в компании на "ты"
Очень круто, что в целом в IT общение на ты принято за норму и приветствуется в большинстве компаний, такое же общение выстраивается на мероприятиях/конференциях/митапах. С ужасом думаю, что где-то это работает не так, например на производствах, в гос. органах, даже в общении ассистента со стоматологом в частной клинике. Примеров вокруг меня много, слышу это от родителей, жены, друзей, что им приходится общаться в некой иерархии на работе, обращаться к руководителю по имени отчеству. В целом в этом ничего плохого нет, если выстроены нормальные человеческие взаимоотношения, но как правило руководители там чувствуют себя "начальниками" и "боссами", а от этого и коммуникация идет не на равных.
В общем коммуникация в IT на равных с взаимоуважением к каждому сотруднику - огромная ценность, которую я также обожаю
3️⃣Возможность удаленки
Конечно же это оооочень жирный плюс. Писал уже об этом много раз, еще раз подствечу в чем он заключается
🔹 я люблю долго спать (9 часов обычно, если не засиживаюсь ночью). вот эти мемы, что ты в 8:59 еще спишь, а в 9:00 сидишь уже работаешь - прямо в точку про меня)
🔹 нет чувства "обязан ехать". вспоминаю школу, когда ты должен был вставать, в любую плохую погоду и темноту утром идти до школы. сейчас чувство свободы выбора само по себе прекрасно
🔹 больше возможность путешествовать и нет привязанности к одному месту. даже если в путешествии все равно нужно работать, у тебя есть ноут и это и есть твой рабочий инструмент. опять же сравниваю с женой, что ей нужно обязательно для работы ездить в клинику, иначе ты работать не можешь.
ITшники, поддерживаете эти плюсы? Ставьте 🧑💻 если тоже любите за это свою работу (ну или хотели бы любить 😅)
3 бесплатных курса, 30+ уроков, 100+ задач 🫠
Кажется, Симулейтив сошли с ума, они отдают бесплатно три курса, за которые многие берут деньги.
Если вы хотите прокачаться в аналитике данных - начните с бесплатных курсов по самым важным разделам. Именно эти блоки помогут вам вкатиться в профессию, спрос на которую не падает из года в год.
В наборе вы получите:
🐍 Основы Python — 10 уроков, 100+ практических задач, 3 проекта для портфолио. Реальные кейсы: аналитика продуктовых метрик, автоматизация обработки чеков. Спойлер: именно с этого начинается карьера аналитика.
🗄 Основы SQL — 12 уроков, 70 задач на PostgreSQL, оконные функции, финальный проект. Без SQL не возьмут ни на одну позицию, связанную с данными.
🐼 Pandas — библиотека, которую аналитик использует каждый день. ABC/XYZ-анализ, EDA, динамика продаж, реальный проект на данных аптечной сети.
Всё это с нуля, с поддержкой в чате и доступом сразу после регистрации.
Забирайте, пока не передумали 👉 [Забрать набор курсов]
Моя статья на Habr про построение потока данных с serverless технологиями в облаке
Собрал там информацию о реальном примере работы с excel/csv файлами, когда есть потребность загружать данные из них в базу данных для хранения и анализа. В статье расписал как использую
🔹Object Storage
🔹Managed Service PostgreSQL
🔹Cloud Functions
🔹Cloud Triggers
Довольно подробная инструкция, можно все максимально повторить по шагам
А полный цикл разработки и автоматизации потоков данных проходим на курсе "Продвинутый SQL и автоматизация витрин данных" - вся практика и навыки, которые требуют сейчас работодатели от аналитиков данных.
➡️Ближайшая группа 27 июля, пиши в ЛС или оставляй заявку через сайт
Оффер в крупную ритейл компанию на 185 тысяч на руки!
Такой новостью сегодня порадовал ученик. Порадуемся за Дмитрия! 🎉
На старте обучения у Дмитрия был базовый SQL, сильный Excel и опыт junior аналитика.
Теперь благодаря уверенным хардам с SQL, Python, применением ETL инструментов, Git и BI получилось закрыть свою цель по ЗП на middle позиции 🤝
#кейс
#отзыв_курс
Кто я | Навигация | Обучение
Автоматизация задач на работе
У нас на проекте есть множество аналитических задач, которые нужно выполнять по разным сценариям: ежедневно/еженедельно/ежемесячно, либо по запросу, но всегда идентично
И для каждой такой задачи раньше нужно было вовлекать аналитика, просить его сделать определенные манипуляции, которые мог сделать только он
А что если аналитик ушел в отпуск, взял дейофф, заболел, уволился?
Сейчас пришли к тому, что каждая такая задача решается запуском автоматических джоб (скриптов). Вся логика централизовано лежит в репозитории, нет шанса что-то потерять если аналитик недоступен. И все работает по заданному расписанию с нужной периодичностью.
НО остались задачи, которые нужно запускать по запросу (не по расписанию). И вот здесь опять же нужен аналитик, чтобы нажать кнопку и запустить джобу. Бизнес-пользователи это сделать не могут в техническом контуре, но можно теперь запросто просить других коллег это сделать.
Было:
- вся логика известна аналитику в его скриптах, полная зависимость от его ресурса, скрипты запускаются вручную по запросу или когда аналитик сам помнит что их нужно прогнать
Стало:
- вся логика зафиксирована в репозиториях компании, все автоматизировано запускается по расписанию или нажатием одной кнопки если попросить аналитика или другого коллегу с доступом
- часть задач вообще доступна пользователям в привычной им системе с UI, где они сами по кнопке получают нужные отчеты
Но дальше хочу уйти еще больше в self-service для пользователей. Здесь будем исследовать в сторону внедрения ии-агентов для наших задач, а также динамическую генерацию отчетов не по прописанной логике, а в формате из запроса пользователя
А у вас как на работе? Передайте то, как чувствую себя ваши бизнес-пользователи, или вы сами)
🙏 - есть что автоматизировать, что сейчас в ручном или полуручном режиме
🧑💻 - все что можно уже автоматизировано и удобно работает
Кто я | Навигация | Обучение
У MWS Cloud появилась классная фича - новое S3-хранилище для ИИ и ML-задач
Оно работает на NVMe-дисках и рассчитано для обучения нейронок, аналитики и других сценариев, где нужны скорость обработки больших объёмов данных и минимальные задержки. Скорость передачи данных - до 1,8 ГиБ/с, а TTFB - около 20 мс.
Само хранилище совместимо с AWS S3 API, поддерживает шифрование, репликацию между дата-центрами и настройку доступа. Оплата - по модели pay-as-you-go ✅
Сейчас занимаюсь разработкой и тестированием ИИ-агентов для своих задач, поэтому присматриваюсь к S3 как файловому хранилищу для контекста моделей и RAG
Очень рад что получилось сделать практику в формате рабочих задач. А то часто слышу запрос «знание есть, а применять не умею»
Вот тебе песочница где учишься применять все как на работе https://datastudy.ru/sql_advanced
#отзыв_курс
Не перестаю учиться 🧑💻
Чем больше знаешь, тем больше возможных способов решения задач есть перед тобой, а значит более гибко можешь реализовывать их
♥️ если согласны
Параметризация SQL запросов
Часто работаю с задачами, когда Python коде нужно выполнить SQL запрос с изменяющимися параметрами.
Вручную менять сам запрос конечно невозможно каждый раз, он должен по формату функции для вызова запроса с разными например параметрами фильтрации.
И вот для таких целей нужно использовать шаблонизацию. Вариантов много:
- f-строки и Python функции
- библиотека sqlalchemy
- dbt модели
Но есть еще отдельные библиотеки, которые работают на базе jinja шаблонизации, например jinjasql
Это кажется золотой серединой, если например f-строк не хватает или в решении это может быть не безопасно из sql-инъекций, а dbt является избыточным решением
Ставь 👍 если раньше не слышал про такое и хочется конкретных примеров использования посмотреть
Зацените какое кайфовое лобби с коворкингом в нашем ЖК сделали
Я работаю удаленно и в основном из квартиры, но чтобы сменить обстановку прихожу сюда
Раньше о таком мог только мечтать, но мечты становятся реальностью если упорно с умом работать 🤝
Это ты на собесе показываешь навыки питона
✅ этап life code пройден 😎
🔥 Okko Analysts’ One Day Offer* — твой шанс получить оффер в команду аналитиков Okko
Okko запускает One Day Offer для продуктовых и дата-аналитиков уровня middle+ и senior. Это возможность пройти отбор, познакомиться с командами и побороться за оффер в аналитику одного из крупнейших стриминговых сервисов⚡️Мы ждем тебя, если ты: • Продуктовый аналитик или дата-аналитик • Специалист уровня middle+ или senior • Уверенно знаешь SQL, Python, работаешь с BI-инструментами • Разбираешься в статистике, работал с продуктовыми метриками и проводил A/B-тесты (для некоторых команд опыт с A/B-тестированием не обязателен) • Имеешь опыт в аналитике от 2 лет 👋 Нанимаем сразу в пять команд: growth аналитика, продуктовая аналитика, прикладные исследования, аналитика бизнеса, аналитика контента. Почему Okko? • Напрямую влияем на изменения в продукте для счастья миллионов зрителей • Работаем в удобном формате — в наших классных офисах, гибрид или удаленно • Заботимся о здоровье — ДМС со стоматологией • Ценим инициативу и проактивную аналитику Если хочешь делать аналитику, которая реально влияет на развитие стриминга, выполни 4 шага: 1️⃣ Подай заявку 2️⃣ Ответь на вопросы по аналитике и опыту на коротком звонке 3️⃣ Пройди интервью с HR и лидами команд, разбери кейс и технические задачи 4️⃣ Прими участие в финале Подробнее об условиях, этапах интервью и возможностях работы в Okko — на сайте. *Okko Analysts’ One Day Offer — формат быстрого найма для аналитиков от Okko. 📌 Регистрация уже открыта. Подай заявку до 28 июня 23:59 МСК по ссылке. #реклама О рекламодателе
Наконец-то обновил сайт 🔥
Теперь на главной странице собрал основные разделы, где каждый сможет найти что его интересует. Кому-то интересно обучение на курсах, другие интересуются личным менторингом и приходят в ЛС, а другим просто хочется почитать бесплатные материалы, которые я здесь пишу с 2022 года и которые до этого не были нигде структурированы.
Теперь все эти запросы закрываются на одной главной странице!
И загляните на страницу социальных сетей, там собрал все площадки, где публикуется контент - поэтому буду рад подписке)
➡️ datastudy.ru
Первый лям 🍋 просмотров
Заметил что моя статья на Хабре набрала 1 млн. просмотров 😤
Писал про оконные функции еще в 2022 году, буквально решил быстро дать пользу в майские праздники 😃
Интересно что потом ссылку на статью встречал в рабочих чатах, других каналах, ученики писали и говорили «твоя статья первая по запросу оконные функции SQL» высвечивается.
Спасибо всем кто читал и внес свой вклад в распространение)
А те кто не читал и не знаком с оконками в SQL, велком к прочтению
P.S. там внизу еще есть ссылка на вторую часть про фреймы
Ребят, не идите в аналитику, оно вам не надо!
➖ Сейчас работу будете искать вечность
➖ Курьеры в Москве поднимают 💵 как мидлы, а на стройке как сеньеры. Большие ЗП в айти = большой миф
➖ Еще пару месяцев и вообще ИИ все будет делать
➖ Сидячий образ работы это для здоровья плохо, потом будете спину лечить всю жизнь
➖ Удаленки практически нет, всех уже в офис загнали
➖ Льготные программы ипотеки для айтишников практически сделали недоступными
Считаю все по фактам расписал
😎 ну и просто куда уже лезете, тут все занято как в электричке до Одинцово в час-пик. Раньше надо было)
ИИ не убивает профессии в данных, он меняет что в них ценится. Требования растут, и сейчас выигрывают те, кто понимает весь стек, а не один инструмент.
16 июня в 17:00 пройдет бесплатный вебинар «День открытых дверей с Анатолием Карповым». Его проведёт Анатолий Карпов - основатель karpov.courses, бывший ведущий аналитик Mail.ru Group и VK, самый популярный эксперт в аналитике по исследованию NEWHR.
На вебинаре разберут:
- чем реально отличаются аналитик, инженер данных и ML-инженер;
- какие навыки останутся востребованными с развитием ИИ;
- как выбрать направление если смотришь на несколько сразу;
- ответы на вопросы в прямом эфире.
Трансляция начнется 16 июня в 17:00 по МСК, присоединяйтесь по ссылке: https://clc.to/erid_2W5zFHZ1DUu
Реклама. ООО "КАРПОВ КУРСЫ". ИНН 7811764627. erid: 2W5zFHZ1DUu
Нас всех оценивает ИИ 🤖
Вот таких проектов сейчас много, которые через ИИ прогоняют резюме, оценивают его и строят рейтинг кандидатов. Поэтому если находитесь в поиске, помните, что ключом к успеху является грамотно составленное резюме с учетом нюансов, что сначала его смотрит бездушная машина, а потом если повезет человек
Если не уверены что справились, найдите лучше человека кто поможет платно (рекрутеры, менторы, друзья из сферы кто знает рынок, а не просто работает на одном месте долгое время)
