Детектив данных
Kanalga Telegram’da o‘tish
Канал про "Аналитику Данных" и мой путь в профессию. Вкатился после 33 Ныне работаю BI аналитиком в "Комусе" Бывший промышленный альпинист, военный юрист, оперуполномоченный, директор, торг представитель, супервайзер и даже HR BP. Связь: @janet_noir
Ko'proq ko'rsatish2 831
Obunachilar
+224 soatlar
Ma'lumot yo'q7 kunlar
-330 kunlar
Postlar arxiv
2 831
🕵 Всем привет.
Ох, как я люблю подобные письма.
Вычислят напрямую или по ответам. В какую анонимность играем?✨
Помню на одной из прошлых работ (не буду показывать пальцем на гос службу), подобные анонимные опросы заполнялись от руки и сдавались руководителю. Оставалось только дописать ФИО.
Искренне убеждён, что любой анонимный опрос никогда не будет анонимным.
Для начинающих участников корпоративного мира - просто знайте - никогда не пишите ничего, что вы не можете озвучить в реальности, но лучший вариант - максимальные оценки всего и вся.
🧑💻Отщёлкались и спокойно работаем дальше.
2 831
Между запросом и выводом — четыре шага, о которых редко пишут
Курс по SQL заканчивается на моменте, когда запрос собран и таблица подтянулась. А работа продуктового аналитика с этого места и начинается: договориться с заказчиком, проверить данные, обойти ошибки в расчете, собрать вывод.
Именно этот кусок пути разбирают на бесплатном вебинаре karpovꓸcourses 25 августа. Пройдут его на реальных примерах:
— какие вопросы задать до запроса, чтобы выгрузка отвечала на задачу;
— как проверить данные после и поймать то, что SQL не подсвечивает;
— какие типовые ловушки прячутся в расчетах;
— как превратить таблицу в вывод, к которому у заказчика не остается лишних вопросов.
Ведет Дмитрий Бакаев — продуктовый аналитик в «Передовых Платежных Решениях» и выпускник курса «Аналитик данных» karpovꓸcourses. В эфире можно задать ему вопросы про продуктовую аналитику и путь в профессию.
За регистрацию сразу приходит карьерный гайд по профессиям в аналитике, после эфира — запись вебинара
Регистрируйтесь по ссылке — https://clc.to/erid_2W5zFJkiMiq
Реклама. ООО «КАРПОВ КУРСЫ». ИНН 7811764627. erid: 2W5zFJkiMiq
2 831
🕵 всем доброго понедельника. Давно не писал, работа тихо спокойно, жизнь тоже.
Решил поделиться способом решения одной из рабочих задач.
😵 Достался мне по наследству один из отчётов. Большой не очень красивый, тяжёлый многоэксельный, и довольно полезный для бизнеса. Вроде все автоматизированно, через питон скрипт, но занимает много ресурсов и отвлекает от другой работы.
💸 И в один прекрасный день ты признаешься себе, что отчёт можно ускорить, сделать более удобным и добавить функционал и вообще перенести в bi систему, в моем случае на fine bi.
👿 Самое страшное, на самом деле начать и разобраться в чужом коде (по понедельникам и в своем коде страшно разобраться). Для помощи себе в этом нелёгком деле решил первый раз попробовать доску (рандомной доской оказалось МТС). Можно постепенно идти по коду разбираясь что там происходит, в итоге понимая что скрипт то на самом деле белый и пушистый, что можно ускорить и переделать и наконец то сказать что этот отчёт становится не переданным по наследству а твоим детищем )
👍 В целом пост про доски.
Какими пользуетесь. Используете только на работе или в жизни? Какие сценарии?
🧚♀️ В первом комментарии приложу файл в более высоком качестве, может кому нибудь и начинающих будет интересно как это примерно выглядит в реальных задачах
2 831
🕵 Всем привет, что-то я давно тут не писал.
Чуть стрессую, депрессую, и вроде как даже встретил свою первую паническую Натаху.👾
Наткнулся тут на информацию о чудесной визе цифрового кочевника.🧑💻 Я конечно не кочевник, да и не супер путешественник (детям нужна оседлость), но инфа то в целом интересная:
3 года шенгена, без налогов и обязательного проживания.
Условия – доход 💰 (найм/ИП) + накопления, стаж удалённой работы (от трёх лет) / высшее образование по профессии.
Суть, что страна принимает тебя, при учёте, что ты не будешь забирать рабочие места у местных, имеешь удалённый доход в среднем от 2-3 минимальных зарплат
И вроде всё классно, начал изучать документы на сбор, есть нюансы но в целом они решаемы.
Но всегда есть НО 🎁, и часть из них связанна непосредственно с работодателем
От работодателя нужно два документа
1. Справка подтверждение о том, что работодатель не против что ты работаешь с территории конкретной страны удалённо.
2. Приказ об отправлении тебя в длительную командировку за свой счёт (3-5 лет) нужен для Соц. Фонда РФ – чтобы получить «свидетельство об отъезде», о том что работодатель делает взносы в сфр и продолжает их платить на всё время твоей командировки. Есть даже действующие договора между странами которые регулируют вопрос соц взносов.
Но в современных реалиях не каждая компания, в том числе и моя, да и как я понял все бигтехи не готовы давать полную официальную удалёнку, а особенно из «недружественных 48 стран».
🔍 Сталкивались ли вы с этим, может кто получал кочевника в найме, или имеют офисы в других странах, или же все вокруг ушли на ИП, а один я тут сижу)
2 831
Ты узнаешь его из тысячи….
по юморным постам/ по леопарду/ по таблиське
Человек, который познал и зимовки на райских островах (не без происшествий🏍), и собесы в Яндекс, и суровую офисную жизу, и теперь с юмором обо всём этом рассказывает нам!
⭐️ Да-да, встречайте, тот самый Глеб Михайлов!
Надо сказать, что его тг-канал особенный: один раз увидишь — не забудешь никогда.
Вот самые сочные посты, которые достойны вашего внимания:
⚡️ главная ошибка в обучении Data Science
⚡️ топ-8 примеров как НЕПРАВИЛЬНО обучают алгоритмам
⚡️ редфлаги офисного кореша😀🚩
⚫️Подпишись для хорошего настроения и рабочих лайфхаков: @mikhaylovgleb
Реклама: ИП Михайлов Глеб Михайлович, ИНН 500125076224, erid: 2Vtzqwxt9jM
2 831
🕵 Кстати залил библиотеку на гит, теперь я как программист
Чтобы воспользоваться , просто установите её в своем проекте:
# Сначала устанавливаем библиотеку
%pip install git+https://github.com/detective-data/detective.git
# Затем вызываем
from detective import det_sum
import pandas as pd
# и можем пользоваться
# det_sum(ваш датафрейм без кавычек, "названия столбца для наблюдения в кавычках")
df = pd.DataFrame({'sales': [4553425552384.01]})
det_sum(df, "sales")
😁 В целом эту идею можно развивать, и добавлять ещё какие нибудь функции для наблюдения за данными.
Ну чтож, будем думать )2 831
Каждый раз слышу одно и то же: искусственный интеллект «заменит людей».
На деле — он усиливает тех, кто умеет им пользоваться.
Разрыв уже растёт не в знаниях,
а между теми, кто работает с ИИ, и теми, кто его игнорирует.
Это уже базовый уровень 💪🏻
Собрал папку с экспертами по ИИ — там практика и реальные инструменты:
👉 ссылка на папку
✅ доступ 48 часов
2 831
Сидеть и работать в корпорации — страшно, жизнь-то мимо проходит. Уходить строить бизнес — страшно, а вдруг прогорит. Один из вариантов — разрабатывать свой пет-проект по вечерам. Многие успешные компании, например, Twitter, создавались именно так. Это не значит, что ваш проект обязательно заработает миллиарды, но заработать больше, чем в найме, и получить ценный опыт — вполне реально.
Перед началом разработки появляется множество вопросов, например:
– Как выбрать идею для пет-проекта?
– Что нужно знать про маркетинг?
– Как запуститься и довести до первых продаж не имея бюджета на рекламу?
В телеграм-канале «Твой пет проект», Михаил Табунов делится своим опытом с разработчиками и менеджерами.
Он рассказывает, где искать идею для нового проекта, что нужно знать о маркетинге, как запустить стартап и привлечь первых 10 клиентов, а также о многих других важных вещах.
Подписывайтесь на «Твой пет проект», получайте пользу от практиков рынка!
2 831
🎉 Результаты розыгрыша:
🏆 Победители:
1. Никита (@nick_phys_study)
2. Виктория (@analytics_girl)
3. Дмитрий (@catdem)
4. Natali (@ANatalid)
5. Неля (@NelyaNik)
✔️Проверить результаты
2 831
✨ А на канале прибавилось ещё 500 человек, а вы молчите)
💥 Спасибо что вы со мной!
В этот раз для розыгрыша, решил добавить небольшой детектив (сколько можно учить питон?) и уникальный лот - детская книга по визуализации данных с пожеланием от автора книги (помните я был в день на конкурсе)
Итоги розыгрыша будут подведены автоматически через сутки. Будет выбрано пять победителей: каждый победитель в порядке очередности выберет себе любую книгу .
Если по какой-либо причине победитель откажется от приза, или не выйдет на связь в течении суток - книга будет разыграна среди подписчиков, оставивших любой комментарий к предыдущему посту. Посылка будет отправлена ТК СДЭК. Никаких оплат не потребуется
Ещё раз спасибо всем! 🙏
Жмём на кнопку!!! И через пару дней забираем книгу!
2 831
😉 Пост для лайков и комментариев к розыгрышу. Обращаю внимание что для участия в конкурсе нужно просто нажать на кнопку "Я в деле" и быть подписанным на канал. Комментарии будут задействованы если победитель откажется от приза
Закиньте бустов каналу -
https://t.me/boost/detective_data
И включите уведомления чтобы не пропускать крутые посты)
Всем удачи! 🕵️♂️
2 831
🕵♂ В жизни у каждого биайщика наступает момент (я так думаю), когда нужно срочно запилить дашборд с тёмной темой, как новый Северус Снейп от "HBO".
🥂 Вот и я выкатил в прод свой первый "black dashboard"
Ставьте ✨ если вы дитя подземелий
Или 👻 если вы адепт света
📎А вы когда нибудь строили тёмные дашборды?
👎🤫💯
ℹ️ℹ️ℹ️
❗️❗️❗️
‼️‼️‼️
ВСЕ ДАННЫЕ НА ДАШБОРДЕ ВЫМЫШЛЕННЫ И СГЕНЕРИРОВАНЫ СЛУЧАЙНО
2 831
🕵♂️ Всем вечера доброго - пишу из отпуска тут замечательно!
🔍 По работе довольно много времени провожу в питоне и абсолютно всегда нужно контролировать чтобы в процессе работы с данными - эти данные не упустить, и если так произошло, то понять в какой момент нужно за ними вернуться.
🔍 Самый простой пример это merge который при неправильном использовании умножит наши данные и groupby который эти данные сократит (при наличии NaN). Помню на одном из самых первых занятий по питону лектор написал что-то вроде:
```python
sum_df_sales = df['sales'].sum()
sum_df_sales
```
👨💻 Рабочий способ, но в повседневном использовании мне показался неудобным, когда число измеряется миллиардами, ничего кроме кучи цифр с "е06" на конце я не вижу. И сравнение работает только при повторном написании формулы с другой переменной и вычитания одной из другой, а для нормального форматирования числа еще нужно помучать print.
🧑💻 А еще постепенно с опытом, я стал приходить к написанию функций под себя, написал, закинул себе конфиг, импортировал один раз и пользуешься своими функциями не засоряя общий код кучей лишнего кода. Этим мы сейчас и займёмся.
📎Функция detective_sum - покажет нам сколько денег в столбце, сохранит результат в переменную и посчитает разницу с прошлой проверкой.
✨ А что бы не было скучно - обернём нашу функцию в детективную оболочку.
🤔 Пусть у нас будет Аналитическая сводка, под наблюдением у нас как всегда будут данные, а вдохновением послужат хорошие и плохие российские сериалы про ментов.
Функция получилась очень простой, но наглядной, разберётся даже начинающий аналитик.
Статья
и готовый ipynb файл в первом комментарии.
Спасибо за просмотр, жду ваших комментариев.
Используете ли вы свои функции, для удобства/чистоты кода?
2 831
🧐 А у вас тоже бывает, если в выходной во сне придумали новый график решающий проблему, или какой нибудь метод решения другой задачи, и ты с утра несёшься к компу, чтобы непременно прямо сейчас это реализовать?
🥸 Или вы нормальные?
2 831
А у вас тоже бывает, если в выходной во сне придумал новый график решающий проблему, или какой нибудь метод решения другой рабочей проблемы, и ты несёшься к компу, чтобы непременно прямо сейчас это реализовать?
2 831
Музыканты на месте? Сегодня был в офисе на переустановке винды, и пока был без компа заценил новую комнату "разрядки" )
Видео прилагать не буду, поберегу ваши уши
2 831
🐆 Ну теперь на тему бега как и обещал)
Благодаря детскому саду, я хотя бы выхожу из дома, но зима и грязь отбивают любое желания ходить куда то ещё 🥶
🕺С января стараюсь включить в свою жизнь зал и чередовать силовые тренировки с кардио, но конечно потеря времени ради часа занятия на беговой дорожке какие-то несопоставимые. Да и просто иногда нет сил (На самом деле всегда)
💃Ну и жена внедрила идею приобретения домашнего тренажёра (прямо как в фильме начало), и я как обычно загорелся. Лишнего места в квартире особо нет, поэтому смотрел в сторону мобильных версий.
Краткая аналитика, учёт веса, размеров и других хотелок увеличили предполагаемый бюджет примерно в два с половиной раза.
🎠 Для справки сразу скажу модель
Orlauf Jay, если вес меньше 100 кг то можно рассмотреть Shrike. Цены везде разные, есть вариант попасть на неплохие скидки.
Короткий экскурс в беговые дорожки:
- Грузоподъёмность и скорость лучше брать с запасом
- Без ограничений (вертикальное и поручни) бегать опасно, но в целом кое-как можно ходить
- Дешёвые не брать лучше вообще
👀 Теперь в ожидании выгрузок и на неважных созвонах без звука и камеры, можно вполне себе соединить приятное с полезным.
