Аналитика данных / Data Study

Пока перебирал папки и файлы на ноутбуке для удаления всего лишнего, наткнулся на такую схему, которую рисовал на одной из консультаций для ученика. Хотел изобразить что и в какой области стоит изучать, чтобы иметь представление как работать с DWH и ETL. Кажется такой вид информации упрощает пониманием, 🔥 если считаете также

Встречайте новую версию Modus BI🎉 24 декабря стало доступно обновление Modus BI 3.7. В новой версии платформы мы расширили возможности дизайна отчётов, добавили новые функции для форматирования таблиц и оптимизировали работу форм ввода данных. ❓Что именно изменилось? ➡️Визуализации 1. Режим наложения: теперь можно накладывать элементы отчёта друг на друга. 2. Режим группировки: "собранные" визуализации можно сгруппировать, чтобы перемещать целиком. 3. Режим без отступов: при вёрстке отчёта визуальные блоки можно максимально близко «прижать» друг к другу без наложения. ➡️Таблицы 1. Появилась возможность форматировать текст внутри ячеек при помощи HTML-разметки. 2. Добавлено условное форматирование для спарклайнов. 3. Реализована функция объединения ячеек с одинаковыми значениями внутри столбца. И не только;) Также мы прокачали функционал системы с т.з. информационной безопасности, поработали с быстродействием работы портала и визуальными компонентами. Полное описание релиза Modus 3.7 читайте на нашем сайте.

Увидел ультра полезную статью про создание динамических таблиц в Apache Superset Честно, до этого момента во многих проектах где сталкивался с Superset этого дико не хватало и такой функционал оставался только влажной фантазией 💦. Обходились созданием таблиц или других чартов по всем интересующим измерениям. Оказывается если вооружиться датасетом на динамическом запросе, то фантазия становится реальностью 🔥 Статья

Предлагаем немного отвлечься от предновогодней суеты, отключиться от рабочей рутины и понастальгировать! Играйте в СберЗмейку – пройдите уровни и соберите звездочки⭐️, чтобы украсить новогоднюю ёлку 🎄 Правила такие же, как и в знакомой всем игре 😉 Начинаем!💫💫💫

Еще не рассказывал вам здесь что являюсь контрибьютером в проекте Димы по созданию и наполнению полезной информацией сайта dataengineer.ru Цель - собрать по разным направлениям максимально полезные ресурсы для изучения в виде статей, книг, видео, курсов и т.д. и объединить их в общих дорожных картах по направлениям аналитики, инженерии, BI. Со свой стороны уже заполнил раздел про Хранилища данных и Моделирование данных, также ресурсы по Python, про Поиск работы и Отечественные облака В целом уже многие другие разделы заполнены. Изучайте, уверен найдете много полезного и интересного 😉

Аналитики в Авито: от продуктового до клиентского. Подробнее о том, чем отличаются BI-разработчики, биздевы, маркетинговые, продуктовые и клиентские аналитики, а также как они находят инсайты и создают инструменты для роста - читайте в новой статье от команды аналитиков в Авито. Реклама. ООО «Авито Тех».

Дэн Роэм / Визуальное мышление "Визуализация — это простой и остроумный способ объяснить трудные проблемы и решить запутанные вопросы. Прочитав эту книгу, вы поймете, что один рисунок подчас стоит тысячи слов. Автор книги демонстрирует, как можно ясно представить идею путем ее визуализации и убедительно донести суть до других людей, зрительно разделив ее на отдельные компоненты и применив инструменты визуального мышления. Используя простые графические образы при обдумывании ситуации, вы научитесь находить и развивать новые идеи, решать проблемы неожиданным оригинальным способом." Скачать книгу

Почему стоит начать карьеру в ML и DS? Посмотрел подкаст на канале Виктора Кантора MLinside – в гостях Алексей Толстиков, руководитель Школы анализа данных Яндекса (ШАД). Выпуск для тех, кто хочет стать востребованным специалистом в области Machine Learning и Data Science. Что вы узнаете: - Какие навыки необходимы ML- и DS-специалистам и что делает их востребованными. - Как участие в ML-соревнованиях ускоряет карьерный рост. - Можно ли освоить Data Science самостоятельно. - Как подготовиться к поступлению в ШАД. В общем, если хотите развиваться в индустрии, этот выпуск точно стоит вашего внимания. Видео

А быстрей можно выучить SQL?)

Что такое постановка цели по SMART SMART - одна из техник поставки целей в бизнес-анализе и менеджменте. Правильно софрмулированные цели помогают эффективнее достичь результата. И что самое главное - позволяют измерить его Статьи на эту тему: 🔗 Один 🔗 Два 🔗 Три

Разбираем тестовое задание на позицию Junior Аналитика в Яндекс Чтобы найти работу, мало пройти курс и сделать классное резюме. На практике, чтобы выделиться на собеседовании, нужно понимать, что лежит под капотом каждого инструмента, а не следовать конкретному заученному алгоритму. Чтобы попрактиковаться в этом, приходите на бесплатный вебинар, где будем разбирать реальное тестовое задание, которое дают аналитикам в подразделении Яндекс Картинки. Что будет на вебинаре: 🟠С помощью Pandas проанализируем Яндекс-запросы за несколько недель, загрузив их из json-файла 🟠Найдём закономерности и отличия использования сервиса на мобильных устройствах и компьютерах 🟠Разберём фишки Pandas: сложную агрегацию, маппинг, конкатенацию, чейнинг и др. Вебинар проведет Андрон Алексанян, CEO Simulative 🕗Встречаемся 24 декабря в 19:00 🎁Обязательно приходите смотреть вебинар в прямом эфире - в лайве будут дарить подарки, которые сильно бустанут старт карьеры в аналитике! Зарегистрироваться на бесплатный вебинар

Ждёте подарков на Новый Год? 😄

Как Open Source меняет мир Вчера побывал на классном мероприятии Ночь open source библиотек, которое организовал Яндекс. Фишкой организации на мой взгляд стало место - все проходило в настоящей библиотеке 📚 Было множество активностей, в которых все принимали активное участие и зарабатывали очки, чтобы была возможность обменять их на понравившуюся книгу 🎁 Рабочие зоны open source проектов Здесь можно было познакомиться с новой технологией и сделать pull request в продукт с мейнтейнерами проекта, либо оставить обратную связь для них что нравится и что еще можно развивать для конечных пользователей. В проектах большая часть задач конечно для разработчиков, но мне как аналитику было очень интересно послушать про 3 продукта: 1️⃣ Datalens строили дашборд с нуля, разворачивая Datalens у себя локально через docker буквально за пару минут 2️⃣ YDB распределенная база данных, которая совмещает внутри себя функционал сразу OLTP и OLAP систем 3️⃣ Diplodoc Честно для меня проект стал открытием на этом вечере 🔥. Это решение для создания документации формата Docs as code и еще больше я удивился когда узнал, что вся документация сервисов Яндекс Облака написана с помощью Diplodoc. Меня это лично сильно заинтересовало и захотелось найти ему применение в своих задачах. Прочитал сразу статью, где более подробно расписано про сам продукт Квесты Мне лично зашел квест с перфокартами, где нужно было решать задачи и по ответам на эти задачи искать полку, книги, ее номер на полке, номер страницы и по приложенной перфокарте на странице узнавать зашифрованные фразы (напомню, что все это происходило в настоящей библиотеке, где сразу же чувствуешь себя немного Шерлоком). Еще можно было посоревноваться в скорости печати на настоящих печатных машинках Silent party и экскурсии Ближе к концу мероприятия можно было испытать опыт "тихой" тусовки, где каждый танцует в наушниках 🕺 Ну и вишенка вечера - закрытые экскурсии в книгохранилище библиотеки, куда обычному посетителю нет возможности попасть Давайте в следующий раз соберем здесь тусовку единомышленников и вместе сходим на такое мероприятие! Что скажете? 🔥

CDC (change data capture) — это процесс отслеживания изменений в базе данных и поставка этих изменений к потребителям в режиме почти реального времени. Одним из самых широко применимых CDC решений является Debezium. Таким образом берешь Apache Kafka + поддерживаемый в ней Debezium Connector и получается стриминг решение с учетом всех изменений данных в базе. Зачем это нужно ❓ Чтобы было понятно на примере зачем нужен CDC. В таблице над строками реализуются операции - вставки (insert) - обновления (update) - удаления (delete) С помощью CDC можно не просто забирать актуальные данные записанную в строку в данный момент, но отслеживать всю историю изменения данных в строке с учетом всех операций вставки, обновлений и удалений в реальном времени. Полезные ссылки 😉 🔗 What is CDC 🔗 CDC в Yandex Data Transfer 🔗 Знакомство с Debezium CDC для Apache Kafka

В недавней статье от Modus мы рассмотрели возможные варианты интеграции 1С и корпоративного хранилища данных. Но каждый способ, конечно, заслуживает отдельного внимания. Мы решили пойти по порядку и в нашей свежей статье более подробно рассмотрели интеграцию 1С и КХД через стандартный REST‐интерфейс Odata. ➡️Что нужно сделать, чтобы начать работу с протоколом OData? ➡️Какие глаголы нужно использовать при обращении к серверу и для каких задач? ➡️Какие риски несёт в себе этот способ интеграции? Пошаговый сценарий интеграции 1С и КХД через стандартный REST‐интерфейс Odata читайте в нашем туториале на Habr! P.S. Подписывайтесь на тг-канал Modus и узнавайте об интересных статьях первыми!

👨‍💻 Управление ресурсами внутри команды Интересная статья про управление ресурсами с учетом soft навыков каждого сотрудника А вы с кем себя ассоциируете из статьи?) Чак Норрис, Шерлок Холмс, Ван Дам или Пятачок? 😃

🧐 Какие методы и приемы помогают вам эффективно восстанавливать силы и энергию для продуктивной работы? #datalk

Кто-нибудь пользуется (пользовался/собирается) столом с регулировкой высоты? Накидайте мысли насколько это удобно или как обычно - есть функционал, но поигрались пару раз и забыли?

Пора перестать в любой непонятной ситуации строить DWH для аналитики Основной тезис ⤵️

Когда DWH не нужен: - Проект находится на начальной стадии, методики расчетов не определены, данные плохо структурированы. - Все данные находятся в одном источнике и их объем невелик. - Нет потребности в регулярных расчетах. - Нет бюджета на создание и поддержку DWH. - Нет достаточного количества аналитиков для использования DWH

Читать статью

Как упростить сложную бизнес-аналитику с помощью OLAP? Расскажем на бесплатном вебинаре СберТеха «Platform V OLAP Analytics — бизнес-эффекты от интерактивного анализа данных». Приходите на вебинар, чтобы: • Разобраться, зачем нужна OLAP-технология и где могут пригодиться OLAP-кубы. • Познакомиться с инструментом для интерактивного анализа данных Platform V OLAP Analytics, узнать об основных функциях, преимуществах и сценариях использования. • Посмотреть демо решения Platform V OLAP Analytics и задать вопросы эксперту — владельцу продукта. Когда: 12 декабря в 11:00. Кому будет полезно: бизнес-аналитикам, руководителям аналитических отделов, CDO и CTO. Регистрируйтесь!