Data Science Notes

​Как реализовать Big Data-проект в облаке: технологический стек, процесс внедрения и подводные камни ⏰ Когда: 27 сентября, 17:00 (мск) 📍 Регистрация На вебинаре эксперты расскажут, как развернуть Big Data-проект в облаке: какие варианты построения архитектуры существуют, по каким критериям выбирать инструменты, как разделить роли между интегратором и облачным провайдером и как внедрить проект, минуя подводные камни. В программе: 🔹 Выбор инфраструктуры: когда проект стоит разместить в облаке, а когда — On-Premise. 🔹 Архитектура облачного Big Data-решения: технологический стек для DWH и примеры построения Data Lake. 🔹 Процесс внедрения: из каких этапов состоит, как подготовиться к каждому из них, чтобы избежать сложностей. 🔹 Проект после внедрения: как обеспечить его развитие. Спикеры: 🔹 Кирилл Сливчиков, управляющий партнер 7RedLines 🔹 Алексей Бестужев, архитектор VK Cloud

​Изучить основы Python за 14 дней? За 990 рублей? Это реально! Подключайтесь к нашему подготовительному курсу по Python-разработке! Не важно, сколько вам лет, какое у вас образование и кем вы работаете сейчас. Для начала обучения не нужен опыт в разработке! Даём только мясную и прикладную информацию. Никакой воды и траты вашего времени. Всего за 2 недели вы изучите основы языка под руководством опытного наставника, пройдете 69 урока с практикой в браузере и напишите свою первую программу. Торопитесь. Стартуем 14 сентября!

​📌 Изучаем типы данных PostgreSQL на демо-занятии онлайн-курса «PostgreSQL для администраторов баз данных и разработчиков» На занятии с Дмитрием Кирилловым, техническим директором 1С-Старт, мы: - Вспомним основные типы данных - Поговорим про особенности преобразования типов - Разберёмся с необычным поведением PostgreSQL 🟢 РЕЗУЛЬТАТ ПРОХОЖДЕНИЯ КУРСА Сильное портфолио, которое позволит работать в качестве PostgreSQL DBA — устанавливать, настраивать, поддерживать и развивать БД под управлением PostgreSQL 🔥 ЗАРЕГИСТРИРОВАТЬСЯ https://otus.pw/1zg2/ Реклама. Информация о рекламодателе на сайте www.otus.ru

​Начините погружение в Spark вместе c OTUS! 🚀 Присоединяйтесь 25 августа в 20:00 мск на бесплатный вебинар «Обработка графов в Spark». 📚На вебинаре с Вадимом Заигриным, дата-инженером в VMware мы узнаем, как работать с графами на Spark, рассмотрим основные графовые алгоритмы и их реализацию на Spark. 👉 Регистрация на вебинар: https://otus.pw/j9Nu/ Вебинар является частью онлайн-курса «Spark Developer» от OTUS.

Как стать уверенным разработчиком на главном языке «энтерпрайза» Java? Например, записаться на курс по Java-разработке от Хекслета! Курс поможет освоить язык, алгоритмы и структуры данных, работу с микросервисами, фреймворком Spring Boot, базами данных и инфраструктурой. На Хекслете курс спроектирован так, что его невозможно просто «отсидеть» или «прослушать». Именно поэтому студенты могут получить оффер ещё во время обучения, а некоторые работодатели указывают их курсы как преимущество при найме. Начните прямо сейчас. Вводные курсы профессии доступны бесплатно сразу после регистрации. Оцените формат и решите, стоит ли продолжать!👆👆👆

​11 августа состоится Alfa Data Science MeetUp в стиле кибер-футуризма📟 Если вы в Москве 👉 регистрируйтесь на сайте и приезжайте в офис Альфа-Банка по адресу: проспект Андропова 18, корп. 6 или подключайтесь к онлайн трансляции! Темы и спикеры: 🖲 Развитие клиентской базы: моделирование LTV и прогноз будущих доходов - Сергей Королёв, Middle Data Scientist Альфа-Банк 🖲 Uplift-моделирование в ценообразовании кредитных продуктов - Максим Коматовский, Junior Data Scientist Альфа-Банк 🖲 Совершенный код расчёт - Максим Cтаценко, Team Lead/Senior DWH Developer в Яндекс 🖲 Применение подхода reject/inference в нейросетевом кредитном скоринге - Алексей Фирстов, Senior Data Scientist Альфа-Банк Мероприятие пройдет в необычном формате. У вас будет время вспомнить «Бегущего по лезвию» или «Cyberpunk 2077», вдохновиться, поучаствовать в конкурсе и получить призы за креативность 🕶 Регистрируйтесь на сайте, приходите в гости, будет интересно!

​Идея для лета — нырнуть в Data Science с головой Станьте специалистом по Data Science и приручите алгоритмы под свои амбициозные цели: от решения бизнес-задач до развития медицинских технологий. На курсе Яндекс Практикума вы можете за 8 месяцев изучить Python, SQL, машинное обучение и визуализацию данных — необходимый минимум для работы младшим специалистом. Пять «П» — преимущества обучения в Практикуме: — Помощь с трудоустройством: 78% выпускников находят работу в течение 4 месяцев после окончания курса. — Портфолио: 16 проектов на основе реальных задач бизнеса и диплом о профессиональной переподготовке. — Поддержка: преподаватели, наставники, кураторы и ревьюры помогают пройти обучение. — Подходящий формат: можете заниматься из любой точки мира когда вам удобно. — Практика: курс на 75% состоит из задач в онлайн-тренажёре и учебных проектов. → Старт потока — 21 июля. Оплачивать учёбу можно помесячно, от 6 090 ₽/мес, или 112 000 ₽ сразу. Начните учиться бесплатно и решите, подходит ли вам роль специалиста по Data Science. → Попробуйте курс бесплатно

​⁉️ Разработать одну ML-модель и провести ее валидацию — уже давно не проблема. Как экспериментировать сразу с сотнями моделей и с разными параметрами и при этом не захлебнуться в разнообразии экспериментов? Как не потерять этот опыт и легко воспроизводить эксперименты годовой давности? 📌 20 июля в 20:00 на открытом уроке OTUS мы разберем инструмент MLFlow. Он позволяет легко выбирать лучшие модели среди всех экспериментов и при этом легко сравнивать эти модели, и всегда иметь понятное описание эксперимента. 💻 Занятие проведет Миленькин Александр, старший менеджер по работе с большими данными в X5 Retail Group. 💣 Чтобы зарегистрироваться на урок, пройдите вступительный тест ⚠️ Еще больше знаний о том, как устроен процесс внедрения ML-решения, ждет вас на онлайн-курсе «MLOps». Он рассчитан на специалистов по машинному обучению или Software инженеров.

Data Science and Data Analytics — Amit Kumar Tyagi (en) 2022 В книге рассказывается про самые популярные направления в науке о данных: облачные и туманные вычисления, блокчейн, ИИ для работы с кибербезопасностью. А также развечиваются мифы о них. #book #middle #analytics

Как не просто выучить Python, а разобраться в алгоритмах и структурах данных, автоматических тестах, освоить Django и всё необходимое для качественной разработки в команде? Например, освоить профессию на Хекслете. Курс невозможно просто «отсидеть» или «прослушать», на нём дают только самое необходимое для условий реального продакшена — доступ к Open Source проектам, базе тестовых задач для подготовки к собеседованиям, кейсы для портфолио. Так что многие студенты получают оффер ещё во время обучения. Работодатели указывают курсы Хекслета как преимущество при найме. Узнайте подробнее о профессии «Python-разработчик» и оцените формат школы — https://clck.ru/sBFuD

Как контролировать качество данных в Feature Store и как сделать так, чтобы ML система не разваливалась от одного неудачного коммита? Расскажем на ML-митапе от Big Data МТС 7 июля в 18:00. 🧑‍💻 Поделимся, как мы автоматизировали контроль за качеством данных в Feature Store МТС, рассмотрим базовые алгоритмы детекции дрейфа на признаковом пространстве моделей и их реализации в распределенном стеке. ⚡️ Обсудим популярные проблемы ML-систем и способы их предотвращения: подходы к тестированию всей системы и тесты, применимые исключительно к ML моделям. 🚀 В конце митапа обсудим как развивается направление RnD в промышленном Data Science с CTO AliExpress Россия Анатолем Орловым, руководителем магистратуры MSAI МФТИ Радославом Нечаевым и Head of Data Science Blockchain.com Валерием Бабушкиным. Регистрация здесь.

Как контролировать качество данных в Feature Store и как сделать так, чтобы ML система не разваливалась от одного неудачного коммита? Расскажем на ML-митапе от Big Data МТС 7 июля в 18:00. 🧑‍💻 Поделимся, как мы автоматизировали контроль за качеством данных в Feature Store МТС, рассмотрим базовые алгоритмы детекции дрейфа на признаковом пространстве моделей и их реализации в распределенном стеке. ⚡️ Обсудим популярные проблемы ML-систем и способы их предотвращения: подходы к тестированию всей системы и тесты, применимые исключительно к ML моделям. 🚀 В конце митапа обсудим как развивается направление RnD в промышленном Data Science с CTO AliExpress Россия Анатолем Орловым, руководителем магистратуры MSAI МФТИ Радославом Нечаевым и Head of Data Science Blockchain.com Валерием Бабушкиным. Регистрация здесь.

⚡️ Аналитика данных - блог ведущего Дата саентиста, работающего с данными в Uber, одного из авторов легендарного🔥 Machine Learning. Материал канала поможет реально вырасти до профессионала по работе с данными и получить самую высокооплачиваемую ит-профессию. 1 канал вместо тысячи учебников и курсов, подписывайтесь: 👇👇👇 @data_analysis_ml

​📕 Написать большое количество ML-пайплайнов и скриптов — это еще полдела. Но как это менеджерить и запускать с максимальным удобством? 📌 Узнайте 6 июля в 20:00 на открытом уроке в OTUS. Вместе с Миленькиным Александром, старшим менеджером по работе с большими данными X5 Retail Group, разберем инструмент AirFlow, который легко решает эту проблему. AifFlow по ходу дела визуализирует шаги пайплайнов и дает возможность запускать их без использования кода и автоматизировано по расписанию. ⚠️ Урок пройдет в рамках онлайн-курса «MLOps» для специалистов по машинному обучению и Software инженеров. 👉 Для регистрации на вебинар пройдите вступительный тест

Язык R - один из наиболее востребованных навыков в сфере Data Science R способен заменить Excel, BI платформы и даже Python в области анализа данных и Data Science. В канале R4marketing вы найдёте множество русскоязычных обучающих материалов по языку R, среди которых: - Заметки по анализу данных на R - Бесплатные книги - Бесплатные курсы - Статьи - Видео уроки Подписывайтесь!

⚡️ Тест для продвинутого уровня по Machine Learning Ответьте на 10 вопросов и проверьте, насколько вы готовы к обучению на углубленном курсе - «Machine Learning. Advanced» от OTUS и его партнера — Сбера. 📌 РЕЗУЛЬТАТ ПРОХОЖДЕНИЯ КУРСА: Вы освоите продвинутые приемы машинного обучения, которые позволят вам уверенно себя чувствовать на ведущих Middle/ Senior позициях и справляться даже с нестандартными задачами. 💻 Двухдневный интенсив — Рекомендовать или не рекомендовать, пуcть решает ML!, 11 июля в 18:00 https://otus.pw/N9HH/ Время прохождения теста ограниченно 20 минут 👉 ПРОЙТИ ТЕСТ https://otus.pw/KP2B/

Эффективное использование Jupyter и PySpark на Hadoop для анализа больших данных (ru) 2019 Доклад, в котором руководитель отдела машинного обучения ЦИАН рассказывает как быстро проверять гипотезы на Jupyter и PySpark, какими дополнительными инструментами пользоваться - Есть ли нужные данные? - Как их загрузить из другого источника? - Достаточно ли их, и корректны ли они? - Можно ли на них обучить модель, каково ее качество? - Что, если нужно применить сложную самописную функцию к большому количеству объектов? Смотреть #video #middle

​Курс «Специалист по Data Science» — для старта карьеры в IT с нуля. Поможем освоить все навыки, чтобы начать работать младшим специалистом: — Python и его библиотеки, — SQL, — теорию вероятностей, — статистику, — визуализацию данных, — машинное обучение. Наши выпускники чувствуют себя уверенно на рынке труда: 78% из них находят работу в новой сфере. Вот, как мы к этому идём: 1. Создаём программу на основе анализа вакансий и интервью с работодателями. 2. Обучаем в условиях, которые имитируют реальную работу со спринтами и дедлайнами. 3. Подбираем проекты в НКО и коммерческих компаниях для студентов во время учёбы. 4. Учим писать резюме, собирать портфолио и проходить собеседования. → Старт потока — 23 июня Оплачивать учёбу можно помесячно. Если сомневаетесь, по душе ли вам профессия — попробуйте бесплатную вводную часть. → Попробуйте курс бесплатно

​Примите участие в Академии Аналитиков Авито. Преподаватели — ведущие аналитики и DS-инженеры Авито. В этом году вас ждёт 2 направления обучения — «Аналитик данных» и «DS-инженер». ▪️ Вы освоите все важные инструменты для реальной работы аналитиком или DS-инженером (подробная программа — на сайте). ▪️ Учат топовые специалисты Авито, которые покажут на примере настоящих задач, как осуществляется их работа. ▪️ 13 месяцев учёбы. ▪️ Полностью бесплатная программа. ▪️ Возможность трудоустройства после прохождения курса для лучших студентов. Приём заявок до 13 июня 2022. Успейте зарегистрироваться 👉 clc.to/gB4Pfw