Data Events
الذهاب إلى القناة على Telegram
#Календарь bit.ly/3oLMmDc Ивенты по Big Data, DE, BI, AI, ML, DS, DA, etc Спец подканалы: @AI_meetups @DE_events @BI_events @datathons @data_career @devetups см также @agile_events tgstat.ru/channel/@data_events contacts: @black_titmouse
إظهار المزيد
الشبكة:3 066
المشتركون
-224 ساعات
لا توجد بيانات7 أيام
-1730 أيام
أرشيف المشاركات
3 065
Привет! На связи команда DevCrowd — мы проводим ежегодное исследование специалистов по работе с данными.*
В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между DS-, ML- и MLOps-инженером, что происходит с порогом входа в профессию и рынком труда. Часть вопросов задаем третий год подряд, что дает реальную динамику, а не просто срез. Вот — данные прошлых исследований
Опрос анонимный, 12–15 минут. В ноябре мы опубликуем отчет со всеми данными, а также списками рекомендованных телеграм-каналов и курсов, собранными из ответов участников.
👀 Пройти опрос (ссылка активна до 6 октября включительно, gmt +3)
• DevCrowd — это независимые исследования IT-профессий: 15 000+ участников, публичные отчеты по Golang, SRE, мобильным разработчикам и другим направлениям.
3 065
👀Кто такой по-настоящему крутой дата-инженер сегодня?
Профессия дата-инженера сильно изменилась. Еще недавно основной фокус был на надежных пайплайнах, ETL-процессах и стабильной доставке данных.
Но сейчас везде обсуждают LLM: инструменты меняются на лету, бизнес требует внедрения больших языковых моделей, и команды пока ищут устойчивые подходы к тому, как использовать их в реальных системах.
Сегодня рынок ждет от нас гораздо большего.
— Как встроить LLM в пайплайны без лишней сложности?
— Как устроены базы данных под капотом?
— Почему ломается Data Quality, когда объемы вырастают в сто раз?
— Как выстроить MLOps, чтобы модели жили долго и не деградировали?
Над этими вопросами сейчас ломают голову и мидлы, и сеньоры. И чтобы находить изящные решения, нужна хорошая архитектурная насмотренность.
Быстрее всего она появляется там, где можно вживую разобрать чужие подходы и обсудить их с коллегами из других компаний. Именно такие люди соберутся на SmartData уже этой осенью.
Среди тем программы — практический опыт команд, которые внедряют LLM в свои решения.
📆 23–24 сентября, Москва (офлайн) + онлайн.
Подробности и билеты — на сайте конференции.
⚡️С промокодом
dataevents персональные билеты дешевле.3 065
Lakehouse для аналитиков и инженеров данных
Приглашаем изучить популярный подход построения хранилищ данных Data Lakehouse c разделенным Compute и Storage на основе Iceberg и Trino.
В программе курса:
• Современная архитектура аналитических систем от DWH и Data Lake до Lakehouse с разделением Compute и Storage на базе Apache Iceberg и Trino.
• Iceberg: управление файлами, снимками, каталогами, схемами изменений и очисткой.
• Практическое использование Iceberg Catalog, работа с кластером Trino (на Kubernetes), подключение данных на S3 и выполнение SQL/ Python-запросов.
• Работа с Iceberg+Trinо на больших масштабах: сложные запросы к датасету TPC-DS (2.8 млрд строк), интеграция с DBT, Apache Airflow, оценка производительность систем.
• Построение пайплайнов, инструменты для корректной поддержки, обновления и масштабирования Lakehouse-инфраструктуры на уровне предприятия.
Кто мы: R&D-центр Devhands, наш канал.
Автор курса — Алексей Белозерский, CDO в inSales (Сбер 2B), ex: VK Tech, М.Видео, Эльдорадо
🗓 Старт курса: 27 августа
Изучить программу и записаться можно здесь.
Ждём вас!
Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzquZf5с8
