Data Events
رفتن به کانال در Telegram
Ивенты по Big Data, DE, BI, AI, ML, DS, DA, etc Спец подканалы: @AI_meetups @DE_events @BI_events @datathons @data_career @devetups см также @agile_events #Календарь bit.ly/3oLMmDc tgstat.ru/channel/@data_events contacts: @black_titmouse
نمایش بیشتر3 072
مشترکین
-524 ساعت
-127 روز
-330 روز
آرشیو پست ها
3 072
👀Кто такой по-настоящему крутой дата-инженер сегодня?
Профессия дата-инженера сильно изменилась. Еще недавно основной фокус был на надежных пайплайнах, ETL-процессах и стабильной доставке данных.
Но сейчас везде обсуждают LLM: инструменты меняются на лету, бизнес требует внедрения больших языковых моделей, и команды пока ищут устойчивые подходы к тому, как использовать их в реальных системах.
Сегодня рынок ждет от нас гораздо большего.
— Как встроить LLM в пайплайны без лишней сложности?
— Как устроены базы данных под капотом?
— Почему ломается Data Quality, когда объемы вырастают в сто раз?
— Как выстроить MLOps, чтобы модели жили долго и не деградировали?
Над этими вопросами сейчас ломают голову и мидлы, и сеньоры. И чтобы находить изящные решения, нужна хорошая архитектурная насмотренность.
Быстрее всего она появляется там, где можно вживую разобрать чужие подходы и обсудить их с коллегами из других компаний. Именно такие люди соберутся на SmartData уже этой осенью.
Среди тем программы — практический опыт команд, которые внедряют LLM в свои решения.
📆 23–24 сентября, Москва (офлайн) + онлайн.
Подробности и билеты — на сайте конференции.
⚡️С промокодом
dataevents персональные билеты дешевле.3 072
Lakehouse для аналитиков и инженеров данных
Приглашаем изучить популярный подход построения хранилищ данных Data Lakehouse c разделенным Compute и Storage на основе Iceberg и Trino.
В программе курса:
• Современная архитектура аналитических систем от DWH и Data Lake до Lakehouse с разделением Compute и Storage на базе Apache Iceberg и Trino.
• Iceberg: управление файлами, снимками, каталогами, схемами изменений и очисткой.
• Практическое использование Iceberg Catalog, работа с кластером Trino (на Kubernetes), подключение данных на S3 и выполнение SQL/ Python-запросов.
• Работа с Iceberg+Trinо на больших масштабах: сложные запросы к датасету TPC-DS (2.8 млрд строк), интеграция с DBT, Apache Airflow, оценка производительность систем.
• Построение пайплайнов, инструменты для корректной поддержки, обновления и масштабирования Lakehouse-инфраструктуры на уровне предприятия.
Кто мы: R&D-центр Devhands, наш канал.
Автор курса — Алексей Белозерский, CDO в inSales (Сбер 2B), ex: VK Tech, М.Видео, Эльдорадо
🗓 Старт курса: 27 августа
Изучить программу и записаться можно здесь.
Ждём вас!
Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzquZf5с8
3 072
Repost from Agile events
Тут говорят к нам Дуров заехал… 😁 (уж не знаю, мб и дипфейк — кто шарит, гляньте плз!))
- https://t.me/it_events_ge/512
Подкиньте идей
- чем его заинтересовать?
- как его потом найти? 😂
