Data engineering events
前往频道在 Telegram
Data engineering events 👷♂️👷 Made in @data_events 🔨 See also @AI_meetups @BI_events @data_career #tgstat: https://tgstat.ru/channel/@DE_events/stat contacts: @black_titmouse defaults: - time MSK (UTC+3) - online - free
显示更多1 842
订阅者
-124 小时
-47 天
-330 天
数据加载中...
吸引订阅者
九月 '26
九月 '260
在0个频道中
八月 '26
+32
在0个频道中
Get PRO
七月 '26
+48
在0个频道中
Get PRO
六月 '26
+55
在1个频道中
Get PRO
五月 '26
+46
在0个频道中
Get PRO
四月 '26
+56
在0个频道中
Get PRO
三月 '26
+54
在0个频道中
Get PRO
二月 '26
+12
在1个频道中
Get PRO
一月 '26
+44
在2个频道中
Get PRO
十二月 '25
+47
在1个频道中
Get PRO
十一月 '25
+58
在2个频道中
Get PRO
十月 '25
+6
在0个频道中
Get PRO
九月 '25
+9
在1个频道中
Get PRO
八月 '25
+13
在1个频道中
Get PRO
七月 '25
+11
在1个频道中
Get PRO
六月 '25
+22
在1个频道中
Get PRO
五月 '25
+3
在0个频道中
Get PRO
四月 '25
+43
在2个频道中
Get PRO
三月 '25
+33
在1个频道中
Get PRO
二月 '25
+19
在2个频道中
Get PRO
一月 '25
+47
在2个频道中
Get PRO
十二月 '24
+19
在1个频道中
Get PRO
十一月 '24
+25
在1个频道中
Get PRO
十月 '24
+36
在1个频道中
Get PRO
九月 '24
+56
在1个频道中
Get PRO
八月 '24
+62
在0个频道中
Get PRO
七月 '24
+67
在2个频道中
Get PRO
六月 '24
+53
在1个频道中
Get PRO
五月 '24
+40
在0个频道中
Get PRO
四月 '24
+57
在1个频道中
Get PRO
三月 '24
+53
在1个频道中
Get PRO
二月 '24
+50
在2个频道中
Get PRO
一月 '24
+57
在1个频道中
Get PRO
十二月 '23
+54
在1个频道中
Get PRO
十一月 '23
+36
在1个频道中
Get PRO
十月 '23
+33
在0个频道中
Get PRO
九月 '23
+52
在0个频道中
Get PRO
八月 '23
+36
在0个频道中
Get PRO
七月 '23
+51
在0个频道中
Get PRO
六月 '23
+44
在0个频道中
Get PRO
五月 '23
+28
在0个频道中
Get PRO
四月 '23
+22
在0个频道中
Get PRO
三月 '23
+26
在0个频道中
Get PRO
二月 '23
+77
在0个频道中
Get PRO
一月 '23
+30
在0个频道中
Get PRO
十二月 '22
+45
在0个频道中
Get PRO
十一月 '22
+30
在0个频道中
Get PRO
十月 '22
+69
在0个频道中
Get PRO
九月 '22
+41
在0个频道中
Get PRO
八月 '22
+31
在0个频道中
Get PRO
七月 '22
+48
在0个频道中
Get PRO
六月 '22
+84
在0个频道中
Get PRO
五月 '22
+45
在0个频道中
Get PRO
四月 '22
+38
在0个频道中
Get PRO
三月 '22
+40
在0个频道中
Get PRO
二月 '22
+51
在0个频道中
Get PRO
一月 '22
+37
在0个频道中
Get PRO
十二月 '21
+96
在0个频道中
Get PRO
十一月 '21
+54
在0个频道中
Get PRO
十月 '21
+56
在0个频道中
Get PRO
九月 '21
+63
在0个频道中
Get PRO
八月 '21
+34
在0个频道中
Get PRO
七月 '21
+63
在0个频道中
Get PRO
六月 '21
+65
在0个频道中
Get PRO
五月 '21
+165
在0个频道中
| 日期 | 订阅者增长 | 提及 | 频道 | |
| 02 九月 | 0 | |||
| 01 九月 | 0 |
频道帖子
Repost from Data Events
👀Кто такой по-настоящему крутой дата-инженер сегодня?
Профессия дата-инженера сильно изменилась. Еще недавно основной фокус был на надежных пайплайнах, ETL-процессах и стабильной доставке данных.
Но сейчас везде обсуждают LLM: инструменты меняются на лету, бизнес требует внедрения больших языковых моделей, и команды пока ищут устойчивые подходы к тому, как использовать их в реальных системах.
Сегодня рынок ждет от нас гораздо большего.
— Как встроить LLM в пайплайны без лишней сложности?
— Как устроены базы данных под капотом?
— Почему ломается Data Quality, когда объемы вырастают в сто раз?
— Как выстроить MLOps, чтобы модели жили долго и не деградировали?
Над этими вопросами сейчас ломают голову и мидлы, и сеньоры. И чтобы находить изящные решения, нужна хорошая архитектурная насмотренность.
Быстрее всего она появляется там, где можно вживую разобрать чужие подходы и обсудить их с коллегами из других компаний. Именно такие люди соберутся на SmartData уже этой осенью.
Среди тем программы — практический опыт команд, которые внедряют LLM в свои решения.
📆 23–24 сентября, Москва (офлайн) + онлайн.
Подробности и билеты — на сайте конференции.
⚡️С промокодом
dataevents персональные билеты дешевле.| 2 | https://t.me/de_zoomcamp/1092/1178 | 428 |
| 3 | Новый поток Designing Data-Intensive Applications, второе издание со следующей недели!
Звонки будут по четвергам в 18:00 по Берлину (неважно, летнее или зимнее время в Берлине), первая встреча 27 августа
Обсуждение в топике t.me/lenka_ne_club/18033.
Успейте записаться на поток в боте: /courses -> "Хочу читать кабанчика" -> "Хочу участвовать" | 420 |
| 4 | https://t.me/de_zoomcamp/1092/1159 | 666 |
| 5 | https://t.me/de_zoomcamp/1092/1159 | 1 |
| 6 | Lakehouse для аналитиков и инженеров данных
Приглашаем изучить популярный подход построения хранилищ данных Data Lakehouse c разделенным Compute и Storage на основе Iceberg и Trino.
В программе курса:
• Современная архитектура аналитических систем от DWH и Data Lake до Lakehouse с разделением Compute и Storage на базе Apache Iceberg и Trino.
• Iceberg: управление файлами, снимками, каталогами, схемами изменений и очисткой.
• Практическое использование Iceberg Catalog, работа с кластером Trino (на Kubernetes), подключение данных на S3 и выполнение SQL/ Python-запросов.
• Работа с Iceberg+Trinо на больших масштабах: сложные запросы к датасету TPC-DS (2.8 млрд строк), интеграция с DBT, Apache Airflow, оценка производительность систем.
• Построение пайплайнов, инструменты для корректной поддержки, обновления и масштабирования Lakehouse-инфраструктуры на уровне предприятия.
Кто мы: R&D-центр Devhands, наш канал.
Автор курса — Алексей Белозерский, CDO в inSales (Сбер 2B), ex: VK Tech, М.Видео, Эльдорадо
🗓 Старт курса: 27 августа
Изучить программу и записаться можно здесь.
Ждём вас!
Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzquZf5с8 | 654 |
| 7 | https://t.me/de_zoomcamp/1092/1135 | 677 |
| 8 | Никто глубоко сведущий не хочет зачитать вебинар по стримингу? 🤓😁
• https://t.me/de_zoomcamp/615/1088 | 530 |
| 9 | https://t.me/de_zoomcamp/1092/1116 | 820 |
| 10 | https://t.me/de_zoomcamp/1092/1093 | 746 |
| 11 | Сделаем дискуссии про состояние agentic в de ?
+ можем побрейнштормить про https://t.me/analytics_engineer/97 | 987 |
| 12 | https://t.me/analytics_engineer/95
+ https://t.me/dw_ru/2835 | 877 |
| 13 | Возвращаюсь в онлайн вебинары 🙂
Залечу на вебинар на следующей неделе во вторник в легендарный DataTalksClub к поговорить (угадайте про что 😘) про Agentic для дата инженеров.
📚Описание
The Agentic Shift in Data Engineering: From Pipeline Builders to Architects of Controlled Chaos
AI agents are changing data engineering on two fronts at once.
In development, they compress the engineering loop: helping write SQL, generate transformations, debug pipelines, create tests, document systems, and reason about legacy codebases.
In production, they become active participants in the data ecosystem: consuming context, calling tools, triggering workflows, creating side effects, and introducing new forms of operational chaos.
This changes the role of the data engineer. It is no longer enough to build pipelines that move data from A to B. Data engineers now need to design the control layer for agentic systems: trusted context, data contracts, permissions, observability, audit trails, and closed feedback loops.
🔮The future data engineer is not just a pipeline builder. They are the architect of controlled autonomy.
🔗 Если интересно, инвайт в Luma - https://luma.com/hpuirqjd | 864 |
| 14 | #ClickHouse — тот самый инструмент, про который все говорят: “очень быстрый”, “тащит миллиарды строк”, “почти бесплатный DWH”.
А потом ты строишь на нём DWH целиком — и знакомишься с OOM, JOIN’ами, партициями, MergeTree, мутациями и прочей взрослой жизнью 😅
Сам использую ClickHouse как основу DWH, поэтому знаю не только про “вау, он быстрый”, но и про места, где он внезапно начинает кусаться. Если вы прошли этот путь или только планируете — приходите сегодня на открытую встречу.
Поэтому особенно интересен честный разбор:
— так ли ClickHouse хорош, как его хайпят?
— можно ли на нём нормально строить DWH?
— что стало или скоро станет лучше с JOIN’ами, OOM и оптимизацией?
— как у него сейчас с Iceberg и Lakehouse?
— держит ли он удар против наступающего StarRocks?
Сегодня DevHands проводят открытую встречу по ClickHouse с Алексеем Белозерским — CDO inSales / СБЕР 2B, ex VK Tech, М.Видео, Эльдорадо.
Будет полезно аналитикам, дата-инженерам, backend-разработчикам, инфраструктурным инженерам, тимлидам и CTO — всем, кто уже использует ClickHouse или думает, можно ли на нём строить серьёзную аналитическую платформу.
В программе:
🤩 демо кейсов
⚡ потоковая загрузка и фоновые агрегации
🛠 инструменты оптимизации
🧠 хитрые вопросы: потеря данных, TTL, движки, мутации, point-запросы
💬 открытая Q&A-сессия
📅 Когда: 4 июня 2026, 18:00 MSK (да-да, через 10 минут 😁)
🎙 Ведущий: Алексей Белозерский, Chief Data Officer в inSales
🏢 Организатор: R&D-центр DevHands
Как попасть: Регистрируйтесь через бота
А eщё у DevHands стартует курс по ClickHouse для аналитиков и инженеров данных. Судя по программе, там не просто “пишем SELECT”, а мясо: архитектура, MergeTree, S3, Kafka, dbt/Airflow, кластеры, оптимизация, troubleshooting, Iceberg/Lakehouse и свежие релизы.
Короче, выглядит как хороший повод системно разобраться: ClickHouse — это уже DWH-платформа или всё ещё очень быстрый OLAP-движок с нюансами?
Старт 11 июня.
Программа тут | 824 |
| 15 | https://t.me/data_events/3296 | 708 |
| 16 | 📅 Четверг с Yandex Cloud: изучаем Managed PostgreSQL и Data Lakehouse
Уже завтра, 2 апреля, вас ждёт два события от команды Yandex Cloud:
1️⃣ В 14:00 мск встречаемся онлайн с командой продукта — Михаил Савин и Степан Фомичев расскажут, как малому и среднему бизнесу настроить стабильную работу PostgreSQL в 1С без команды администраторов.
Регистрация⏪️
Ветка с вопросами и ответами в сообществе⏪️
— разберём миграцию и работу 1С в облаке
— посмотрим, чем сборка PostgreSQL для «1С:Предприятия» от Yandex Cloud отличается от стандартной (спойлер: оптимизация на уровне ядра и специальные расширения)
— покажем, как построить отказоустойчивую архитектуру
— увидим, как развернуть отказоустойчивый кластер для 1С и обеспечить надёжность данных
— изучим кейсы пользователей: как выглядят реальные архитектуры клиентов, уже работающих с 1С в облаке.
2️⃣ В 15:30 мск приглашаем вас на митап в Москве (и на прямой эфир). Наша продуктовая команда покажет вам, как развернуть и собрать Lakehouse‑архитектуру на базе сервисов Yandex Cloud — с минимальной ручной интеграцией и быстрым стартом.
Регистрация⏪️
Ветка с вопросами и ответами в сообществе⏪️
Вы узнаете, как построить современную аналитику от данных до BI:
— как хранить сырые данные в Object Storage (S3)
— организовать табличный слой на Iceberg
— обрабатывать данные в Trino и Spark
— строить быстрые витрины в ClickHouse и доводить результат до дашбордов в DataLens.
В финальном докладе поделимся видением: собственный Iceberg REST Catalog для управляемости и контроля доступа, а также AI‑агенты для ускорения работы с кодом и пайплайнами.
Спикеры события — команда продуктовых архитекторов Yandex Cloud во главе с лидером продуктовой архитектуры Леонидом Савченковым. На митапе соберём лист ожидания для раннего доступа к новым возможностям! | 749 |
| 17 | В еженедельные #анонсы- #дайджесты добавлен гугл-#календарь: https://t.me/Products_Events/1180 | 526 |
| 18 | https://t.me/de_zoomcamp/615/998 | 501 |
| 19 | https://t.me/de_zoomcamp/615/981 | 645 |
| 20 | https://t.me/de_zoomcamp/615/963 | 718 |
