Архитектор Данных
Open in Telegram
Алексей, архитектор данных Большие данные и облака. Для связи @alexbelozersky
Show more1 870
Subscribers
+224 hours
+27 days
+3730 days
Posts Archive
1 870
ReplicatedVersionedCollapsingMergeTree
Что-то на немецком 😆
20 апреля будет вебинар по Кликхаусу от клауда!
1 870
Кровавый энтерпрайз. Никакая движуха не начнется, пока все уважаемые люди не поймут, какой гешефт движуха будет нести лично им.
Рашн энтерпрайз. Никакая движуха не начнется, пока уважаемые люди не поймут, что лично они ни за что не будут отвечать.
1 870
Всем привет!
Еще есть несколько мест на 3-й поток курса Лейкхаус.
Записаться здесь:
https://devhands.ru/lakehouse
1 870
Смотрите, Юрийалексееич, глядите, Сергейпалыч!
Это нам Канье сгенерированный через АПИ по ВПН поет «Трава у дома»! Ну классно же, какие мы молодцы, что так здорово придумали.
1 870
65 лет назад
Мы стараемся, Юрий Алексеевич и Сергей Правлович.
Правда, стараемся. Вот нейросеток всяких наделали.
1 870
Repost from Путч. Минута в минуту
Королев: Смотрели сейчас вас по телевидению — все нормально, вид ваш порадовал нас: бодрый. Как слышите меня?
Гагарин: Вас слышу хорошо. Самочувствие хорошее, настроение бодрое, к старту готов.
Королев: Ну отлично, хорошо. У нас все идет нормально.
1 870
Спасибо всем посетившим вебинар!
Обсудили концепции КХД и ДЛХ, современный стек технологий.
Отдельная благодарность тем, кто поделился опытом своих проектов!
Отлично посидели.
1 870
Reminder!
Сегодня вечером обсуждаем границы применения различных технологий для КХД/ДЛХ.
Вступайте в чатик и поговорим вместе!
1 870
ChatGPT решил правильно. В процессе по сути составил систему линейных уравнений для сторон - 6 неизвестных. Потом ловко выразил и решил. Нормально.
Мое решение на видео.
Произошедшее в коментах натолкнуло сразу на несколько философских размышлений.
Спасибо всем за отличную дискуссию.
1 870
Друзья, страшно извиняюсь, но сегодня по техническим причинам стрима не будет.
Мы обязательно выберем другую дату, stay tuned!
1 870
Все на острове богаты, изоб нет, одни палаты!
Раньше каждый отец семейства строил себе избу, в которой жил. Ну или вместе с родственниками, соседями и общиной.
Жили скромно, изба-пятистенок это 2 квадрата длиной с бревно - ну сколько там метров? Минус сени и большая печка, получится метров 40 на семью человек 8. Это примерный аналог кода в небольшой компании.
Бояре да князья могли себе позволить терем, но и там потолки низкие и места не сказать чтобы много. Это аналог энтерпрайз софта для богатых корпораций.
Сейчас эра индустриального домостроения. Никого не удивишь 90-100 метрами на семью из 3-4 человек. А корпорации живут в небоскребах с верхушками в облаках.
Примерно то же с софтом может сделать доступ к дешевому индустриальному коду. Переселимся из изб не в палаты, а в монолитные коробки. Не будет такого, что у всех палаты, а будет так, что у кого-то человейник в бывших полях, а у кого-то крафтовый домик как на видео. Просто на других технологиях сделанные.
Ничего не изменится и в распределении ценности рабочих, которые строят эти дома. Строитель избы и разнорабочий на стройке простой многоэтажки это примерно одно. Равно как и архитектор домика с видео и мастер деревянного зодчества, строивший княжеский терем - это одно. Просто инструменты в их руках слегка разные.
Единственное что пугает, это скорость перехода. Нет поколений, чтобы деревянных дел мастеру адаптироваться, есть годы или даже кварталы
1 870
Вниманию CTO и всем, кто строит платформы данных.
Когда нужно переходить на Lakehouse? Как начать изучать этого зверя на практике, с готовым инфраструктурным сетапом? Всё расскажем и покажем на вебинаре в пятницу, 10-го апреля, 18:00 MSK.
Как сделать платформу под аналитику? На малом объеме как ни делай, оно делается. При росте объемов данных постгреc тормозит, кликхаусы теряют консистентность, хадупы - старые динозавры из 2000-ных, а аналиткии постоянно хотят запрашивать больше, загружать быстрее, гонять более сложные алгоритмы. 10 аналитиков на 10 ТБ со средней сложностью запроса 1 за год превращаются в 20 аналитиков с 50 ТБ данных со сложностью в 2 = рост нагрузки в 2*5*2 в 20 раз. Всё начинает ломаться, тормозить, бизнес недоволен.
Лейкхаус
🤩 использует современные подходы к масштабированию, отдельно хранения и отдельно компьюта
🤩 хранит данные на недорогом S3
🤩 организует облако данных, где каждый видит изменения каждого другого мгновенно, без многодневных перекладок из А в Б.
Но чтобы построить лейкхаус нужно много знать. Клауды помогают, но и в них без фундаментальных знаний никак.
На вебинаре в пятницу Алексей Белозерский покажет как:
🤩 не страдать от ограничений СУБД
🤩 построить модерн дата стэк на современной платформе
🤩 о каких особенностях нужно подумать и что учесть для работы на лейкхаусе
Чтобы попасть на вебинар, напишите “вебинар lakehouse” в наш community-аккаунт, @devhands_community. Приходите, приводите друзей и коллег.
1 870
По поводу архитектур данных и как обоснованно выбрать то или другое решение для именно ваших задач в пятницу будет открытый митап.
Записываемся по ссылке, открыто обсудим, как строить платформы для данных в 2026 году.
Далее репост:
