Архитектор Данных
Kanalga Telegram’da o‘tish
Алексей, архитектор данных Большие данные и облака. Для связи @alexbelozersky
Ko'proq ko'rsatish1 945
Obunachilar
Ma'lumot yo'q24 soatlar
+27 kun
+1930 kun
Postlar arxiv
1 945
В курсе по Lakehouse в следующем году будет на 2 главы больше!
Добавляю две важные темы, по которым всегда очень много вопросов:
1️⃣ Безопасность Lakehouse. Это топ-1 блокер для старта внедрения. Многие команды виснут здесь уже на этапе концепции. Как мы будет защищать систему и оберегать данные в ней, когда само хранилище by design предполагает множество разных продюсеров и потребителей и при это не керберизованный hadoop?
Справиться с этой проблемой можно. Построить сквозную ролевую модель - непросто, но делается! Об этом и поговорим.
2️⃣ Агенты в lakehouse. Как настроить подключение агентами к lakehouse с аналитикой на естественном языке? Сначала сделаем спидран с нуля до первого вопроса в режиме нейро-чата. Потом обсудим, как организовать скилы и гарды чтобы первый сложный вопрос на прогноз не заДоСил весь лейкхаус.
Цена пока что старая - на Black Friday но это не навсегда. Так что записывайтесь.
15 Noy, 02:28
1 945
Ох какой интересный график.
Кто вы на этой шкале? Только честно!
Все почитать можно тут
https://devcrowd.ru/ds26
10 Noy, 07:45
1 945
Изменения технологического ландшафта платформ данным согласно DevCrowd.
Ну хотя бы Iceberg обогнал Hadoop
10 Noy, 06:46
1 945
Вот это - самое опасное заблуждение наших дней.
Дьяволово искушение, выпавшее на наше поколение и нашу профессию.
Иллюзия знания хуже невежества.
(Из комментов у коллеги)
08 Noy, 05:22
1 945
Проблемы курицы и яйца
Это воробей изобрел себе гены, чтобы передать удачные признаки потомкам
ИЛИ
Это гены сделали себе удобную белковую оболочку в виде воробья, чтобы улететь дальше и распространиться шире?
Это мы изобрели в сетях мемы, чтобы было веселее
ИЛИ
Это мемы придумали себе интернет и соцсети чтобы закреплять свое существование и распространяться быстрее и шире?
08 Noy, 02:26
1 945
Хроники финансового ИИ безумия
Коллега собрал графики по отчету Amazon за 9 месяцев 2026.
Да, собственные чипы поставляются на $25 млрд и растут кратно.
Но, на 14 млрд чисто ИИ выручки кладется 42 млрд капекса. То есть каждый доллар с рынка должен быть обеспечен 3 долларами собственных средств компании.
Оттого и свободный ден поток упал с -5 млрд до -58 млрд. Масштаб потерь - 2 капитализации Газпрома за неполный год!!! Все это конвертируется в долг, ставки на который стремительно растут
У всех остальных вовлеченных компаний будет скорее хуже чем лучше.
Сколько еще протянут в таком безумном темпе даже гранды мирового ИТ?
07 Noy, 01:40
1 945
No system is safe
Open AI нашел без малого 1000 способов порутать Linux. Это только то что было доведено до рабочих эксплоитов в автоматическом конвейере поиска и эксплуатации уязвимостей
Мы живем в мире, когда нужно воспринимать любую систему как уже взломанную.
Вопрос уже не в том, можно ли что-то взломать и добиться в нем максимальных привилегий, а в том, сколько стоят 10-50-500 млрд токенов для этого. И у кого в руках ИИ, достаточно умный чтобы взорвать изнутри вашу систему.
05 Noy, 00:55
1 945
Разговоры на архитекторском - Выпуск 7 - Николай Голов о развитии Лейкхаусов и аналитиках-агентах
Выкладываю запись вчерашнего стрима с Николаем.
Получился мощный мясной разговор о создании, развитии и принципах современных платформ данных. А также горячая дискуссия об Агентах-аналитиках и насколько реально их применения сегодня.
Youtube - https://www.youtube.com/watch?v=hgISJWQbfHc
Vk Video (на проверке) - https://vkvideo.ru/video-228742675_456239050
Подпишитесь на каналы, ведь иногда я не анонсирую видео в Телеграме 😄
04 Noy, 07:00
1 945
Сорри, стрим зафейлился с настройками звука. Быстро это к сожалению не поправить.
Стрим отменим и выложим запись.
03 Noy, 10:12
1 945
Ссылка на трансляцию
https://vkvideo.ru/live-228742675_456239048
Если будут вопросы - пишите в чат трансляции или в комменты под постом!
Через 05 минут начинаем
03 Noy, 10:01
1 945
Напоминалка
Сегодня в 18:00 вечера беседуем с Николаем (фаундер и директор по продукту Tengri) про лейкхаусы и анентную аналитику!
03 Noy, 04:32
1 945
Кто хочет поставить деньги на ИИ - есть ПИФ, в котором позиции определяет ИИ от УК Первой (то есть Сбер)
02 Noy, 07:30
1 945
Финансовый эффект ИИ на примере баланса Диасофта. Людей уволили, но денег на этом не заработали
👌
Взято тут
31 Okt, 07:54
1 945
Любите лейкхаусы? А агентов? Мы тоже очень любим!
В новом 7-м выпуске "Разговоров на Архитекторском" говорим про развитие агентских систем в современных российских Лейкхаусах!
Гость - Николай Голов, CPO Tengri Platform - технологичной российской платформы данных, делает ставку на развитие агентской аналитики. Ex Avito, ManyChat
Вместе мы постараемся ответить на вопросы
➖ Развитие направления AI-SDLC (нейро-кодинга) и все ли приемы подходят для агентов-аналитиков?
➖ AI для аналитика. Как соединить корпоративные данных и лучшие ИИ? Как аналитик может гарантировать корректность запросов и расчетов?
➖ AI для архитектора данных - как проектировать архитектуру платформы? Как учесть потребности не только живых аналитиков и BI, но и агентов?
Дата и время
Вторник, 3 ноября, 18:00 время Московское.
Ссылку на стрим выложим в канале
Архитектор Данных
31 Okt, 02:52
1 945
Новая глава в курсах Clikchouse && Lakehouse - агентные данные!
Все, кто занимается данными, столкнутся с агентами в самом недалеком будущем.
➖ Аналитиков попросят сделать, чтобы система отвечала на вопросы заказчиков «на естественном языке».
➖ К Инженерам данных придут с вопросом: «Как так вы еще не вайбкодите свои пайплайны и стримы?»
➖ Архитекторы будут биться с возрастающей и специфичной нагрузкой от агентов
———————————————————————————————
Мы в наших курсах вводим новые главы - как построить общение агентов с корпоративными данными. В ней мы от простого к сложному будем разбирать, как можно улучшить (а не ухудшить) жизнь профессионалов данных в нейро-реалиях.
❓ Как использовать возможности систем по оптимизации? Ведь вопрос заказчика на естественном языке это не 2 запроса в час от живого аналитика, а 100 запросов за 10 минут, где агент переберет сначала все неправильные варианты, прежде чем прийти к правильному.
❓ Какое составить описание данных и как правильно подать его агентам? Ведь описать все невозможно, а гарантировать подачу именно правильных таблиц и витрин агенту -- критически важно!
❓ Как убедиться, что ответ (показатель=100) действительно верный и сохраняется через все рассуждения агента?
❓ Ну или хотя бы как сделать, чтобы агент не пытался самому себе назначить гранты и не искал пароли к БД в конфигах проекта?
Ближайший запуск - Четверг 29 октября, Кликхаус!
27 Okt, 01:37
1 945
Утром кефир покупал, случайно нажал кнопку «Хочу работать в Пятерочке»
Вышли люди, куда-то повели, и вот.
Ну ладно, думаю, 10 Петабайт лейкхауса менеджить, не самое плохое что могло случиться.
25 Okt, 04:51
