Данные на стероидах
رفتن به کانال در Telegram
Команда Дата сервисов VK Tech о практиках и подходах для извлечения максимальной пользы из работы с данными. Мы в MAX: https://max.ru/stereodata
نمایش بیشتر3 255
مشترکین
+224 ساعت
+57 روز
+1030 روز
در حال بارگذاری داده‌ها
کانال‌های مشابه
ابر برچسب‌ها
اشارات ورودی و خروجی
---
---
---
---
---
---
جذب مشترکین
اکتبر '26اکتبر '26
اکتبر '26
+45
در 1 کانال‌ها
سپتامبر '26
+42
در 2 کانال‌ها
Get PRO
اوت '26
+70
در 1 کانال‌ها
Get PRO
ژوئیه '26
+25
در 1 کانال‌ها
Get PRO
ژوئن '26
+30
در 1 کانال‌ها
Get PRO
مه '26
+23
در 0 کانال‌ها
Get PRO
آوریل '26
+104
در 7 کانال‌ها
Get PRO
مارس '26
+22
در 0 کانال‌ها
Get PRO
فوریه '26
+24
در 1 کانال‌ها
Get PRO
ژانویه '26
+36
در 0 کانال‌ها
Get PRO
دسامبر '25
+31
در 1 کانال‌ها
Get PRO
نوامبر '25
+254
در 4 کانال‌ها
Get PRO
اکتبر '25
+58
در 0 کانال‌ها
Get PRO
سپتامبر '25
+124
در 2 کانال‌ها
Get PRO
اوت '25
+127
در 6 کانال‌ها
Get PRO
ژوئیه '25
+49
در 4 کانال‌ها
Get PRO
ژوئن '25
+259
در 2 کانال‌ها
Get PRO
مه '25
+31
در 2 کانال‌ها
Get PRO
آوریل '25
+87
در 0 کانال‌ها
Get PRO
مارس '25
+26
در 1 کانال‌ها
Get PRO
فوریه '25
+82
در 2 کانال‌ها
Get PRO
ژانویه '25
+46
در 1 کانال‌ها
Get PRO
دسامبر '24
+11
در 0 کانال‌ها
Get PRO
نوامبر '24
+33
در 0 کانال‌ها
Get PRO
اکتبر '24
+45
در 0 کانال‌ها
Get PRO
سپتامبر '24
+57
در 1 کانال‌ها
Get PRO
اوت '24
+58
در 1 کانال‌ها
Get PRO
ژوئیه '24
+35
در 0 کانال‌ها
Get PRO
ژوئن '24
+43
در 0 کانال‌ها
Get PRO
مه '24
+264
در 1 کانال‌ها
Get PRO
آوریل '24
+148
در 1 کانال‌ها
Get PRO
مارس '24
+55
در 0 کانال‌ها
Get PRO
فوریه '24
+78
در 2 کانال‌ها
Get PRO
ژانویه '24
+51
در 0 کانال‌ها
Get PRO
دسامبر '23
+234
در 1 کانال‌ها
Get PRO
نوامبر '23
+361
در 8 کانال‌ها
Get PRO
اکتبر '23
+400
در 0 کانال‌ها
Get PRO
سپتامبر '23
+1 306
در 0 کانال‌ها
| تاریخ | رشد مشترکین | اشارات | کانال‌ها | |
| 30 اکتبر | 0 | |||
| 29 اکتبر | +2 | |||
| 28 اکتبر | +1 | |||
| 27 اکتبر | +2 | |||
| 26 اکتبر | +2 | |||
| 25 اکتبر | +1 | |||
| 24 اکتبر | +1 | |||
| 23 اکتبر | +1 | |||
| 22 اکتبر | +2 | |||
| 21 اکتبر | +4 | |||
| 20 اکتبر | +1 | |||
| 19 اکتبر | 0 | |||
| 18 اکتبر | +1 | |||
| 17 اکتبر | +3 | |||
| 16 اکتبر | +2 | |||
| 15 اکتبر | +2 | |||
| 14 اکتبر | +1 | |||
| 13 اکتبر | +4 | |||
| 12 اکتبر | +1 | |||
| 11 اکتبر | +2 | |||
| 10 اکتبر | +1 | |||
| 09 اکتبر | 0 | |||
| 08 اکتبر | +1 | |||
| 07 اکتبر | +3 | |||
| 06 اکتبر | +6 | |||
| 05 اکتبر | +1 | |||
| 04 اکتبر | 0 | |||
| 03 اکتبر | 0 | |||
| 02 اکتبر | 0 | |||
| 01 اکتبر | 0 |
پست‌های کانال
Нам важно говорить на одном языке со всеми, кто работает с данными. Поэтому мы решили регулярно разбирать термины, чтобы понимать друг друга еще лучше. Начнем с понятия «онтология» — на примере ИИ-агента.
Представьте: магазин запустил скидки, но выручка по акционным товарам упала. Менеджер спрашивает ИИ-агента: «Почему?»
Онтология помогает агенту связать данные об акциях, товарах, клиентах и покупках. Агент обращается к нужным системам и выясняет: скидками воспользовались в основном постоянные покупатели, объем продаж почти не изменился, а новых клиентов больше не стало.
Получается, магазин продал привычные товары привычным покупателям, только дешевле.
🔹 Онтология помогает ИИ не просто находить данные, а понимать связи между ними. Благодаря этому агенту проще выбрать нужную информацию, сократить лишние запросы и расход токенов.
Скоро расскажем, как это работает, на конкретных примерах.
💬 А какие данные вашего бизнеса вы бы доверили анализировать ИИ-агенту?
📬 Мы в Max
| 2 |  👥 Как дать команде доступ к нужным файлам, не открывая ей все хранилище?
В VK Object Storage для этого есть Bucket Policy — инструмент управления доступом к данным. Он позволяет указать, кто может читать, загружать или удалять файлы, и оставить доступ лишь определенным IP-адресам.
Смотрите видео, в котором Елизавета Белоконова, менеджер продуктов VK Tech, рассказывает, как работает Bucket Policy и как он помогает разграничить доступ для нескольких команд.
📬 Мы в MAX | 338 |
| 3 |  ⚙️ Вычислительное ядро CedrusData теперь учитывает весь план запроса
🔹 Что поменялось?
Раньше каждый рабочий узел планировал для Oxide только свой фрагмент запроса. Теперь планирование перенесли на координатор: он рассматривает финальный план целиком и определяет, какие части будут выполнены в нативном ядре. Рабочие узлы исполняют выделенные части.
🔹 Зачем это нужно?
Это подготовка к следующему этапу — Remote Exchanges. Благодаря этому узлы смогут обмениваться данными напрямую, без возврата через координатор. Такой обмен нужен для горизонтального масштабирования нативного исполнения: наращивать вычислительные мощности можно будет добавлением узлов.
Параллельно за последние месяцы Oxide получил поддержку UNION, а также около 30 исправлений корректности работы с Iceberg, о которых мы расскажем в наших постах.
📬 Мы в MAX | 408 |
| 4 |  Чтобы готовить отчетность, нужны данные из разных систем: розничного и корпоративного бизнеса, финансового блока, контакт-центра. Для банка «Кубань Кредит» это десятки терабайт в базах данных, файловых системах и объектном хранилище S3.
После четырех лет работы с этими данными на платформе Denodo банк перешел на CedrusData.
📁 Почему решили мигрировать
Главные причины — высокая стоимость лицензии и зависимость от зарубежного ПО.
После двухмесячного пилота выбрали CedrusData: платформа справлялась с нужными объемами данных, была совместима с существующими системами банка и позволяла сократить расходы.
🔃 Как проходил переход
Переход занял шесть месяцев, его разделили на этапы: извлечение данных, трансформация и построение витрин. Некоторые подходы, сложившиеся за годы работы с Denodo, пришлось переработать под новую архитектуру. Основная нагрузка легла на ночные загрузки через Apache NiFi, но срок готовности витрин соблюдали на протяжении проекта.
📈 Какой результат получил бизнес
Для пользователей сохранились привычные BI-системы и прикладные интерфейсы. За полгода банк завершил миграцию, сократил время выполнения ETL-процессов и расходы на лицензии.
➡️ Читайте подробности процесса миграции в кейсе
📬 Мы в МАХ | 632 |
| 5 | Правильный ответ — до 10 источников ✈️
И самое интересное: при подсчете одного и того же показателя эти источники могут давать разные результаты.
Именно поэтому компания S7 Airlines почти 15 лет назад начала создавать единое хранилище данных, чтобы все подразделения опирались на согласованные цифры.
Как устроена работа с данными в авиации и какие еще задачи решает команда Марии Ткачевой — рассказали в первом выпуске DATA SPACE.
📬 Мы в MAX | 518 |
| 6 | بدون متن... | 513 |
| 7 |  ✈️ Правда ли авиабилеты дешевле ночью во вторник?
Разбираемся, как на самом деле формируются цены на билеты и какую роль данные играют в работе авиакомпаний, в первом выпуске нового проекта!
Запускаем DATA SPACE — проект VK Tech о том, как данные работают на бизнес. В первом выпуске говорим с Марией Ткачевой, CDO S7 Airlines.
Разобрали, как в S7 устроены хранилища данных, где применяют Lakehouse и CedrusData, что тормозит Data Mesh и почему real time в авиационной аналитике может измеряться часами.
А еще выяснили, зачем авторизовываться на сайте авиакомпании вместо охоты за билетами во вторник ночью — история перелетов, тарифы и посещения сайта влияют на персональное предложение.
➡️ Смотрите первый выпуск DATA SPACE в VK Видео
📬 Мы в MAX | 957 |
| 8 |  📊 Как выбрать СУБД под реальную задачу и не запутаться в технологиях?
Уже завтра в прямом эфире AM Live обсудят российский рынок СУБД: где достаточно одной базы данных, когда нужна специализированная или распределенная база и в каких случаях управляемый сервис в облаке выгоднее самостоятельной эксплуатации.
От VK Tech к дискуссии присоединится Руслан Галиев, руководитель команды коробочных продуктов Tarantool. В эфире также поговорят о миграции критичных баз, отказоустойчивости, стоимости эксплуатации и риске зависимости от одного вендора.
🗓 23 октября, 11:00
💻 Онлайн
Зарегистрироваться на AM Live →
🔗 Мы в MAX | 539 |
| 9 |  Продолжаем рассказывать про обновления CedrusData. В новой версии появилась сквозная OIDC/OAuth-аутентификация и расширился аудит ИБ в CedrusData Engine и CedrusData Catalog.
Что изменилось:
🔹 При входе в каталог пользователь авторизуется через внешнюю систему по OIDC. Если включен create-users, учетная запись создается автоматически после первого успешного входа.
🔹 При запросе из Trino каталог получает OAuth-токен пользователя с его группами и ролями. Эти сведения используются для проверки прав доступа. Вручную сопоставлять группы и роли между Trino и каталогом не нужно.
🔹 В журнале аудита Engine фиксируются изменения политик доступа, запуск и остановка сервера. Для событий доступа записывается результат Allow/Deny, поэтому специалисты ИБ могут быстро проверить, что именно произошло.
В итоге меньше ручной работы с учетками и правами, а у ИБ-команды есть единый журнал для проверки доступа и изменений политик.
👍 — если тоже хотите свести ручную работу на нет
📬 Мы в MAX | 537 |
| 10 |  ⏰ Уже через час соберем навык для ИИ-агента в прямом эфире!
Сегодня в 12:30 на вебинаре VK Tech Никита Финченко, старший менеджер продукта VK AI Space, расскажет, как создавать общие навыки для ИИ-агентов и с их помощью автоматизировать процессы сразу в нескольких подразделениях компании.
➡️ Смотрите трансляцию и задавайте вопросы в комментариях к этому посту — ответим в эфире 👇
📬 Мы в МАХ | 523 |
| 11 |  🇷🇺 1–2 рабочих дня вместо 6 месяцев — именно столько теперь занимают маркетинговые исследования «Холдинг Аква». С этим производителю «Ессентуков» и «Нарзана» помог VK AI Researcher.
Как это работает?
VK AI Researcher создан на платформе VK AI Space для разработки и запуска ИИ-агентов. Сервис анализирует обезличенные данные об интернет-аудитории и информацию из открытых источников, чтобы определить, кому может быть интересен продукт, что мотивирует к покупке, а что останавливает.
В «Холдинг Аква» настроили многоступенчатый отбор аудитории по социально-демографическим и географическим признакам, интересам и 16 специальным фильтрам покупательского поведения.
В классическом формате на глубинные интервью для этих задач уходит 2–3 недели. У VK AI Researcher профилирование аудитории и поиск инсайтов занимают около 20 минут. Такой подход помогает компании быстрее оценивать спрос, сравнивать продуктовые концепции и выбирать наиболее перспективные еще до их запуска.
«Кейс "Холдинга Аква" показывает, как генеративный ИИ и данные VK работают вместе на реальной бизнес-задаче — оценке продуктовых гипотез. Теперь команда может проверить гораздо больше идей, прежде чем вложиться в производство», — рассказал директор по ИИ-продуктам VK Tech Роман Стятюгин.
📬 Мы в МАХ | 552 |
| 12 |  Собираем навык для ИИ-агента в прямом эфире!
21 октября в 12:30 пройдет бесплатный онлайн-вебинар VK Tech «Навыки: как автоматизировать компанию, а не отдельного сотрудника». Покажем, как описывать процессы в виде навыков, подключать их к разным агентам и использовать в нескольких подразделениях.
💬 На вебинаре Никита Финченко, старший менеджер продукта VK AI Space, разберет, как перенести правила, шаблоны, проверки и необходимые действия в общую библиотеку навыков. Готовые наработки можно адаптировать под задачи команд — без разработки каждого решения с нуля.
🔹 В финале создадим навык из описания процесса на естественном языке — прямо в эфире. А затем ответим на вопросы.
👥 Вебинар будет полезен ИТ-руководителям, архитекторам, специалистам по безопасности, владельцам бизнес-процессов, командам разработки, продукта и аналитики.
➡️ Посмотреть программу и зарегистрироваться
📬 Мы в MAX | 685 |
| 13 |  پیام ویدیو | 629 |
| 14 |  🤖 Готов ли ваш бизнес к ИИ-агентам? Проверим на AI Cases Conf
19 октября команда VK Tech будет на AI Cases Conf от Онтико — конференции о внедрении ИИ в бизнес-процессы не ИТ-компаний. Здесь владельцы и руководители бизнеса обсудят, какие задачи можно поручить ИИ, как оценить затраты и проверить результат.
На конференции расскажут, как компании используют ИИ в ежедневной работе и автоматизируют рутину. В докладах разберут подготовку к внедрению, результаты и ошибки, с которыми столкнулись команды.
А на нашем стенде можно будет:
🔹 в игровом формате оценить готовность компании к внедрению ИИ-агентов
🔹 пообщаться с экспертами продуктовой команды и обсудить свои задачи
🔹 узнать больше о внедрении ИИ в компании
🔹 забрать наш мерч — брендированные кофейные дрипы.
Приходите с вопросами о своем бизнесе — будем разбираться вместе.
📍 19 октября, Москва + онлайн
📬 Мы в MAX | 686 |
| 15 |  Превратите опыт компании в каталог знаний для ИИ
🗒 Мы выпустили VK Data Catalog — сервис, который собирает технические и операционные метаданные из корпоративных систем в единую базу знаний.
Сервис позволяет дать ИИ-агентам контекст о корпоративных данных: что они означают, откуда появились, какого они качества и можно ли их использовать в конкретной задаче. Без этой информации агент может выбрать устаревшую или неподходящую информацию.
VK Data Catalog может:
🔹 найти и разобраться в значении данных
🔹 установить ответственных и контролировать качество
🔹 проследить происхождение информации
🔹 оценить влияние изменений на результат
🔹 обеспечить AI-агентов бизнес-контекстом через онтологию и центр контекста — статьи, документы и воспоминания.
В связке с VK Data Platform и VK AI Space этот контекст можно использовать непосредственно при работе с данными и построении аналитических и ИИ-сценариев.
«Развитие семантического слоя поможет точнее связывать бизнес-показатели с данными, сокращать объем лишнего контекста и расход токенов, а аудит — отслеживать, какие источники использовал агент», — Екатерина Канунникова, директор по продуктам направления Дата-сервисы VK Tech.
🔗Для подключения ИИ-приложений и агентов каталог поддерживает MCP (Model Context Protocol). Через него данные каталога можно использовать как источник структурированного контекста для ИИ-сценариев.
➡️ Подробнее про реализацию VK Data Catalog.
📬 Мы в MAX | 678 |
| 16 |  🤖 Можно ли доверять правилам защиты, написанным ИИ?
В Snowflake появился Intent-Driven Governance. Вместо отдельных правил в нем можно описать желаемый результат простым языком. Например: «Защити персональные данные сотрудников».
Система определит чувствительные поля, предложит план защиты и подготовит SQL-правила. Перед применением каждого этапа решение подтверждает человек.
💬 Никита Янченков, руководитель подразделения аналитических сервисов и управления данными в VK Tech:
Перевести требование в SQL — это механика, и модели уже хорошо с ней справляются. Сложнее определить, что именно в вашей компании считается PII сотрудника. Модель не знает внутренний дата-словарь и контекст конкретных полей: phone, numbers или status в разных системах могут означать совершенно разные вещи.
Поэтому сгенерированная политика должна жить как код: с версиями, ревью и проверкой перед применением. Ответственность за результат все равно остается у людей, решения вроде Intent-Driven Governance просто ускоряют и упрощают работу.
💬 Что вы готовы поручить ИИ в управлении доступом? Назовите одну проверку, без которой не стали бы применять сгенерированное правило 👇
📬 Мы в MAX | 630 |
| 17 |  Поговорим о storage-инфраструктуре? Приглашаем на Data Meetup №2
Наша первая встреча была посвящена платформам данных. В этот раз приглашаем дата-инженеров, архитекторов, технических продактов, тимлидов и CDO обсудить хранилища данных, Lakehouse и AI.
Приходите 28 октября познакомиться с коллегами, обсудить свои проекты и обменяться опытом с экспертами VK Tech, Ozon Tech, Yandex Infrastructure.
📋 Весь митап будет построен как круглый стол: эксперты VK Tech и Ozon Tech представят свои кейсы, после каждого — панельная дискуссия с представителями компаний о хранении и аналитической обработке данных. Гости тоже участвуют!
🍕 После технической части продолжим общение за пиццей и напитками.
📅 28 октября, сбор гостей в 17:30, начало в 18:05
Онлайн-участники смогут присоединиться к трансляции и задать вопросы спикерам во время дискуссии в чате нашего канала.
➡️ Смотрите программу и регистрируйтесь на Data Meetup VK Tech №2.
📬 Мы в MAX | 809 |
| 18 |  🧠 Один тяжелый запрос больше не оставит соседей без памяти
В CedrusData Engine 26.4 появился жесткий контроль памяти в ресурсных группах. Он помогает изолировать нагрузку разных команд в одном кластере.
Для каждой ресурсной группы можно задать свои лимиты памяти: query.max-memory, query.max-total-memory и query.max-memory-per-node. А hardMemoryPerNodeLimit ограничивает, сколько памяти группа может занять на отдельном worker-узле.
Если памяти не хватает, Low Memory Killer ищет самый ресурсоемкий запрос внутри группы и завершает его. Остальные группы продолжают работать — вместо того чтобы вместе страдать от одного тяжелого запроса.
В итоге нагрузку разных команд можно разделять более предсказуемо, а весь кластер — защищать от слишком прожорливых соседей.
💬 У ваших команд общий кластер или у каждой свой?
👍 — общий, с лимитами ресурсов
❤️ — общий, без жестких лимитов
🔥 — у каждой команды свой
📬 Мы в MAX | 1 402 |
| 19 |  +4🗄 Российские компании пересматривают подход к хранению данных
Раньше работу с данными полностью делегировали инфраструктурным командам, а бизнес не погружался в детали. Сейчас парадигма изменилась: в 2026 году управление берут на себя сами компании. Делимся результатами исследования 🔹
🔹Почему происходят изменения?
Согласно опросам, для 26% компаний основной предпосылкой для пересмотра модели хранения данных стал рост объемов информации, для 18% — начало работы с ИИ и появление аналитических нагрузок, для 17% — новые требования к производительности.
При этом более 60% используют или планируют внедрять российские решения, такие как VK Data Platform для управления данными или S3-объектное хранилище VK Object Storage.
🔹Как бизнес выбирает СХД?
Компании все чаще отказываются от типовых решений в пользу кастомизированных, заказчики собирают инфраструктуру как конструктор: под конкретный профиль нагрузки, целевые SLA, допустимые RTO/RPO.
При выборе платформы 38% в первую очередь обращают внимание на совместимость с существующей инфраструктурой, еще 28% — на надежность и доступность данных.
Смотрите карточки с результатами в графиках.
📬 Мы в MAX | 827 |
| 20 |  🗑 Как хранить данные, если пока неизвестно, когда их можно удалить
Облачная платформа Amazon Web Services добавила в объектное хранилище S3 новый сценарий для Object Lock — event-based retention. Он позволяет отсчитывать срок хранения файла от бизнес-события.
Зачем это нужно
Срок хранения некоторых данных зависит от внешнего процесса. Например, материалы расследования нужно сохранять до его завершения, а затем еще установленный период.
Как работает event-based retention
«Lifecycle и фиксированный срок хранения работают по схеме "загрузили → прошло N дней → удалили". При event-based retention объект защищен event hold, пока событие не наступило. После снятия hold стартует заранее заданный WORM-период, который уже нельзя сократить», — Елизавета Белоконова, менеджер продуктов VK Tech.
Кто должен снимать hold?
Главное правило — это не должен быть владелец файлов, иначе он фактически сможет сам запустить отсчет до их удаления. Это стоит выделить в отдельную compliance- или ИБ-функцию.
Как вам такой подход? Насколько это может увеличить эффективность хранения данных?
👉 Пишите свое мнение в комментариях.
📬 Мы в MAX | 540 |
