🏄 Соревновательный Data Science | Kaggle | Чемпионаты

Привет, Чемпионы! 🏆🍁 Лето подходит к концу, а значит пора запасаться знаниями и интересными курсами, к новому учебному году! Объявляем неделю знаний (скидка 25% до 2 сентября): Промокод: 1SEPTEMBER • 🛡 AI Security - ломаем и защищаем ИИ-приложения 🆕 • 🏆Соревновательный DS - проверенная классика • 🧠 LLM-курс - свой сервис с AI • 🏄‍♀️ Vibe-кодинг - хайп • 🤖 ИИ-АГЕНТЫ и автоматизация с n8n - практикум по быстрой разработке систем с ИИ под капотом. • 👉 Claude Code для НЕпрограммистов - тот самый курс по автоматизации ежедневной рутины. • 🖼 Задизайни и продай сайт за 3 часа | Lovable - вайб-дизайн 👆 Промокод сработает только по этим ссылкам.

Разбор ROGII - Wellbore Geology Prediction начнем с сетапа соревнования. Мы на нем подфармили еще одно серебро, а часть подписчиков апнула золото, причем в нескольких разных командах. Горжусь и завидую. Представьте, что Герр Дональд Трамп сказал нам 'drill, baby, drill', а мы и поверили. И вот уже бурим скважину для исследования недр где-то в Техасе: у нас есть идеальный план бурения и наш бур напичкан кучей датчиков. Буром управляет опытный оператор, который знает, что у пласта породы плотность неравномерная: встречаются камни, пустоты и включения других пород. Из-за этого бур немного (или много) поворачивает внутри скважины и отклоняется от модельной траектории. Оператор смотрит на датчики и подруливает буром, чтобы оставаться как можно ближе к модельному плану бурения- его цель как можно корректнее разведать датчиками на буре показания как можно ближе к траектории. Наша задача- понять, как глубоко в пласте мы находимся, зная предыдущие наблюдения + текущие показатели датчиков. В общем смысле это надо, чтобы бур не выскочил в другой пласт (нам не интересный) и не насобирал ненужной информации. Ну и спланировать, как мы будем качать нефть, сжигать попутный газ и с этой бесплатной энергии майнить битки И того, у нас есть: 1. Координаты в каждый момент времени для бура для каждой скважины. Доступна информация до тех пор, пока бур спускается в целевой пласт и для часть скважины уже внутри пласта. Это наш train кусочек для авторегрессии. Еще для каждого участка скважины знаем длину пути от поверхности и оценочное расстояние в футах до границ всех нам известных пластов (оценивается по typewell, последний пункт). 2. Значения Gamma Ray (GR) на протяжении всего пути. Работает так: у каждой породы свой уровень гамма-радиоактивности, так что регулярно снимая показатели фоновой радиации с бура, мы можем по изменениям понять, что состав породы меняется. Для каждого пласта мы знаем примерны состав и показатель радиоактивности по typewell (следующий пункт), так что можем довольно неплохо понять, что слишком близко подошли к границе пласта и рулить назад. 3. Знаем те же показатели для ближайшей измерительной скважины (typewell): глубину, значение GR на этой глубине и метку того, в каком пласте находимся. Предполагается, что она пробурена вертикально вниз. При этом данные реальные и близкие скважины переиспользуют одни и те же typewell и вообще у них направление и траектория бурения похожа, потому что пласты породы расположены друг на друге и это сильно влияет на оптимальную траекторию. Можно было бы сказать, что в Техасе все данные по скважинам обязательно нужно сдавать правительству, но организаторы об этом позаботились и к каждой скважине и ее координатам добавили индивидуального шума, так что относительное расстояние между скважинами исказилось. И кажется даже немного перемешались ближайшие typewell. Мало того, скважины еще и обрезали, так что матчить их долго и совсем не ясно, какие скважины попали в тест, а какие нет, потому что это Code Comp. Как решать будете? #RogiiWGP

Привет, Чемпионы! 🏆 ROGII неделю как закончился, а разборы продолжают выходить. Сегодня интересный разбор от начинающего кагглера @dmagog

Я, как и ещё 6000+ команд, искал нефть в скважинах ROGII. За девять дней до конца я опубликовал скучную вещь, которая, как потом оказалось, кому-то помогла не вылелеть из медальной зоны: замер шума публичного лидерборда. Пять решений, четырнадцать перезаливок без какой-либо правки в коде и тезис: не верить рычагу, который не пробил твой собственный шум. Кто им воспользовался: – Can, 10-е место. Сделал этот порог для себя жёстким и написал, что во многом поэтому пережил шейкап. – Will, 131-е. Поднялся с 1887-го и оценивал по этому порогу каждого оставшегося кандидата. – Vignesh, 198-е. Поднялся на 1649 мест, сослался на ту же работу в своём райтапе. Кто им не воспользовался? Я.  В последнюю неделю я двигал константы по одной. Каждый шаг давал крошечное улучшение и каждый был честно измерен: движок детерминированный, случайности в нём не осталось. Ощущение полного контроля. После открытия приватной части я уехал вниз на 2,5 тысячи позиций. Мы вроде постоянно говорим, что нужно выбрать свою метрику и не обращать на публичный рейтинг внимание, но на практике это так не работает. Потому что, когда ты 2-3 месяца пробираешься сквозь задачу на ощупь, тебе хочется хоть какого-то подтверждения правильности своего выбора. И доска даёт этот отклик быстро. Совет, который надо в очередной раз посоветовать себе самому: набраться выдержки и оптимизировать те показатели, которые считаешь важными в этой задаче. Даже если из-за них на привате тебя выбросит за борт медального зачёта. Потому что при оптимизации под лидерборд шейкап тебя вышвырнет в любом случае. Разбор целиком: https://www.kaggle.com/code/georgymamarin/measure-your-noise-floor-graded-by-the-shake-up

Если вам тоже, есть чем поделиться - пишите чат , самое интересное опубликуем в канале.

​​Kaggle: Rogii https://www.kaggle.com/competitions/rogii-wellbore-geology-prediction/leaderboard В последние месяцы я впервые за несколько лет серьёзно участвовал в соревновании на каггле. Это было геодезическое соревнование. В итоге мы оказались в серебре и избежали шейкап. Моё соло решение тоже тянуло на серебро, но лишь на ~200 место. Блогпост с деталями напишу позже, а пока вот красивые картинки от клода. Кстати, я не написал ни одной строчки кода - всё участие было через клод/кодекс. Теперь буду отдыхать и зарекаюсь участвовать в каггле ещё на несколько лет 😅 #kaggle #ai

Круче чем клава от OpenAI

Привет, Чемпионы! 🏆 Через 5 часов закончится ROGII, какие прогнозы? Вот что Клод выдал на прощание 😂:

Работать с вами над этим было отличным спортом. Если завтра захочется разобрать private-результаты, когда они откроются, — заходите.

Снова офлайн встреча. 🔥 Это последний офлайн митап этого лета! В четверг, 6 августа. Общий сбор в 18:00, начало в 18:30 Забронировать место можно написав «Хочу на встречу» в личку @Aleron_df В прошлый раз мы репетиционно затронули широкий пласт тем. В этот раз сделаем больший фокус в создание свой сервисов и маркетинг. Будет три интересных спикера с уже успешными запусками за спиной. Поэтому будет супер полезно. Приходите 🙌

Друзья, мы определились с классным местом. Для тех, кто в Москве - встречаемся сегодня в 13:00 в ГЭС-2 😻 Где именно? Перед входом в ГЭС-2 Болотная наб., 15 https://yandex.ru/maps/org/ges_2/216491468916?si=9yy9210je5jjupb3hkk9e3k6tr Предварительно оформите себе билет для входа внутрь. https://ges-2.zapomni.ru/events/fb544f2e-2395-4035-97d6-6a1bf0f7bc4a?date=2026-08-02 (В описании события укажите просто коворкинг) Вход свободный Поговорим про все до чего дойдет тема. - Вайбкодинг. Claude Code. CodeX. - Хакатоны. DS чемпионаты. - Свои пет проекты и монетизация SaaS. - Тренды. Зарплаты. Хобби. Лайхаки.

Друзья, мы определились с классным местом. Для тех, кто в Москве - встречаемся сегодня в 13:00 в ГЭС-2 😻 Где именно? Перед входом в ГЭС-2 Болотная наб., 15 https://yandex.ru/maps/org/ges_2/216491468916?si=9yy9210je5jjupb3hkk9e3k6tr Предварительно оформите себе билет для входа внутрь. https://ges-2.zapomni.ru/events/fb544f2e-2395-4035-97d6-6a1bf0f7bc4a?date=2026-08-02 (В описании события укажите просто коворкинг) Вход свободный Поговорим про все до чего дойдет тема. - Вайбкодинг - Свои пет проекты и монетизация SaaS. - Тренды. Зарплаты. Хобби. Лайхаки.

Друзья, мы определились с местом. Для тех, кто в Москве - встречаемся сегодня в 13:00 в ГЭС-2. Где именно? Перед входом в ГЭС-2 Болотная наб., 15 https://yandex.ru/maps/org/ges_2/216491468916?si=9yy9210je5jjupb3hkk9e3k6tr Предварительно оформите себе билет для входа внутрь. https://ges-2.zapomni.ru/events/fb544f2e-2395-4035-97d6-6a1bf0f7bc4a?date=2026-08-02 (В описании события укажите просто коворкинг) Вход свободный

Сегодня последний день распродажи, успевайте! 🏃

Привет, Чемпионы! 🏆 ⛏ ROGII Wellbore Geology Prediction: шесть дней до финала 💎 Финиш 5 августа, ещё можно успеть. Делимся тем, что накопали. 🧭 Суть задачи проще, чем выглядит Нужно предсказать положение бура в геологическом разрезе на скрытой части скважины. Всё сводится к одному: TVT = поверхность пласта − глубина(Z) Глубина известна точно. Значит предсказывать надо только форму пласта - по сути гладкую кривую с тремя-четырьмя параметрами на скважину. Мелкие колебания достаются бесплатно из траектории, а вся ошибка сидит в общем наклоне и изгибе. ✅ Что сработало • Particle filter со слабым доверием к гамма-каротажу плюс смешивание с независимой второй моделью. Схема почти всех, кто в топе. • Перенос фильтра на GPU - весь ансамбль частиц одним тензором. Ускорение в 14 раз, и перестали ловить таймауты. • Группировка по опорным скважинам (typewell). Их всего 54 на 773 скважины. Внутри группы отсчёт единый, и пласты соседей совпадают с точностью 29 футов против 392 футов между группами. • Измерение собственного шума. Отправьте один и тот же ноутбук дважды! У нас разброс ±0.05. ❌ Что не сработало • Поиск по форме гамма-кривой: DTW, CNN-матчеры, кросс-корреляция. Сигнал почти неотличим от шума. • Больше случайных запусков фильтра: помогает ядру, но до финального ответа не доходит. • Предобучение на своей синтетике: статистика сошлась идеально, перенос на реальные данные развалился. • Умный отбор: понять, где модель ошибётся, не получается. Заметить трудную скважину можно, а угадать знак поправки нет. • Перебор гиперпараметров 🎯 Главный урок Проверяйте улучшение на том же объекте, о котором делаете вывод. Мы несколько раз ловили прирост на отдельном модуле, радовались, а до итогового результата он не доходил. 💡 Что ещё попробовать Использовать соседние скважины не как добавку сверху, а вместо собственного сглаживания. И собрать общий геологический разрез из опорных скважин - они окна одной колонки, а значит связаны сильнее, чем кажется. 🔗 https://kaggle.com/competitions/rogii-wellbore-geology-prediction Кто ещё бурит? Делитесь опытом 👇

Это не шутки, у DS-ов действительно хорошо получается ехать на своих навыках не только обучая и выводя модели в прод. Например, Камиль в прошлом ML инженер, но уже совмещает найм и развитие своих проектов. Камиль был один из первых наших студентов на курсе. Кстати, статистика пока такая. Из первой группы в 7 человек, 3-е добежали до выручки в первые два месяца. Мы считаем это отличным результатом и продолжаем улучшать методологию. Погнали?

Ай, ладно на эти акции Степика на 14% Ловите подгончик от нас Промокод ALERON на 35% на сутки. Как раз успеете обдумать все и начать до 1 августа.

Прочитай это до конца если тебе приелись хакатоны и чемпионаты по Data Science. Привет, это пост я, Алерон, пишу именно для тех, кто давно уже забросил идею соревнований. Да, рано или поздно хобби участвовать в чемпионатах по машинному обучению может уйти на второй план. Я знаю это по своему опыту. Кто-то доходит до заветного титула и бросает. Кто-то бросает еще раньше. Это нормально. Я и мои со-авторы убеждены, что опыт и навыки важнее, чем медали на Kaggle. Да? Соревнования это классный опыт прокачиваться с острым чувством азарта. Медали это всего лишь элемент геймификации. Но это не единственный способ интересно и полезно применять свои технические навыки вне работы. Есть еще кое-что… Если закончили наш курс или давно работает в роли DS, DA, DE или MLE, то у вас вполне достаточно навыков чтобы «поиграть» в другие игры. Игры, где число попыток не ограниченно, а вместо медалей настоящие деньги. И нет!! Мы не про казино (не дай бог), я про запуск своих личных IT проектов и здоровое предпринимательство. Я заметил, что люди, умеющие побеждать в чемпионатах, как правило, хорошо чувствуют себя, конкурируют в технологиях и трафике на рынке IT решений (микро-SaaS и SaaS). Уже год как я ушел из найма из занимаюсь только своими проектам. Так мне удалось сделать неплохой экзит из проекта, а потом запустить еще 2 технологичный SaaS решения. Причем достаточно успешных. Недавно мне даже дали оценку в 60М на 4-й месяц от первого платящего клиента. Как и всегда, я свободно делюсь своими знаниями и лайфхаками с другими в рамках здравого смысла. А недавно я запустил интенсив для технарей, кто регулярно что-то свое пилит, но никогда не хватает сил дотащить проект до оплат/выручки из-не достатка знаний в digital маркетинге. Маркетинг - это действительно бывает непросто. Нас этому не учат в ВУЗе. Поэтому именно на это и будет сделан упор в курсе. Я на примерах своего опыта или друзей соавторов научу находить и быстро проверять идеи, за которые люди хотят платить. И легко расстаются с деньгами. Да еще и остаются благодарны вам за решение. Преврати пет-проект в микро-SaaS с первой выручкой за 3 месяца Кейс моих результативных выпускников можно почитать в @datafeelnig А если вам уже стало интересно, то до конца июня Степик раздал скидухи, забирайте) Тем кому все еще интересен соревновательный DS, то с вами мы продолжим делиться полезными материалами и актуальными чемпионатами.

Прочитай это до конца если тебе приелись хакатоны и чемпионаты по Data Science. Привет, это пост я, Алерон, пишу именно для тех, кто давно уже забросил идею соревнований. Да, рано или поздно хобби участвовать в чемпионатах по машинному обучению может уйти на второй план. Я знаю это по своему опыту. Кто-то доходит до заветного титула и бросает. Кто-то бросает еще раньше. Это нормально. Я и мои со-авторы убеждены, что опыт и навыки важнее, чем медали на Kaggle. Да? Соревнования это классный опыт прокачиваться с острым чувством азарта. Медали это всего лишь элемент геймификации. Но это не единственный способ интересно и полезно применять свои технические навыки вне работы. Есть еще кое-что… Если закончили наш курс или давно работает в роли DS, DA, DE или MLE, то у вас вполне достаточно навыков чтобы «поиграть» в другие игры. Игры, где число попыток не ограниченно, а вместо медалей настоящие деньги. И нет!! Мы не про казино (не дай бог), я про запуск своих личных IT проектов и здоровое предпринимательство. Я заметил, что люди, умеющие побеждать в чемпионатах, как правило, хорошо чувствуют себя, конкурируют в технологиях и трафике на рынке IT решений (микро-SaaS и SaaS). Уже год как я ушел из найма из занимаюсь только своими проектам. Так мне удалось сделать неплохой экзит из проекта, а потом запустить еще 2 технологичный SaaS решения. Причем достаточно успешных. Недавно мне даже дали оценку в 60М на 4-й месяц от первого платящего клиента. Как и всегда, я свободно делюсь своими знаниями и лайфхаками с другими в рамках здравого смысла. А недавно я запустил интенсив для технарей, кто регулярно что-то свое пилит, но никогда не хватает сил дотащить проект до оплат/выручки из-не достатка знаний в digital маркетинге. Маркетинг - это действительно бывает непросто. Нас этому не учат в ВУЗе. Поэтому именно на это и будет сделан упор в курсе. Я на примерах своего опыта или друзей соавторов научу находить и быстро проверять идеи, за которые люди хотят платить. И легко расстаются с деньгами. Да еще и остаются благодарны вам за решение. Преврати пет-проект в микро-SaaS с первой выручкой за 3 месяца Кейс моих результативных выпускников можно почитать в @datafeelnig А если вам уже стало интересно, то до конца июня Степик раздал скидухи, забирайте) Тем кому все еще интересен соревновательный DS, то с вами мы продолжим делиться полезными материалами и актуальными чемпионатами.

Прочитай это до конца если тебе приелись хакатоны и чемпионаты по Data Science. Привет, это пост я, Алерон, пишу именно для тех, кто давно уже забросил идею соревнований. Да, рано или поздно хобби участвовать в чемпионатах по машинному обучению может уйти на второй план. Я знаю это по своему опыту. Кто-то доходит до заветного титула и бросает. Кто-то бросает еще раньше. Это нормально. Я и мои со-авторы убеждены, что опыт и навыки важнее, чем медали на Kaggle. Да? Соревнования это классный опыт прокачиваться с острым чувством азарта. Медали это всего лишь элемент геймификации. Но это не единственный способ интересно и полезно применять свои технические навыки вне работы. Есть еще кое-что… Если закончили наш курс или давно работает в роли DS, DA, DE или MLE, то у вас вполне достаточно навыков чтобы «поиграть» в другие игры. Игры, где число попыток не ограниченно, а вместо медалей настоящие деньги. И нет!! Мы не про казино (не дай бог), я про запуск своих личных IT проектов и здоровое предпринимательство. Я заметил, что люди, умеющие побеждать в чемпионатах, как правило, хорошо чувствуют себя, конкурируют в технологиях и трафике на рынке IT решений (микро-SaaS и SaaS). Уже год как я ушел из найма из занимаюсь только своими проектам. Так мне удалось сделать неплохой экзит из проекта, а потом запустить еще 2 технологичный SaaS решения. Причем достаточно успешных. Недавно мне даже дали оценку в 60М на 4-й месяц от первого платящего клиента. Как и всегда, я свободно делюсь своими знаниями и лайфхаками с другими в рамках здравого смысла. А недавно я запустил интенсив для технарей, кто регулярно что-то свое пилит, но никогда не хватает сил дотащить проект до оплат/выручки из-не достатка знаний в digital маркетинге. Маркетинг - это действительно бывает непросто. Нас этому не учат в ВУЗе. Поэтому именно на это и будет сделан упор в курсе. Я на примерах своего опыта или друзей соавторов научу находить и быстро проверять идеи, за которые люди хотят платить. И легко расстаются с деньгами. Да еще и остаются благодарны вам за решение. Преврати пет-проект в микро-SaaS с первой выручкой за 3 месяца Кейс моих результативных выпускников можно почитать в @datafeelnig А если вам уже стало интересно, то до конца июня Степик раздал скидухи, забирайте) Тем кому все еще интересен соревновательный DS, то с вами мы продолжим делиться полезными материалами и актуальными чемпионатами.