🏆 Data Feeling | AIeron

Давно не рассказывал про марафонцев. На входе в марафон было 5 основных и 3 запасных команд. Сейчас среди активных ~4. Причем 3 из них вот-вот урвут себе медали/призовые или уже что-то урвали. Так вышло, что только пару дней назад к нам пришел в доступ сервак. До этого обходились иными ресурсами. Сейчас же все участники заряжены GPU и CPU ресурсами в приоритет срочности. Однако, одна из команд мне особенно симпатизирует - они сейчас в топе хака Data Fusion от ВТБ. Не буду загадывать, но судя по их задиристости и подъехавшим мощностям - эти ребята заберут себе не меньше двух соток. Моя задача на ближайшие три недели оставшегося времени - не дать им остановиться и забрать вообще весь банк. #Моя_тима_фармит

Я сейчас вам покажу, откуда на модель готовился оверфит. И, если бы за шесть часов до конца окончания итерация не был нанесён превентивный early stopping по катбусту — по всем четырем фолдам. Я сейчас покажу - рандом сид я зафиксировал и принёс — они бы уронили нашу accuracy на привате. Не мы развязали этот лютый стекинг, у нас веса после блендинга чисты и без bias'а. Хорошо, что регуляризировали..

Если я хочу что изучить, просто начинаю это преподавать 😂 Увидел рекламу курса по аб тестированию. Кликнул на банер, а там я и мой коллега. Тут же осознал, что реклама была от онлайн школы, для которой я этот курсец писал почти год назад. Заняло 5 месяцев кропотливой работы и чтение не одного десятков статей. Есть побочка - почти сразу понимаю на собесах, шарит ли человек, который спрашивает у меня вопросы про аб-тестирование. Кстати, сейчас я хочу сильнее углубиться в MLOps - ждите мой курс 😅🔥 #НеРеклама

Взялся в этом семестре вести курс по алгоритмам у иностранной группы студентов в МФТИ. Цель была прокачать технический английский + заодно алгоритмы повторить. Возник неожиданный побочный эффект - студенты очень странно ко мне обращаются. Приятно конечно, но каждый раз ору с этого.

Пару недель назад решились с друзьями на эксперимент - помочь в получении офера мечты. Из присланных вакансий мы отобрали 4-х джунов+, с которыми на прошлой недели отполировали резюме, linkedin и выявили пробелы по хард скилам в режиме собеседования. Далее раскидали резюме по списку открытых вакансий. Логично, что некоторым нашим ребятам сразу же после открытия профиля написали релевантные эйчары ✊ Мы выделили участникам месяц на то, чтобы как следует разогнаться и получить офер мечты в направлении DS. В это время мы - Трекаем их прогресс - Устраиваем тех собесы на английском. - Помогаем в решении присланных тех заданий. На этой недели участники продолжают закрывать пробелы в знаниях и тренирую собеседования на английском. Буду держать в курсе.

Да, мне говорили что pandas медленный, но чтоб настолько! Векторизация дает ускорение в 20 000 раз !! Не пытался ранее оптимизировать скорость, пока pandas не начал обрабатывать результаты больше трех часов на датесете в 30 М строк. Пришлось освоить за эти выходные векторизованную генерации признаков. Техники бывают очень хитрые, но ускорение всегда не меньше чем в 100 раз. Сложнейшим челенджем для меня было написать моду с двумя группировками.

Регрессией и классификацией уже никого не удивишь) Пора прокачиваться в матчинге и рекомендашках!

Три мои статьи про соревновательный анализ данных, которые дали хороший отклик. Забирай! ✅ 8 ошибок, из-за которых ты проиграешь в соревновательном Data Science ✅ 5 грязных трюков в соревновательном Data Science, о которых тебе не расскажут в приличном обществе ✅ Как увеличить точность модели с 80% до 90%+ (мой опыт)

Хм, а давайте сделаем код-ревью. Кидайте в комментарии свои "неудачные" куски кода, вы бы хотели написать изящнее. - Кажется, что можно было лучше - У вас в есть циклы при работе с pandas/numpy и вам кажется, что цикло было никак не избежать - В целом не знаете как реализовать задуманную фичу/логику. В любом случае - кидай код или скрин кода. Посмотрю, напишу статейку с разбором частых затыков кодов и примерами как бы стоило это написать изящнее. За идею спасибо @Veretion

Как я вижу джуновский код, который мне иногда приходиться ревьюить. За циклы в pandas и двор - стреляю в упор. (На фото типичный двор с ЛЭП в Тае, тут много где такая беда с проводами)

😵‍💫 Как я вижу джуновский код, который мне приходится иногда ревьюить. За циклы в pandas и двор - стреляю в упор😅

Одно время практиковал пробуждение в 5 утра. Было сложно, почти месяц продержался и бросил. Однако, желание начинать рабочий день рано осталось. Решил проблему гениально. Улетел в Таиланд🇹🇭. Теперь, просыпаясь утром, у меня есть еще 6 часов до того, как начнётся основная работа. Нашел тут кодаминимум с собственным кабинетом и “5G” интернетом. Вышло 30к рублевых. Московские цены на аренду нервно курят в сторонке. #digital_nomad

Не, ну а мало ли?!?! Преодолеваю свой рекордный по времени 36-часовой перелет через Алматы. Сейчас чилю в лофте в центре до 00:00. Если ты из Алматы, пиши в лс, может кофе/чай повьем вместе. Потрещим за жизнь и DS.

Послушал от знакомых успешные кейсы по оферам. Вдохновился. После ряда собесов получил офферы от $50к/год в сфере DA/DS. Так как сам собеседую джунов+, а мои друзья-физтехи знают, как правильно продать себя зарубежным компаниям, нам захотелось помочь найти работу и другим! Что предлагаю? Хочу взять трех ребят. Проработать позиционирование и CV. Разослать в 50 компаний. Продумать с каждым стратегию и прогнать серию технических собеседований, на ходу подтягивая базу. А после откликов эйчаров помочь с тестовыми. Идея экспериментальная, поэтому готов взять только трех человек. Условия такие: ✔️ Ты ищешь работу с зп в долларах/евро, удаленно или с релокейтом. ✔️ У тебя разговорный английский (строишь простые предложения) ✔️ Ты junior+/middle с опытом работы от года в DS, DE, DA или разработке на C++. ✔️ У тебя есть 300$ (время людей ценно, бесплатно мотивировать людей работать над тобой не смогу) Если хочешь уже через 3-4 недели получить несколько валютных офферов, то заполняй форму. Я с тобой свяжусь

Выходные выходными, но хакатоны сами себя не выиграют. 🚀 Разогнал одну из команд марафона по фармингу в международном хакатончике. Поборолись с гендерным неравенством, за одно урвали немного 💸 🧠 Спарсили данных. Накинули Бертов. Вышли в лидеры🏆. По соотношению призы/время похоже на джуновскую зп. 🏃‍♂️Вышел сейчас в режим, в одни выходные полностью сфокусирован на одной команде. Всего команд 8. 🤔 Не все команды в моем марафоне дойдут до Kaggle-ких медалей, но опыта наберутся точно все, а с кем-то я еще и прям уверен в успехе. Есть очень исполнительные и дерзкие команды, с такими можно стены пробивать! А как проходят ваши выходные?) #Моя_тима_фармит

Сегодня особый день, поэтому делюсь секретным трюком. Трюк № 49 - best random seed Про это мало кто знает, топ-каглеры обычно это всячески скрывают, а разработчики популярных фреймворков нагло отрицают и не подтверждают этого секрета, боясь, что другие будут этим активно пользоваться. Раскрываю секрет. Фишка в рандом сиде! Чтоб ваша модель выдавала самый лучший результат указывайте random seed = 7575. Я провел десятки тысяч симуляций и доказал этот эффект. Результат статистически значимый. Хейтеры начнут спорить, говорить, что это случайность, но мы то с вами знаем, что p-value < 5% нам врать не будет! Все. Тут нет места никаким контраргументам. Эффект не оспорим. Отныне используйте random_seed = 7575 и побеждайте!

Вот вот наступит Апрель, который я проведу в другой стране. (Нет, уже не в Турции). Честно сказать, успел немного насмотреться на отрытые вакансии, поглядел что требуется чаще всего. Поэтому этот месяц будет для меня максимально образовательный. Помимо упора в фарминг Kaggle'a перед до мной стоят цели сильнее прокачаться в MLOps и DE. Мой план: - MLOps от ODS - DE от DataLearn - Еще два курса по MLOps и Dev'у, но тут без ссылки, т.к они платные и пока я не сформировал о них мнения.

Вот вот наступит Апрель. Этот месяц я проведу в другой стране. (Нет, уже не в Турции). Этот месяц будет для меня максимально образовательный.Помимо упора в фарминг Kaggle перед до мной стоят цели сильнее прокачаться в MLOps и DE. Мой план: MLOps от ODS DE от DataLearn

Айфон упорно размечает кусочек мяса в мое тарелке, как человеческое лицо. Вопрос: проблемы были в разметке или Турки что-то мне недоговаривают?!

Я вот думал, почему блогеры свою личку закрывают?! Начал догадываться 🤔 Если уж хотите в личку спросить что-то, то пожалуйста, не надо так со мной 😅🙏