🏆 Data Feeling | AIeron

Как закончилась Роснефть?) Как итог, во втором треки обеими командами мы потерпели фиаско =) 🤔 Прогнозирование временных рядов это дело, оказалось, не простым. Сама по себе задача интересная, но временные ряды в этот раз не подались. Финишировали ~ топ-7 и после упали до топ-11. В целом - задача мне понравилась, но разгадали какие-то киллер фичи. 🔥 Парадоксально для меня было то, что лучшее решение с катбустом требовало сильно меньше итераций, чем этого требовала локальная валидация. Это мы заметили случайно. Пример: модель, обученную на 10 итерация с плохим локальным скором переплюнула на лидерборде модель обученную в 500 итераций с лучшим локальным скором. 🧠 Извлек урок. Возможно, для успеха в соревнованиях по временным рядам, особенно с шумные данные, хорошо заходит сильная регуляризация и умная фильтрация фичей (например permutation importance). Радует, что хотя бы из первого трека унесем немного призовых.

Такс, ну все. Я снова в Таиланде. Чтоб попасть на Пхукет и не разориться на билетах пришлось посетить 4 страны за сутки. Успел за пару дней качественно обосноваться. Заселился в апарты (18к), снял байк (5к), купил симку(0.6к). Теперь готов снова пилить контент и двигаться к титулу Kaggle мастера. Ожидается, что проведу в Тае ~ год по языковой визе. Поэтому сразу же написал TODO лист дел на год. Планирую подготовиться тут к IELTS, пока хожу в языковую школу. Уже даже записался в спец. группу. Боже, как же я мечтал однажды приехать на острова чисто ради языковой практики 😍 Тут на острове сейчас просто толпы русских IT-ников. По ощущениям, каждый третий говорит по-русски. Каждый из них что-то мутит с криптой. В общем, вам теперь иногда придется любоваться местными красотами:) Не все же время мне только кодить 👨‍💻

Квартира в центре Отчаялся искать, а сроки горят, поэтому пользуясь своим положением хочу оперативно найти жильцов в квартиру на м. Октябрьская, в которой прожил с кайфом все лето. Коротко: На полгода-год сдается оборудованная для комфортного проживания уютная однокомнатная квартира с хорошим ремонтом, расположенная в 1 минуте от метро Октябрьская (!). Балкон с приятным видом на Москву-Сити. 9 этаж. Свое парковочное место. Есть шлагбаум. Идеально для любителей гулять по парку Горького. В комнате имеются: ✅ Широкая 2-х спальная кровать ✅ Большой мягкий 2-х спальный диван ✅ Кухня / Сан.узел ✅ Холодильник, стиралка, мультиварка, микроволновка. ✅ Большой шкаф ✅ Компьютерное кресло ✅ Два больших торшера ( фармить по ночам с романтикой) По оплате: 💵 Аренда + коммуналка = 46к / месяц Писать в лс: @Aleron75 БЕЗ КОМИССИИ И ЗАЛОГА

Обычно не люблю такое выкладывать, но недавно задумался . Вот создал я группу с кучей HR-ов, а как вообще понять, что они нормально закрывает потребность в поиске?! 🤔 Оказывается, работает! (не реклама) Второй абзац про жену меня улыбнул) Не каждый знает про такой лайф-хак

Опача! Шейкап и мы в топ-5 Еще прикол, что на третьем месте команда Дзиса. Надо будет с ним теперь призовые поделить за идет)

Начинающий Алерончик входит в Data Science. Картина маслом. Скрин от подписчика

Если бы мне было меньше 20-ти, то я бы точно потратил месяц лета на изучение метод слепой печати (в обоих языках). В общем, решили по фану с Настей снять видос про технику слепую печати. Некоторые люди не из IT искренне удивляются моему навыку набирать текст с закрытыми глазами, хотя я уже давно привык к нему и не считаю его редким. Однако, для меня этот скилл хороший маркер опыта. На 1-м курсе магистратуры я выбирал биоинформатическию лабу для написания диплома. Тогда мне очень хотелось освоить крутые фишечки из этой сферы. Так вот в одной из тех лаб, заметил, как мой потенциальный научрук набирает текст всего лишь двумя указательными пальцами и не отводит взгляда от клавиатуры. При этом он обещал меня научить всем техническим штукам. Меня это очень сильно смутило и я там не остался. Кто-то меня осудит за предвзятость, мол это не важно, но вот только мои одногруппники после той лабы так ничего толкового и не опубликовали. Совпадение? В общем, скоро прикольные видосик выпущу. Ловите фрагмент. На нем я после удаления зуба мудрости, поэтому немного странно говорю.

Как некоторые уже поняли, это мы с тимой из Redmadrobot пытаемся рамсить на поприще нефтянки. Задача: предсказывать время поломок на скважинах. Данные: 100 гигов временных рядов. Докерное соревнование, приходится ждать результатов по 2 часа. Как всегда кидаю сюда скрин за сутки до соревнования. Вдруг выиграем?! Тогда вы хоть увидите как мы это сделали) В любом случае, после я расскажу вам полезные лайф-хаки по увеличению скора. Временные ряды решаю не так часто, поэтому как назло, лучшие идеи приходят под конец соревнования. Кстати, соревнование двух-этапное. Если сейчас 150к не заберем, то потом поборемся сразу за 300к. Отберут первые 15 команд. Пока мы проходим. Если выиграем купим себе новую карточку на сервак.

Потерял доступ к своему You-Tube каналу В августе был небольшой кипишь, а именно МФТИ попал под санкции. Как итог - Google отозвал доступы к почтам. Физтеховский домен @phystech.edu перешел на сервера Яндекса. До окончательной блокировки почт - я успел везде сменить свою почту на альтернативные. (В первую очередь начал конечно с же с Kaggle и Github). Спустя неделю после блокировки решил залить новый видосик на ютуб для своей любимой аудитории и тут понял, что доступа то теперь у меня нет! Почту басурманскую на яндексоидную я сменить не сменил. И восстановить не получается... Все сообщения в поддержку уходят в небытие юродивое, летят куда-то за океан и не возвращаются. В общем, сейчас в мыслях еще немного попрокрастинировать этот вопрос, и если решений не найдётся, то буду новый канал заводить. Ибо материал копится. Суета сетная в мире святого Data Science сама себя не наведет, Никто кроме Алерончика парням не расскажет как фармить, да собесы проходить. Если вдруг сталкивались с таким, то накидайте советов, иначе вам же потом на мой второй канал подписываться)

Эх, желание суету навести! Или хотя бы написать статью про skill-set соревновательного DS🤔 А то меня постоянно спрашивают, что надо уметь?! Вот вы сами, что думаете? Какие конкретные скилы помогает улучшить скор в соревнованиях? Когда выкачу статью - вы удивитесь, но скилов требуется много. Фото чисто для привлечения внимания. Нейронки в моем телефоне уже с 2019 года что-то про меня знают. Фото чи

Потерял YouTube канал.

Когда мы с Настей (@a_voitseshko) затеяли провести этот ламповой и неформальный мини эвентик, мы думали, что будет недобор девушек, но как же мы ошибались

Когда мы с Настей (@a_voitseshko) затеяли провести этот ламповой и неформальный мини эвентик, мы думали, что будет недобор девушек, но как же мы ошибались

Мало кто слышал про сегментацию временных рядов. Задача не тривиальная, но когда твои временные рядочки вдруг аккуратно разбиваются по сегментам испытываешь кайф в чистом виде.

Есть в моей карьере темное пятно, которое я обычно не раскрываю без необходимости. Работал в неплохой компании, где хорошо платили и мало требовали. Можно было сделать все свои задачи за несколько часов и оставшееся время заниматься изучением курсов, фармингом и прочим. Основная DS задача, которую мне приходилось решать в том месте - прогнозирование спроса. Задача понятная. Не первый раз решаемая. При достаточной сноровке решается быстро, лишь бы под рукой были готовые SQL-запросы нужные данные. Так вот, почему я не долго там пробыл?! Мне быстро стало скучно. И вот какие были предпосылки: Несколько раз, когда мы представляли начальнику отвалидированные прогнозы ML модели, начальник каждый раз смотрел на графики прогнозов и говорил что-то типо: "Так, тут у вас прирост спроса в следующем месяце будет 5%, но мне кажется так много не будет, давайте поставим 3%". По итогу таких встреч мы почти полностью исправляли цифры в отчете и заменяли data-driven результаты на from my boss's head driven результаты. На валидации такой подход показывал метрики чуть хуже, но зато работал без обучения и прогнозировал моментально.

Пирсон не ловит линейные зависимости! Все знают, чтоб проверить линейную корреляцию между двумя переменными можно взять коэффициент корреляции Пирсона. Но что делать, если надо поймать что-то не линейное? Не так давно узнал, про Phik корреляцию. Посмотрите как Phik ловит сложные зависимости, где Пирсон теряется. При генерации признаков такой подход позволяет не отсеивать более сложные зависимости.

Идем дальше! Пока обычные люди активно паниковали и уезжали, мы с Дашей активно паниковали и писали для вас курсец. Мы собрали основные приемы, которые помогают успешнее искать работу. Курс проведет вас "за ручку" через весь путь от подготовки резюме до получения оффера. Мы только что опубликовали курс, но еще его не тестировали на других людях. У вас есть возможность пройти этот курс в первых рядах до основного релиза. Для этого напишите в комменты почему этот курс нужен именно вам! Авторы 10 самых релевантных ответов получат автомобиль доступ к курсу со скидкой 91% (Меньше чисто технически сделать нельзя) Ссылка на курс

Идем дельше.