Machine learning Interview

10 первых ошибок в карьере ML-инженера Специалист по машинному обучению (ML-engineer) — это программист, который занимается исследованием, созданием и проектированием систем ИИ. Начинающий ML-инженер должен неплохо разбираться в математике и алгоритмах. В этой статье собраны реальные примеры ошибок, которые чаще всего допускают программисты: https://habr.com/ru/post/718942/ #it #ml #профессии

🧬 Примите участие в международной конференции Data Fusion 2023 от ВТБ, которая пройдёт 13-14 апреля. Конференция будет полезна разработчикам и специалистам в области Data Science, CDO, бизнес-заказчикам DS-продуктов и сервисов, представителям государства и науки. Первый день конференции будет посвящен аспектам управления данными, практикам перехода на доверенные технологии, доступности дата-сетов для ИИ и другим темам, актуальным для CDO и руководителей бизнес-подразделений. Программа 14 апреля адресована data science специалистам и исследователям. Темы докладов и сессий распределены по трем стримам: «ML+», «AI Classic», «ML Environment». На конференции представят новейшие технологии и инструменты, а также будут проведены практические сессии и выступления ведущих предприятий. Не пропустите возможность улучшить свои навыки и расширить свои знания в области Data Science. Участие в конференции бесплатное. Успейте зарегистрироваться по ссылке: https://cnrlink.com/datafusion8

📌 Тестовое задание Purchases Data Analysis Ланит Нужно сделать EDA, найти инсайты в данных, потом построить рекоммендательную систему. Tools in this repository are designed to allow a user to make purchases data analysis, including ABC analysis for inventory categorisation, RFM analysis for customer segmentation. Moreover, underlying relations between different items are identified with the help of association rule mining algorithm. Product recommendations are implemented based on the past purchases using different data science methods, including collaborative filtering. Датасет Тестовый датасет Решение @machinelearning_interview

В @Selectel появились новые конфигурации выделенных серверов с GPU для Machine Learning, инференса и других задач, связанных с обработкой больших данных. Вы можете арендовать одну из готовых конфигураций или собрать собственную: например, с NVMe-дисками, большим объемом памяти, несколькими видеокартами или сетевой картой 10 Гбит/с — под любые требования вашего проекта. На все проекты в аккаунте вы получаете бесплатный безлимитный канал 1 Гбит/c. Серверы по умолчанию соответствуют стандартам 152-ФЗ — российского закона о персональных данных. Вы можете арендовать сервер даже на день, чтобы протестировать все возможности GPU, но при долгосрочной аренде на 3, 6 и 12 месяцев действуют скидки до 15%. Чтобы заказать сервер, достаточно сделать пару кликов в удобной панели — и никакого установочного платежа. Регистрируйтесь по ссылке и заказывайте выделенный сервер c GPU: https://slc.tl/rv1v7 Реклама ООО Селектел Pb3XmBtzt8wKu85LzmozimPnCxi3AYzE3KfNVZi

📝 Physician Partners Test Task In this exercise we are providing you an example of financial data (all numbers are fictional). Deadline is 10 days after you received this test. Task 1 • You need to create an algorithm that can find outliers in this data by one column / several columns. E.g. some members have extremely high costs in the current month and your solution should be able to detect such records • Think about features and how you would explain it to business people • All financial columns contain $ sign Please provide a Jupyter notebook describing your approach as a result of this task. Task 2 Create a web dashboard prototype in Python that allows users to: Create slicers and dicers - Filters by date range / ... - Show data both in table and plotted formats - Use paid_amount column for analysis and other columns for filters Don’t worry about UI and design, just provide very simple functionality You are free to use Flask / FastAPI / plotly / bokeh / etc. Normalize text values in columns. Please, provide your approach to do it in the automatic way as Jupyter notebook. Think about it as you need to update this dashboard monthly and do not have time to normalize values manually Columns: •member_unique_id - member's ID •gender - member's gender •dob - member's date of birth •eligible_year - year •eligible_month - month •affiliation_type - doctor's type •pbp_group - health plan group •plan_name - health plan name •npi - doctor's ID •line_of_business - health plan type •esrd - True if patient is on dialysis •hospice - True if patient is in hospice Please provide this task as a python project. You can send it as a zip archive / Git repository / Docker 🔎 Data @machinelearning_interview

Ищем учеников на бесплатное обучение по созданию искусственного интеллекта с нуля. Опыт программирования не важен!🤖 Всего за 3 вечера под руководством Дмитрия Романова - основателя Университета Искусственного Интеллекта, лидера обучения AI-разработке в РФ, вы с легкостью напишете свой первый искусственный интеллект👨‍💻 Какие нейронные сети вы создадите? ▫️Классификация людей на входящих и выходящих из автобуса ▫️Обнаружение возгораний ▫️Оценка стоимости квартир ▫️Оценка резюме соискателей ▫️Прогнозирование стоимости полиметаллов ▫️Сегментация изображений самолетов ▫️Распознавание команд умного дома⠀ Лучше освоить навыки создания нейронных сетей вам помогут домашние задания с проверкой от кураторов.⠀ Приходите на бесплатное обучение и напишите искусственный интеллект за 3 вечера💪 Регистрация по ссылке

13 Инструкций SQL для решения 90% ваших задач по обработке данных Независимо от того, являетесь ли вы новичком в SQL или имеете некоторый опыт работы с ним, эта статья предоставит вам ценную информацию для подготовки к интервью и практические советы по работе с данными . ▪ Статья @machinelearning_interview

Эксперты Sber Al оценят знания более 100 школьников, которые вышли в финал Национальной технологической олимпиады по искусственному интеллекту. Финал стартовал накануне 27 февраля и закончится 3 марта. За первое место будут бороться более 100 школьников из 27 регионов России и Казахстана. Изначально желание учувствовать в Олимпиаде по ИИ заявили 6150 школьников из России, Белоруссии, Индии, Казахстана, Киргизии, Молдавии, Таджикистана и Узбекистана. В финальном испытании, подготовленном Sber AI, ребятам предстоит разработать алгоритм, который анализирует видео и отвечает на вопросы по его содержанию. По результатам профильного тура команды-победители пригласят на оплачиваемую стажировку в Сбер и компании-партнеры по направлению «Машинное обучение». Призовой фонд Олимпиады 4 млн рублей.

💨 Тестовое задание на позицию Data Scientist Wargaming Задание «Обменные курсы» У игроков Кореи существует возможность покупать внутри-игровую валюту (gold) с помощью веб-интерфейса (премиум-магазина). При этом в магазине представлено лишь 6 типов пакетов с внутри-игровой валютой, различающихся по количеству gold. Типы пакетов (packages) и их реальная стоимость (в корейских вонах) для игроков представлена в таблице ниже Package Price, KRW 1250 gold 7485 KRW 2900 gold 17365 KRW 7000 gold 36270 KRW 12000 gold 60000 KRW 21500 gold 98625 KRW 30000 gold 132745 KRW Со временем было принято решения о расширении функционала премиум-магазина: было решено добавить возможность покупки пакета с любым количеством gold. При этом было построено правило перевода gold в реальные деньги (корейские воны), которое описано в таблице ниже Gold Amount Exchange Rate Amount ≤ 2900 gold 0,167 gold per 1 KRW 2900 gold < Amount ≤ 7000 gold 0,193 gold per 1 KRW 7000 gold < Amount ≤ 12000 gold 0,2 gold per 1 KRW 12000 gold < Amount ≤ 21500 gold 0,218 gold per 1 KRW Amount > 21500 gold 0,226 gold per 1 KRW То есть, пакеты с количеством внутри-игровой валюты, не превышающие 2900 gold, оцениваются согласно соотношению 0,167 gold за 1 корейский вон. Затем было принято решение о введении возможности пополнения аккаунта игрока реальными деньгами, при котором сумма пополнения в корейских вонах переводилась бы в эквивалентную сумму в gold, согласно описанному выше правилу. Необходимо формализовать и придумать непрерывную функцию, которая записывалась бы в виде формулы (без if, поскольку технические средства не умеют выполнять данную операцию, где предполагалось использовать полученное решение), описанное выше правило таким образом, чтобы после двух нововведений сохранилась описанная выше ценовая политика, но при этом была возможность как покупать любое количество gold, так и пополнять аккаунт любым количеством денег (корейских вон). Решение @machinelearning_interview

🔥 Загляните вглубь алгоритма k Nearest Neighbours и попробуйте его на практике! 1 марта в 18:00 мск пройдет вебинар в рамках онлайн-курса «Machine Learning. Professional» в OTUS. Тема урока: «Мы похожи на свое окружение: алгоритм k Nearest Neighbours для задачи классификации» — https://otus.pw/yDZG/ ✅ На занятии мы поговорим о задаче классификации, крайне востребованном классе задач в области ML сегодня. Мы изучим алгоритм kNN для ее решения, а затем применим его на практике. В результате урока мы: - Познакомимся с популярным алгоритмом машинного обучения kNN - Узнаем, как устроен алгоритм kNN - Освоим принципы решения задачи классификации с помощью kNN ⚠️ Урок будет полезен IT-специалистам, которые хотят освоить продвинутые методы ML и перейти в Data Science. Продолжить обучение на курсе возможно в рассрочку. 👉 Пройдите вступительный тест для участия в вебинаре https://otus.pw/yDZG/ Реклама. Информация о рекламодателе на сайте otus.ru

❓Как развернуть технологии машинного перевода на своём проекте? Ответ на этот вопрос вы найдёте в новой статье Андрея Соколова из команды прикладных исследований ВКонтакте. Там он подробно рассказал о процессе разработки переводчика для постов и сообщений в мессенджере. Материал написан максимально понятным языком и его смело можно использовать как гайд для развёртывания технологии в своих проектах. Обещаем: после прочтения вы поймёте, что сделать собственный переводчик – реально. Это не требует гигантских трудозатрат, а качество на выходе может получиться намного лучше, чем у готовых сторонних продуктов. @machinelearning_interview

🖥 Эта задача взята с Avito Weekend Offer для аналитиков Вам дан набор чисел в виде списка Python. Необходимо найти медиану этого числового ряда. Задание Напишите функцию FindMedian, которая будет возвращать одно число - медианное значение. Функция FindMedian принимает на вход arr - исходный список с числами. Пример: arr = [1, 5, 2, 3, 6] Ответ: 3 Пример: arr = [100, 5, 2, 4, 3, 6] Ответ: 4.5 Примечание: Если в выборке четное число элементов, то за медиану нужно взять среднее между центральными элементами (после упорядочивания). Дополнительная информация Обратите внимание, что шаблон решения представлен в виде (на примере языка Python): class Answer: def function(self, arg1, arg2): # напишите свой код ниже return res Здесь function - функция, которую вам нужно написать (от задачи к задаче ее имя меняется), а arg1, arg2 - аргументы этой функции. Чтобы решить задачу, напишите свой код между комментарием и выражением return .... print(Answer().function(arg1, arg2)) Если вам нужно импортировать какой-то модуль, указывайте модуль до class Answer. Например: import mymodule class Answer: ... Полный пример: # импортируем модуль import collections class Answer: def problemSolve(self, n, m): # напишите свой код ниже ... return res # промежуточно смотрим результат print(Answer().problemSolve(n=2, m=3)) Пишите свое решение в комментариях👇 @machinelearning_interview

⚠️Пройдите тест на углубленные знания в сфере Machine Learning. Professional — https://otus.pw/DAYk/ 🔓 Ответьте на 10 вопросов и проверьте, насколько вы готовы к обучению на продвинутом курсе «Machine Learning. Professional» от OTUS и его партнера — Сбера ⏰ Время прохождения теста ограничено 30 минут 📌 РЕЗУЛЬТАТ ПРОХОЖДЕНИЯ КУРСА: Серьезное портфолио с проектами и возможность претендовать на Junior+ и Middle позиции Data Scientist Протестируйте обучение на открытом уроке: ✅ Мы похожи на свое окружение: алгоритм k Nearest Neighbours для задачи классификации — https://otus.pw/88RV/ 👉 ПРОЙТИ ТЕСТ: https://otus.pw/DAYk/

🎲 Задачи по теореме Байеса Рост экономики. Компания ожидает, что вероятность подъема экономики — 5 %, а вероятность роста выручки компании вследствие подъема экономики — 90 %. Если экономика не поднимется, то выручка компании вырастет с вероятностью 40 %. Каковая вероятность того, что экономика поднялась, если выручка компании выросла? Решение Пусть ПЭ — подъем экономики, РВ — рост выручки. Находим: • Р(ПЭ | РВ) =Р(РВ | ПЭ) -Р(ПЭ) / Р(РВ); • Р(ПЭ) = 0,05; • Р(РВ | ПЭ) = 0,90; • Р(РВ) = 0,05 • 0,90 + 0,95 • 0,40 = 0,425; • Р(ПЭ | РВ) = (0,90 • 0,05) / 0,425 = 0,106. Если выручка компании выросла, то вероятность того, что экономика поднялась, равна 10,6 %. @machinelearning_interview

🤖 С 20 февраля по 7 марта пройдёт онлайн-буткемп "Second step in NLP" Перед Новым годом онлайн-магистратура «Машинное обучение и высоконагруженные системы» провела базовый буткемп по автоматическому анализу текстов. А теперь приглашает вас сделать следующий шаг в изучении Natural Language Processing :) ✅ Что будет? - 3 лекции — погружение в NLP + практика; - 2 домашних задания; - 2 Q&A сессии с разбором вопросов участников; - соревнование на Kaggle: предсказание зарплаты соискателей по описанию вакансии; - разбор лучших решений; - электронные именные сертификаты за прохождение курса. ✅ Для кого? Для слушателей, знакомых с основными алгоритмами машинного обучения, в частности, с классическими подходами для работы с текстовыми данными. ✅ Начальные требования: - знание основных алгоритмов ML - знание python на пользовательском уровне ✅ Когда? С 20 февраля по 7 марта 👉 Подробности и регистрация.

MLOps в облаке: как работать над ML-экспериментами с помощью MLflow Александр Волынский (Product Manager ML Platform в VK Cloud) и Сергей Артюхин (преподаватель программы «Симулятор ML» в Karpov Courses) написали статью, где показали последовательность действий по выстраиванию MLOps-подхода, который в последнее время заметно меняет подходы к работе ML-специалистов. Что в статье? ▪️ Инструменты для решения задач MLOps: JupyterHub и MLflow. ▪️ Запуск трекинга MLflow. ▪️ Как настроить MLflow, чтобы обращаться к нему через API. @machinelearning_interview

​Коллеги, приглашаем вас на вебинар Обезличивание данных «под ключ»: просто, быстро, с AI, который состоится 16 февраля в 11:00 (МСК). Надежность испытаний новых функций ПО зависит от близости условий проверки к реальным. При этом бизнесу нельзя использовать данные клиентов as is для тестов. Законы обязывают компании анонимизировать персональные данные, а это процесс трудоёмкий. Сфера.Обезличивание данных защищает критически важную информацию пользователей и приложений, обезличивая чувствительные данные с использованием Искусственного интеллекта. Инструмент делает процесс обезличивания лёгким и доступным даже для сотрудников без специальной технический квалификации. На вебинаре мы: - расскажем про актуальность обезличивания для генерации качественных тестовых данных; - обсудим основные проблемы подготовки обезличенных данных и подходы к их решениям; - представим вам Сфера.Обезличивание данных - готовое коробочное решение для создания обезличенных данных “под ключ”; - обезличим данные в прямом эфире! - расскажем об эффектах применения инструмента для вашего бизнеса. Регистрируйтесь на вебинар по ссылке https://clck.ru/33YR65 и не упустите возможность задать все свои вопросы владельцу продукта в прямом эфире. Держите руку на пульсе тенденций в области работы с персональными данными.

SberMarket тестовое задание: Predict the user's next order Overview Сервисы доставки еды уже давно перестали быть просто курьерами, которые привозят заказ. Индустрия e-grocery стремительно идет к аккумулированию и использованию больших данных, чтобы знать о своих пользователях больше и предоставлять более качественные и персонализированные услуги. Одним из шагов к такой персонализации может быть разработка модели, которая понимает привычки и нужды пользователя, и, к примеру, может угадать, что и когда пользователь захочет заказать в следующий раз. Такая модель, будучи разработанной, может принести значительную ценность для клиента - сэкономить время при сборке корзины, помочь ничего не забыть в заказе, убрать необходимость планировать закупки и следить за заканчивающимися запасами продуктов. В данном соревновании участникам предлагается решить задачу предсказания следующего заказа пользователя (безотносительно конкретного момента времени, когда этот заказ произойдет). Заказ пользователя состоит из списка уникальных категорий товаров, вне зависимости от того, сколько продуктов каждой категории он взял. Data Description В качестве тренировочных данных представляется датасет с историей заказов 20000 пользователей вплоть до даты отсечки, которая разделяет тренировочные и тестовые данные по времени. train.csv: ▪user_id - уникальный id пользователя ▪order_completed_at - дата заказа ▪cart - список уникальных категорий (category_id), из которых состоял заказ В качестве прогноза необходимо для каждой пары пользователь-категория из примера сабмита вернуть 1, если категория будет присутствовать в следующем заказе пользователя, или 0 в ином случае. Список категорий для каждого пользователя примере сабмита - это все категории, которые он когда-либо заказывал. sample_submission.csv: Пример сабмита. В тест входят не все пользователи из тренировочных данных, так как некоторые из них так ничего и не заказали после даты отсечки. submission.csv ▪id - идентификатор строки - состоит из user_id и category_id, разделенных точкой с запятой: f'{user_id};{category_id}'. Из-за особенностей проверяющей системы Kaggle InClass, использовать колонки user_id, category_id в качестве индекса отдельно невозможно ▪target - 1 или 0 - будет ли данная категория присутствовать в следующем заказе пользователя @machinelearning_interview