Математика Дата саентиста

🔝 Вступительный экзамен МГУ биофак 1975 год - Задача по планиметрии 📌 источник @data_math

Word2Vec — классика векторных представлений слов для решения задач текстовой обработки Приглашаем на практический эфир с  преподавателем ВШЭ Марией Тихоновой ✅ Изучение и практика: Векторные представления слов; алгоритм word2vec Урок посвящен курсу «Machine Learning. Professional» по окончанию которого вы сможете претендовать на Junior+ и Middle позиции Data Scientist 👇 Регистрация на урок:  https://otus.pw/Yx8i/?erid=LjN8KRvsZ #реклама О рекламодателе

🔍 Мини-шпаргалка по техникам регуляризации в машинном обучении @data_math

DBT – мессия, блажь или реальность дата-инженера? 8 октября приглашаем вас на бесплатный вебинар от учебного центра Слёрм! Встретимся с опытными специалистами из мира big data, чтобы обсудить: 👉 Как управлять жизненным циклом данных в мире победившего Modern Data Stack? 👉 Могут ли современные инструменты преобразить процесс Data Governance и сделать его простым и быстрым? 👉 Как разные компании и команды применяют dbt для решения задач Data Governance? Эксперты встречи: — Евгений Ермаков, руководитель платформы данных Tоlоkа.аi — Николай Марков, Data Platform Lead в Altenar, спикер курсов Слёрма и ментор проекта «Где дата, Коль?» ⭐️ Когда: 8 октября в 19:00 мск ⭐️ Занять место на вебинаре — через бота.

Вступительный экзамен по алгебре в MiT в 1869 году

🌟 Пространственно-временное прогнозирование с помощью Байесовских нейронных полей. Байесовские нейронные поля (Bayes NF) - метод масштабируемого пространственно-временного прогнозирования, объединяющий архитектуру глубокой нейронной сети моделирования функций с иерархическим Байесовским моделированием для точной оценки неопределенности в сложных пространственно-временных полях. Bayes NF строятся на основе Байесовской нейронной сети, отображающей многомерные пространственно-временные координаты в действительное поле. Для получения высокой априорной вероятности для данных как с низко-, так и с высокочастотными вариациями, к исходным данным о времени и положении, подающимся в сеть, добавляются признаки Фурье, а чтобы учитывать априорные неопределенности, параметры сети получают априорное распределение. Апостериорный вывод осуществляется с помощью стохастических ансамблей оценки максимального апостериори (MAP) или вариационно обученных суррогатов. Метод Bayes NF относительно прост, он может обрабатывать пропущенные данные и обучаться по полному распределению вероятностей для произвольных пространственно-временных индексов. Bayes NF универсален и применим к различным наборам данных без необходимости разработки новой модели для каждого случая или применения специфических для набора данных аппроксимаций вывода. ⚠️ Для локального запуска BayesNF на средних и больших объемах данных требуется GPU. ▶️ Практические туториалы с возможностью запуска на Google Coolab: 🟢анализ на основе пространственно-временного набора данных из 20 временных рядов еженедельных случаев заболевания ветряной оспой в Венгрии в период с 2005 по 2015 гг. Блокнот; 🟢анализ данных из об уровне загрязнения воздуха, измеряемом датчиками по всему Лондону каждый час. Блокнот. ▶️Локальная установка:

# Install bayesnf from PIP into venv:
$ python -m venv pyenv
$ source pyenv/bin/activate
$ python -m pip install -U bayesnf

# Install dependencies for Python 3.10
$ python -m pip install -r requirements.Python3.10.14.txt

📌Лицензирование : Apache 2.0 License. 🟡Документация 🟡Arxiv 🖥GitHub @ai_machinelearning_big_data #AI #ML #Predictions #BAYESNF

Учитесь в универе и давно хотите попробовать свои силы в решении реальных кейсов по машинному обучению и нейросетям? Международные олимпиады — отличный способ проверить свои знания и выйти на новый уровень! Одна из таких олимпиад — AIDAO от Яндекса и НИУ ВШЭ. Участникам предстоит решать IT-задачи в команде из 2-3 человек, а победители получат денежные призы до 600 тысяч рублей! Выполнять задания олимпиады нужно на английском, но разрешено пользоваться переводчиком. Если у вас нет команды, то вам помогут её найти во время регистрации. Чтобы принять участие, надо: - быть студентом бакалавриата или магистратуры в российском или зарубежном вузе; - разбираться в ML, алгоритмах и работе с данными; - подать заявку на сайте до 5 октября. Не упустите шанс применить свои навыки на практике и посоревноваться со студентами со всего мира!

📄 Неплохие лекции, Computational Optimization024 Основы линейного программирования и моделирования https://youtube.com/playlist?list=PLYWmzh0Y6EOavVCgWe90eOF3DJEao_jPz Основы смешанного целочисленного программирования https://youtube.com/playlist?list=PLYWmzh0Y6EOa9vXANLOvcDOCXXJitlitP @data_math

📄 Парадоксы теории вероятностей Курс лекций ВМК МГУ. Ульянов В.В. 📌 источник @data_math

Авито ищет опытных специалистов в Data Science Если вы готовы решать реальные задачи с помощью ML-моделей полного цикла,, то это точно ваш шанс. В команде Авито вы сможете строить точные прогнозы, оптимизировать процессы и создавать инструменты, которые влияют на миллионы пользователей. Присоединяйтесь к сильному комьюнити дата-сайентистов всего в три шага: 1. Подайте заявку до 1 октября 2. Решите тест 3. Пройдите интервью 5-6 октября Откликайтесь и забирайте оффер!

Новостной дайджест ✔️ Cloudflare позволит сайтам взимать плату с AI-ботов за скрапинг. В следующем году Cloudflare планирует запустить торговую площадку, на которой владельцы веб-сайтов смогут продавать разработчикам моделей ИИ доступ к своему контенту для обучения. Это решение является частью стратегии компании, направленной на предоставление владельцам сайтов большего контроля над ИИ-ботами. Новая торговая площадка предложит различные варианты оплаты: от фиксированной платы до модели, основанной на количестве запросов. Многие разработчики ИИ используют контент небольших веб-сайтов без соответствующей компенсации, что негативно отражается на бизнес-моделях этих сайтов, а также приводит к увеличению нагрузки на серверы и росту расходов. techcrunch.com ✔️ AnySkin - универсальный сменный тактильный датчик для роботов. AnySkin - это новый сенсорный датчик для роботов, который легко собирается, совместим с различными манипуляторами и может быть использован на разных типах поверхностей. Датчик работает за счет измерения искажений магнитного поля, создаваемого намагниченными железными частицами на сенсорной поверхности. Благодаря гибкой и легко заменяемой конструкции AnySkin решает проблему долговечности и универсальности, которая долгое время препятствовала развитию эффективных тактильных сенсоров для роботов. any-skin.github.io ✔️ В Китае открылась первая в мире больница с AI - врачами. «Agent Hospital» - детище Tsinghua University открылся в Пекине. В клинике "работают" 14 ИИ-врачей и 4 виртуальные медсестры. Agent Hospital может обслуживать 10 000 пациентов всего за несколько дней, в то время как у врачей-людей на это ушло бы до двух лет. Интеграция ИИ в медицинское обслуживание должна повысить доступность, скорость и оперативность реагирования на потребности пациентов. С ростом спроса на медицинские услуги и увеличением нагрузки на медицинских работников, решения по типу такой клиники может снизить нагрузку на врачей и медсестер, предоставляя при этом быстрый и точный уход за пациентами. thedailycpec.com ✔️ Intel Gaudi 3 выйдет на следующей неделе. Intel готовится выпустить на следующей неделе свой новый ИИ-ускоритель Gaudi 3, который, по заявлению компании, превосходит по энергоэффективности своего предшественника более чем в два раза и способен запускать ИИ-модели в 1,5 раза быстрее, чем GPU Nvidia H100. Ускоритель был протестирован на Llama от Meta и Falcon от TII, и продемонстрировал способность эффективно обучать и развертывать языковые и мультимодальные модели. В 2025 году Intel планирует выпустить Falcon Shores – преемника Gaudi 3, который объединит ИИ-возможности Gaudi с мощными GPU Intel в одном корпусе. analyticsindiamag.com ✔️ В Калифорнии принят закон, защищающий наследие умерших артистов. Сенат Калифорнии принял законопроект №1836, который запрещает использование "цифровых копий" умерших артистов без согласия их наследников. Закон распространяется на фильмы, телепередачи, видеоигры, аудиокниги, звукозаписи и другие медиа. Эта инициатива стала результатом протестов профсоюза актеров SAG-AFTRA против использования ИИ без контроля со стороны артистов. Закон определяет «цифровую копию» как созданное компьютером, очень реалистичное электронное медиа, которое легко идентифицируется как голос или образ человека. Новая правовая мера направлена на то, чтобы помочь наследникам умерших артистов контролировать использование их наследия. Ожидается, что закон в ближайшее время подпишет губернатор Гэвин Ньюсом. miamarket.it @ai_machinelearning_big_data #news #ai #ml

Освойте аналитику данных, обучаясь на кейсах из реального бизнеса *️⃣ Вы будете не просто изучать аналитику — вы будете решать рабочие задачи, что равноценно прохождению стажировки начинающим аналитиком. 👆Подбираем персональный трек обучения под ваши задачи — устроиться в крупную IT-компанию или релоцироваться. А также помогаем с прохождением собеседований. 👆87% учеников за 2 месяца находят работу. Наши выпускники работают в Тинькофф, Авито, Яндекс, Skyeng, Магнит, Сбер, Ozon, Альфабанк и др. компаниях. По итогам курса вы сформируете собственное портфолио. Такого не будет ни у кого больше. Уникальное оформление, максимально прикладные задачи из разных сфер бизнеса. Их невозможно сгуглить или найти разбор на Хабре. Обучайтесь в комфортном темпе: доступ к материалам останется у вас навсегда. Вы еще успеваете начать обучение с текущим потоком🔥 Оставляйте заявку на сайте и получите 10% скидку по промокоду MATH

⚡️ internlm2-math-7b: Модель для решения математических задач, InternLM-Math, продемонстрировала гораздо большую эффективность по сравнению с ChatGPT при выполнении задач по математике. Эта нейросеть умеет находить решения самых сложных уравнений, подробно объясняя ход своих рассуждений, и даже может доказывать теоремы с обоснованием. Однако важно отметить, что она работает только на английском языке. Для получения дополнительной информации перейдите по ссылке. Ссылка.

Как применять нейросети в обучении с подкреплением? Расскажет Игорь Стурейко, преподаватель курса Reinforcement Learning в OTUS на открытом уроке.  ✅Вместе с опытным экспертом вы: - разберете ситуацию, в которой использование классических методов обучения с подкреплением не дают результатов;  - поймете почему необходимо использовать нейросети; - узнаете как адаптировать классический алгоритм Q-learning для использования нейросетей. ⚡Занятие пройдёт 26 сентября в 20:00 мск и будет приурочено к старту курса «Reinforcement Learning».  👉Регистрация https://otus.pw/v7CB/?erid=LjN8JvJ5V Обучение на курсе позволит применять алгоритмы RL для решения разнообразных задач в реальном мире, включая игровую индустрию, робототехнику, управление энергетическими системами и управление финансовым портфелем. При поступлении в группу возможны разные способы оплаты и рассрочка платежа.

⚡️ Qwen2.5 Family: Релиз Qwen2.5, Qwen2.5-Coder и Qwen2.5-Math. Команда разработки Qwen (Alibaba Group) опубликовала большой релиз нового поколения моделей - Qwen2.5, специализированные модели: Qwen2.5-Coder, Qwen2.5-Math, их инструктивные и квантованные версии, анонсированы закрытые Qwen-Plus и Qwen-Turbo. Вместе с релизом нового поколения 2.5 в отрытый доступ опубликована Qwen2-VL-72B-Instruct предыдущего поколения. ▶️ Qwen2.5 В дополнение к традиционным вариантам с 0,5-1,5-7-72 млрд параметров, Qwen2.5 предлагает две новые модели среднего размера 14 млрд и 32 млрд параметров и компактную модель 3 млрд параметров. Qwen2.5 обучались на увеличенном и улучшенном наборе данных размером в 18 трлн токенов. Значительно расширены знания моделей: возможности в области программирования, усовершенствованы математические способности Qwen2.5, повышено соответствие ответов модели предпочтениям человека: следование инструкциям, генерация длинных текстов (до 8 тыс. токенов), понимание структурированных данных и генерация структурированных выводов (в частности, JSON). Список моделей: 🟢Qwen2.5: 0.5B, 1.5B, 3B, 7B, 14B, 32B, 72B; 🟢Qwen2.5-Instruct: 0.5B, 1.5B, 3B, 7B, 14B, 32B, 72B; 🟢Qwen2.5-Instruct: все варианты в форматах GPTQ, AWQ, GGUF. В дополнение к этим моделям открыт доступ по API для флагманских моделей: Qwen-Plus и Qwen-Turbo через Model Studio. ▶️ Qwen2.5 Coder Qwen2.5-Coder доступна в трех размерах: 1,5 млрд, 7 млрд и 32 млрд параметров (последняя появится в ближайшее время). Обновление состоит из двух основных улучшений: больше объем обучающих данных и расширение возможностей программирования в общих задачах и в математике. Модели обучались на массиве данных объемом 5,5 триллиона токенов, включающем исходный код, данные для сопоставления текста и кода и синтетические данные. Qwen2.5-Coder поддерживает до 128 тысяч токенов контекста, знает 92 языка программирования и выполняет операции по генерации кода, автодополнению и исправлению кода. Qwen2.5-Coder-Instruct имеет способность к обобщению, знает более 40 языков программирования, справляется с задачами, связанными с логическим мышлением в коде, и показывает высокие результаты в задачах, связанных с математическим мышлением. Список моделей: 🟠Qwen2.5-Coder: 1.5B, 7B; 🟠Qwen2.5-Coder-Instruct: 1.5B, 7B; 🟠Qwen2.5-Coder-Instruct в формате GGUF: 1.5B, 7B. ▶️ Qwen2.5 Math Qwen2.5-Math обучались на корпусе математических данных Qwen Math Corpus v2, который содержит более 1 трлн. токенов. Помимо базовых моделей, серия Qwen2.5-Math включает в себя инструктивные модели: Qwen2.5-Math-Instruct и модель математического вознаграждения, Qwen2.5-Math-RM-72B. Qwen2.5-Math-Instruct обучалась с использованием данных CoT и TIR на китайском и английском языках, а также данных SFT, созданных с использованием Qwen2.5-Math-RM-72B. Список моделей: 🟠Qwen2.5-Math: 1.5B, 7B, 72B, RM-72B; 🟠Qwen2.5-Math-Instruct: 1.5B, 7B, 72B. ▶️ Вместе с релизом Qwen2.5, опубликована Qwen2-VL-72B-Instruct и ее квантованные Int8 и Int4 версии в форматах GPTQ, AWQ. 📌Лицензирование: 🟢Apache 2.0 для всех base и instruct моделей, кроме 3B и 72B. 🟠Qwen2.5-3B - Qwen Research License. 🟠Qwen2.5-72B и Qwen2.5-Math-72B - Qwen License. 🟡Страница проекта 🟡Коллекция моделей на HF 🟡Demo Qwen2.5-Instruct-72B 🟡Demo Qwen2.5-Coder-Instruct-7B 🟡Demo Qwen2.5-Math 🟡Сообщество в Discord 🖥Github @ai_machinelearning_big_data #AI #ML #LLM #Qwen

Как быстро обработать большой объем данных и ничего не потерять? Расскажем на бесплатном вебинаре «Больше чем Pandas: библиотеки подготовки данных для ML-моделей». Разберём: ➡️ на что стоит обратить внимание для эффективной работы с данными; ➡️ форматы работы с данными и их особенности; ➡️ фреймворки: pandas, swifter, polars, dask и cudf. ⚡️Спикер: Владимир Бугаевский, Team Lead Поиска в Купере Бонус: демонстрационные jupyter-ноутбуки ⭐️ Когда вебинар: 24 сентября в 19:00 ⭐️ Занять место на вебинаре — через бота Реклама ООО «Слёрм» ИНН 3652901451

💡 Wolfram Alpha - крутой сервис для решения сложных задач по алгебре, физике, химии или математике. У сервиса внутри огромная база данных, за счет чего инструмент выполняет сложнейшие расчёты. Для получения ответа вам следует вписать в строку поиска нужное выражение или вопрос на английском. Попробовать можно здесь. @data_math

Трамплин в карьере для системных аналитиков 🚀 Есть опыт работы от года и желание развиваться в профессии? Приходи на онлайн-интенсив в Открытые школы Т1! 🎓Открытые школы — это карьерная программа для начинающих специалистов, которая объединяет месяц бесплатного онлайн-обучения и последующее трудоустройство в ИТ-Холдинг Т1. Без отрыва от основной деятельности ты прокачаешь скилы, познакомишься с командой крупнейшей ИТ-компании страны по версии RAEX и CNews Analytics 2023🔝и подготовишься к интервью вместе с HR. Зачем участвовать? 🔹Быстрый рост в ИТ при экспертной поддержке. Карьерные треки для выпускников Открытых школ позволяют быстрее вырасти в мидла в Т1. 🔹Работа в бигтехе, где есть ДМС, удалёнка и крутые офисы, спорт и обучение, митапы, программы развития и др. ⌛️ Быстрое обучение: 1 месяц. 💻 Гибкий формат: все этапы онлайн, занятия по вечерам. Перезапусти карьеру, подавай заявку до 13 сентября! Старт 16 сентября. Реклама. ООО "Т1". ИНН 7720484492.