Data Science | Machinelearning [ru]

​​🤖Разработка систем генеративного ИИ на базе ML Platform: создаем конкурента ChatGPT без миллионных инвестиций В этом материале я расскажу, что такое GPT-модели, как упростить их создание под свои задачи, и покажу на практических примерах, как команда смогла создать GPT-модель при минимуме затрат. Читать...

​​🧑‍💻Пять подходов к созданию ad-hoc-датафреймов в PySpark В этой статье речь пойдет о создании датафреймов in-place без внешних зависимостей. Читать...

Потрясающие возможности нейросетей, о которых вы могли не знать: 🔍OSINT и пробив: узнать много интересного о друзьях, девушке, коллегах, врагах или вычислить ушлёпка, который не проявил должного уважения поможет AI. Держите набор промптов. 🔓Хакинг: раньше школохакеры были опасны только для самих себя, но сейчас правила игры меняются. GPT-4 знает больше любого хакера и горе тому, на кого его натравят. Бесплатный курс по этичному хакингу при помощи GPT смотрите тут. 💼Создание стартапа: раньше, чтобы создать свой веб-сервис, разработать программу или игру нужны были дизайнеры, маркетологи, программисты, QA, менеджеры, HR и др. Сегодня вы можете поставить задачи, распределились роли и искусственный интеллект начнет создавать ваш стартап. 🪄Кремниевая магия!  Держите бесплатное решение с открытым исходным кодом.

​​🤔Разбираемся в отличии среднего чека от ARPU на примере одного интернет-магазина В этой статье я расскажу то такое ARPU, средний чек, и как их рассчитывать. Читать...

​​🤖Практическое применение моделей YOLO и ResNet для обнаружения нежелательных предметов на фотографиях В данной статье мы рассмотрим практическое применение двух из самых популярных моделей YOLO и ResNet для обнаружения нежелательных предметов на фотографиях. Читать...

​​⚒DVC — прекрасный инструмент для DataScience В этой статье я расскажу про DVC: инструмент, который многие, незаслуженно, обходят стороной. Читать...

Открытый практикум Data Analyst by Rebrain: Data-профессии, их роль и взаимодействие Успевайте зарегистрироваться. Количество мест строго ограничено!  👉Регистрация Время проведения: 19 Сентября (Вторник) в 19:00 по МСК Программа практикума: 🔹Узнаете про разные направления в data-направлении 🔹Какая ключевая роль у Аналитика данных 🔹По каким принципам идёт взаимодействие и решаемые задачи Кто ведёт? Артур Сапрыкин – Data Scientist, AI исследователь, предприниматель, автор курсов по машинному обучению, преподаватель. Подключайтесь! Реклама. ООО "РЕБРЕИН". ИНН 7727409582 erid: 2VtzqvyLRaY

​​🤓Логика и принципы построения BI-дашборда В этой статье поговорим кратко об общих принципах: с чего начать, какова логика и принципы, какие лучше визуализировать различные типы и срезы данных. Читать...

​​👤Искусство ETL. Пишем собственный движок SQL на Spark [часть 2 из 5] В данной статье я подробно расскажу о том, как написать на Java собственный интерпретатор объектно-ориентированного диалекта SQL с использованием Spark RDD API, заточенный на задачи подготовки и трансформации наборов данных. Читать...

​​🌳Деревья решений в pySpark: от семечка до параметрической оптимизации случайного леса В этой статье я расскажу о простом для понимания, но в то же время достаточно эффективном алгоритме — дереве решений, а также его расширенной модификацией — случайных лесах решений, и их реализации с помощью PySpark MLib. Читать...

​​🤖Визуальное RPG с долговременной памятью, генерируемое из 3 нейросетей и LLamы В этой статье автор покажет простому обывателю механизм безболезненного использования нейросетевых моделей в простых проектах при помощи Python и Hugging Face Transformers. Читать...

​​Приглашаем на Yandex Scale 2023! Ежегодная и самая масштабная конференция Yandex Cloud уже в пятый раз соберет экспертов индустрии. Эксперты компании поделятся новостями платформы, расскажут о новых сервисах, а также обсудят будущее облачных технологий. Что вас ждет в этом году: 🚀6 актуальных тематических треков: Data Platform, Infra + K8s, Security, Digital Workplace, Severless, ML; 🔊главные новости платформы и индустрии; 🎙30+ выступлений экспертов, кейсы клиентов и партнеров; 🏢9 стендов на офлайн-выставке; 🤝Нетворкинг: не упустите возможность встретиться с руководителями разработки и задать им все интересующие вас вопросы. 📅 В этом году конференция будет проходить два дня: 25 сентября – онлайн: открытие; 26 сентября – онлайн и офлайн: главный доклад, основная программа и выставка. Регистрируйтесь по ссылке. Реклама. ООО "Яндекс" ИНН 7736207543

​​😵Искусство ETL. Пишем собственный движок SQL на Spark [часть 1 из 5] В этой статье я расскажу о разработке настоящего production ready инструмента, с интерактивным шеллом с подсветкой синтаксиса и автодополнением, который сможет работать в клиент-серверном режиме, и не только на кластере, но и локально. Читать...

​​🧑‍💻Как я реплицировал данные с помощью postgres_fdw и dbt В этой статье автор расскажет вам о собственном опыте извращенной репликаций данных между базами Postgres. Читать...

SmartDev 2023 — большая конференция про технологии от Сбера 21 сентября в кинотеатре «Октябрь» пройдет технологическая конференция SmartDev 2023, организованная Сбером. На одной площадке соберутся ведущие инженеры и разработчики из Сбера, VK, Яндекса, Kaspersky и других компаний, чтобы обменяться опытом создания лучших технологических решений в мире. Основные темы конференции: – Машинное обучение и искусственный интеллект – Архитектура программных решений – DevOps – Работа с большими данными – Безопасность приложений – Инновации и стратегии в разработке ПО Помимо этого впервые в России можно услышать выступление генерального директора Gitee, китайского аналога GitHub.Yong Xu. Также участники конференции смогут задать вопросы создателям нашумевших проектов от Сбера — сервиса GigaChat и нейросети Kandinsky. Конференция соберёт 1500 участников в офлайне и несколько тысяч зрителей в онлайне. Участие бесплатное, подробности и регистрация — на сайте конференции.

​​🗣7 аргументов почему UUID лучше, чем автоинкрементные идентификаторы В этой статье мы рассмотрим, почему UUID часто являются лучшим выбором по сравнению с автоматически увеличивающимися идентификаторами. Читать...

​​😵Устранение галлюцинаций в LLM В этой статье поговорим о том, почему LLMs говорят неправду и как это исправить. Читать...

​​😼Эволюция метрик качества машинного перевода. Часть 3 В этой статье поговорим о безреференсных нейросетевых метриках, а также выясним, какова сравнительная эффективность различных традиционных и нейросетевых метрик. Читать...

​​😎Дружим YOLACT и RockChip: запуск инстанс-сегментации на китайском одноплатнике В этой статье автор поделиться с вами своим опытом запуска YOLACT на edge-устройстве RockChip. Читать...

​​14 сентября, 18:00  Computer Vision в животноводстве, инфраструктура для ML и AI, виды дрифтов ML-моделей. В этот четверг ребята из @Selectel проведут ежегодный митап «‎MLечный путь» для MLOps и ML-инженеров. На встрече спикеры из Selectel, Контур AI, Neoflex и Русагро рассмотрят актуальные сложности, тренды и инструменты построения production ML-систем. Темы докладов: ◽️ Определение дрифта данных и дрифта моделей на MLOps-платформе Neoflex Dognauts ◽️ Хостинг сотни моделей машинного обучения в Контуре: существующее решение и путь к нему, а также актуальные и решенные проблемы ◽️ Стек технологий и инфраструктурная база для пилотных проектов внедрения LLM ◽️ Оптимизация работы видеоаналитических сервисов в животноводстве с помощью Prefect В конце пройдет дискуссия «Потребности ML-рынка России», где вы получите ответы на интересующие вопросы и сможете пообщаться с экспертами в неформальной обстановке. Регистрируйтесь на офлайн-встречу в Санкт-Петербурге: https://slc.tl/wrrsp Регистрируйтесь на онлайн-трансляцию: https://slc.tl/cpn0l  Реклама ООО «Селектел» 2Vtzquqv9xt