Data Scientist | IT

Автоматическая разметка данных для задач компьютерного зрения #почитать #junior #middle "В задачах машинного обучения значительную часть времени занимает процесс подготовки данных. К этапу подготовки относятся: сбор, фильтрация, разметка и предобработка данных.В данной статье я буду рассматривать процесс автоматической разметки данных для задач компьютерного зрения." Читать статью

Как «воспитать ламу» #почитать #middle Часто проведение ML-экспериментов сводится к долгому поиску и загрузке нужных датасетов и моделей, скрупулезной настройке гиперпараметров с целью проверки гипотез. Но что делать, когда времени мало, а за ночь нужно зафайнтюнить ламу? → Типичная ML-задача: когда нужны ML-эксперименты → Работа с датасетами → Работа с моделями → Деплой модели → Как организовывать эксперименты без навыков MLOps Читать статью

Как я учил Data Science в 2023 году #посмотреть #junior "В этом видео я расскажу вам о некоторой литературе что мне довелось прочитать и о курсах что успел пройти и что помогли мне. Проблема роадмапов в интернете, то что я не рекомендую. И как важна практика." Смотреть видео на YouTube (15 минут)

ИИ вместо астролога или как я создавала астробота Катю #почитать #junior "Мне, как любителю гороскопов, показалась интересной идея обучить языковую модель писать ежедневные прогнозы по знаку Зодиака и обернуть ее чат-бот, который бы генерировал предсказание по запросу пользователя." Читать статью

Распознавание маскируемого VPN- и прокси-трафика в DPI методами ML #почитать #middle "Наша адаптированная нейронная сеть на базе классической архитектуры сверточной нейронной сети и архитектуры ResNet предназначена для идентификации VPN- и прокси-трафика, а также направлена на точную и эффективную классификацию благодаря оптимизированному подбору гиперпараметров." Читать статью

cr: представлен унифицированный логотип маркировки контента, созданного с помощью ИИ #почитать Adobe разработала единый стандарт вместе с Nikon, BBC, Microsoft и Truepic. Логотип простой: "cr" в рамке. Метка "Content Credentials" сообщает пользователям о том, что изображение было создано или отредактировано с помощью ИИ. Информация о происхождении изображения добавляется в метаданные документа, видеозаписи или картинки. Читать статью

Создаём субтитры для любого видео в интернете с помощью нейросети в браузере #почитать #middle "... расскажу, как мы построили модель для генерации субтитров и на что нам пришлось пойти, чтобы она стала потреблять в 5 раз меньше оперативной памяти. А ещё поговорим про квантизацию свёрток и трансформеров и почему fp16 не так прост" Читать статью

🌐Стек технологий и инфраструктура Больших Языковых Моделей #посмотреть Доклад о технологиях и инфраструктуре, нужных для развертывания Больших Языковых Моделей Смотреть видео на YouTube (40 минут)

Нейросеть Llama 2 связывает географические места с историческими событиями #почитать Исследователи Массачусетского технологического института утверждают, что им удалось выявить в большой языковой Llama 2 модель пространства и времени. Их работа говорит, что нейросеть имеет понимание связи положения географических мест на планете и исторических событий. Читать статью

Как начать развиваться в профессии дата-инженера? 👨‍💻 Освойте лучшие практики работы с данными на онлайн-курсе «Data Engineer» от OTUS. ➡ За 4 месяца вы научитесь собирать данные, разрабатывать архитектуру данных в компании и создавать сервисы для обработки данных больших объемов. Одна из фишек курса — метод кейсов. На занятиях разбираем примеры внедрений, использования инструментов, оптимизации производительности, а также возможные проблемы и ошибки. 📢📢 Занятие «Выгрузка данных с Apache Ni-Fi» пройдёт 9 октября, в 20:00 МСК. 👉 Запишитесь: https://vk.cc/crsl4U Старт занятий — 27 октября. Успейте пройти вступительный тест и занять место в группе по спец.цене. Приобрести курс возможно в рассрочку. Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru, erid: LjN8KDhym

Чему учат на курсах Data Science? Примеры задач для аналитика на фармрынке #почитать #junior В заметке приведены некоторые актуальные аналитические задачи индустрии. С помощью этого списка вы можете оценить насколько вам может быть интересно учиться на DA/DS. Читать статью

📚Machine Learning: хорошая подборка книг для начинающего специалиста #почитать #junior 📔 Python. Большая книга примеров 📘 Машинное обучение доступным языком 📕 Машинное обучение без лишних слов 📗 Python и машинное обучение 📓 Машинное обучение с использованием Python. Сборник рецептов 📙 The Machine Learning Simplified: A Gentle Introduction to Supervised Learning Читать статью

Как определять ИИ-фейки в сети #почитать #junior - лишние зубы, языки и челюсти - рассеянный взгляд - размытые детали, пятна и линии и другие характерные признаки. Читать статью

🌐 Применение machine learning для решения бизнес-задач #почитать #junior #middle Machine Learning Engineer в одной из компаний FAANG рассказывает о том, как машинное обучение применяется в реальном бизнесе. Смотреть видео на YouTube (35 минут)

Хочешь разбираться в бизнес-анализе? Для тебя уже всё сделали. 📌 Канал аналитик от бога делится полезными секретами и лайфхаками управления продуктом и бизнес-анализа. Подписывайтесь и прокачивайте свои навыки: @godofanalysis

Как я пришёл в дата-анализ после долгих блужданий по онлайн-курсам, маршрут со всеми тупиками и ухабами #почитать #junior Четыре года назад я пришёл в дата-анализ из сферы, далековатой от IT, — пивоварения (хотя о том, что на самом деле они не так далеки, я рассказывал здесь). До того как я нашёл свою нишу, тщетно пробовал вкатиться в IT через разные курсы по Python, TensorFlow и веб-разработке. Потратил на это три года и 100 тысяч рублей, в какой-то момент выгорел ещё в процессе обучения, чуть не бросил попытки, но собрался и в итоге самостоятельно и бесплатно изучил анализ данных, который мне сразу зашёл. Сейчас я вижу, что многие начинающие блуждают теми же окольными путями. Читать статью

Зачем дата-инженеру Apache Ni-Fi? Apache NiFi — простая платформа обработки событий, предоставляющая возможности управления потоками данных из разнообразных источников в режиме реального времени с использованием графического интерфейса. Простыми словами, она оптимизирует работу и повышает вашу эффективность. Изучите эту технологию на бесплатном открытом уроке «Выгрузка данных с Apache Ni-Fi» от OTUS и расширьте свои возможности. На эфире: - Познакомимся с инструментом загрузки данных Apache Ni-FI, построением пайплайна загрузки и трансформации данных; - изучим классификацию источников для выбора правильного способа загрузки; - научимся загружать источники с помощью NiFi. Занятие пройдёт 9 октября в 20:00 мск в рамках курса «Data Engineer», партнером программы выступает Yandex Cloud. Пройдите бесплатное вступительное тестирование прямо сейчас и зарегистрируйтесь на событие: https://otus.pw/9eXg/ Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru, erid: LjN8JtDpW

Как мы распознавали цвета медицинских тест-полосок с помощью ИИ для healthcare стартапа #почитать #middle Рассказываем, как Технологика и стартап цифровой медицины запустили мобильное приложение, которое при помощи ИИ анализирует цвета медицинских тест-полосок и трактует результаты показателей мочи. Читать статью

Познакомьтесь с фреймворком Spark Spark — фреймворк, позволяющий работать очень быстро. Уменьшив количество циклов чтения-записи на диск и сохраняя промежуточные данные в памяти, этот инструмент запускает приложения в сто раз быстрее в памяти и в десять раз быстрее на диске по сравнению с Hadoop. Изучите эту технологию на бесплатном открытом уроке «Apache Spark Python API» от OTUS и получите конкурентное преимущество в трудоустройстве. https://vk.cc/cr5gNH На эфире: - Познакомимся с фреймворком распределенной обработки данных Spark API и работой с ним в Python; - Изучим архитектуру приложений и запуск заданий; - Ответим на все вопросы. Занятие пройдёт 28 сентября в 20:00 мск в рамках курса «Data Engineer», партнёром которого выступает Yandex.Cloud. Пройдите бесплатное вступительное тестирование прямо сейчас и зарегистрируйтесь на событие! Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru, erid: LjN8KMAzC

🟡Друзья! Мы подготовили папку с каналами, которые публикуют еженедельные дайджесты по разным IT-направлениям! Забирайте и будьте в курсе последних новостей и видео в индустрии. Всего 1-2 поста в неделю и у вас есть все, что вышло за неделю. Что нужно сделать: 1. Нажимаем на эту ссылку https://t.me/addlist/OB0tZHD_z3lhMWUy 2. Добавляем всю папку себе (без регистрации и смс) 3. После добавления папка станет твоей и ты сможешь управлять подписками внутри папки 4. Если не работает - нужно обновить приложение;) Добавил себе - поделись с коллегой!