Анализ данных (Data analysis)

⚡️ Flux Schnell в новом Diffusion Kit с MLX работает на 30% быстрее и использует меньше оперативной памяaти! pip install -U diffusionkit На моем ноутбуке M1 max объемом 32 ГБ я создаю высококачественные изображения меньше чем за минуту: ▪ Github @data_analysis_ml

Учитесь в магистратуре и совмещайте обучение с работой и привычной жизнью. Яндекс Практикум и Томский государственный университет приглашают на онлайн-программу «Дата-аналитика для бизнеса». Очное обучение в онлайн-формате Полноценная учёба, с онлайн-занятиями и экзаменами На платформе Практикума Гибкая теория, автоматическая проверка заданий и встроенная YandexGPT. Преподаватели ТГУ и наставники Яндекс Практикума Они будут проводить занятия и учить вас применять теорию на практике. Студенческий, льготы и диплом гособразца У вас будут все преимущества студента-очника. Доступ к инфраструктуре вуза — кампусам, библиотекам и мероприятиям. Оплатить учёбу можно разными способами: всю сумму сразу, по семестрам или с помощью госкредита — тогда ежемесячный платёж составит от 500 ₽, а государство погасит часть кредита за вас. — Подать заявку Реклама. ООО «Яндекс». ИНН 7736207543

🤗 Hugging Face выпустили пошаговый гайд по созданию и обучению своей личной робо-руки. Компания Hugging Face опубликовала подробную инструкцию по созданию и обучению роботизированной руки. В ней подробно рассказывается, где приобрести необходимые компоненты, как настроить нейронную сеть, а также приведены лекции, иллюстрирующие процесс сборки. Крутой бесплатный курс - рекомендуем) @vistehno

✍ LongWriter с открытым исходным кодом: позволяет генерировать более 10 000 слов из Long Context Lms Это один из самых мощных LLM с поддержкой long context, который я когда-либо использовал. Я в восторге. Самое главное - открытый исходный код. ▪ Github @data_analysis_ml

⚡️ LLM Compressor Neural Magic выпустили LLM Compressor: Новую библиотеку для сжатия LLM модели для более быстрого инференса с помощью vLLM. pip install llmcompressor ▪Github ▪Blog @data_analysis_ml

Лекция Эрика Шмидта (бывший CEO Google) в Стэнфорде про будущее AI. Полная запись, которая была удалена с Ютуба.

🌟 Lets-Plot: мощная библиотека для визуализации данных на Python — pip install lets-plot Lets-Plot — библиотека от JetBrains, созданная на основе принципов Grammar of Graphics, как и знаменитая ggplot2 для R. Особенности и преимущества: - Мультиплатформенность: Lets-Plot работает как в блокнотах Python (Jupyter, Datalore, Kaggle и др.), так и в IDE PyCharm и IntelliJ IDEA. - Интерактивные возможности: Поддержка интерактивных карт с возможностью увеличения и перемещения, а также кастомизация подсказок и аннотаций. - Геопространственная визуализация: Простая интеграция с GeoDataFrame и мощный модуль геокодирования. - Экспорт графиков: Сохранение графиков в формате SVG, HTML, PNG и PDF с помощью функций ggsave(), to_svg(), to_html(), to_png() и to_pdf(). - Поддержка режима без JavaScript и оффлайн-режима: Lets-Plot генерирует графики как простые SVG-изображения, что обеспечивает работу без Интернет-соединения. 🖥 GitHub 🟡 Доки @data_analysis_ml

⚡️Легкий способ получать свежие обновления и следить за трендами в разработке на вашем языке. Находите свой стек и подписывайтесь: МАШИННОЕ ОБУЧЕНИЕ: t.me/ai_machinelearning_big_data C++ t.me/cpluspluc Python: t.me/pythonl Хакинг: t.me/linuxkalii Devops: t.me/devOPSitsec АНАЛИЗ Данных: t.me/data_analysis_ml Javascript: t.me/javascriptv C#: t.me/csharp_ci Java: t.me/javatg Базы данных: t.me/sqlhub Linux: t.me/linuxacademiya Python собеседования: t.me/python_job_interview Мобильная разработка: t.me/mobdevelop Docker: t.me/DevopsDocker Golang: t.me/Golang_google React: t.me/react_tg Rust: t.me/rust_code PHP: t.me/phpshka Android: t.me/android_its Frontend: t.me/front Big Data: t.me/bigdatai Собеседования МЛ: t.me/machinelearning_interview МАТЕМАТИКА: t.me/data_math C++ собеседования: t.me/cppsobes Kubernets: t.me/kubernetc 💼 Папка с вакансиями: t.me/addlist/_zyy_jQ_QUsyM2Vi Папка Go разработчика: t.me/addlist/MUtJEeJSxeY2YTFi Папка Python разработчика: t.me/addlist/eEPya-HF6mkxMGIy Папка ML: https://t.me/addlist/2Ls-snqEeytkMDgy Папка FRONTEND: https://t.me/addlist/mzMMG3RPZhY2M2Iy 😆ИТ-Мемы: t.me/memes_prog 🇬🇧Английский: t.me/english_forprogrammers 🧠ИИ: t.me/vistehno 🎓954ГБ СЛИТЫХ КУРСОВ: @courses 📕Ит-книги бесплатно: https://t.me/addlist/BkskQciUW_FhNjEy

⚡️ Tele FLM 1T На Hugging Face на днях появилась open-source LLM с 1 триллионом параметров. Tele-FLM-1T — это многоязычная LLM с открытыми весами, отличающаяся расширенными возможностями оценки фактов (по крайней мере со слов разработчиков) Модель построена на базе архитектуры трансформера, обучена примерно на 2Т лексем. Веса модели открыты, также прилагаются полезные инструкции и т.д. 🤗 Hugging Face @ai_machinelearning_big_data

🦀 CRAB: бенчмарк для агентов работающих с мультимодальными языковыми моделями 🦀 CRAB предоставляет комплексную и простую в использовании платформу для создания мультимодальных агентов, управления различных ос и создания тестов для их оценки, состоящую из трех ключевых компонентов: - 🔀 Агенты могут выполнять задачи на 📱 Android и 💻 Ubuntu. - 🕸 Graph Graph evaluator - предоставляет агентам точную метрику оценки работы агентов. - 🤖 Автоматическая гнерация задач для агентов. Подключая все устройства к агентам, 🦀CRAB открывает больше возможностей для выполнения различных задач, аналогичных реальным задачам. Используйте 🦀 CRAB для тестирования ваших мультимодальных агентов! - 👨‍💻 Репозиторий: https://github.com/camel-ai/crab - 📝 Статья: https://arxiv.org/abs/2407.01511 - 🌐 Проект https://crab.camel-ai.org @data_analysis_ml

📸 Generative Photomontage Generative Photomontage - модель, которая позволяет вам создавать изображения путем объединения нескольких сгенерированных изображений. Фреймворк является гибким и может использоваться для различных задач, таких как создание невидимых комбинаций изображений, коррекция изображений и удаление артефактов". abs: https://arxiv.org/abs/2408.07116 страница проекта: https://lseancs.github.io/generativephotomontage/ код: https://github.com/lseancs/GenerativePhotomontage

Мем, который репостнул Илон Маск

🌟 NVIDIA Kaolin — библиотека PyTorch для ускорения работы с 3D

pip install kaolin==0.16.0 -f https://nvidia-kaolin.s3.us-east-2.amazonaws.com/torch-{TORCH_VERSION}_cu{CUDA_VERSION}.html

Библиотека NVIDIA Kaolin предоставляет PyTorch API для работы с различными 3D-представлениями и включает коллекцию GPU-оптимизированных операций, таких как модульный рендеринг, быстрые преобразования между представлениями и других операций. 🖥 GitHub 🟡 Страничка NVIDIA Kaolin @data_analysis_ml

🌏Новая реальность: посетить концерт, не выходя из дома, увидеть друзей, находясь за тысячи километров, получить высшее образование по Data Science удалённо. Когда виртуальные границы стираются, самое время применить технологии с пользой. Онлайн-бакалавриат Нетологии и ТюмГУ «Науки о данных» — способ получить диплом о высшем образовании из любой точки мира. За 4 года вы освоите навыки работы с данными и станете бакалавром в области математики, который умеет работать с Big Data, компьютерным зрением и искусственным интеллектом. Будете закреплять знания на практике, создадите портфолио и сможете строить карьеру аналитика данных или Data Scientist. Во время учёбы у вас будут все студенческие льготы и скидки, а в конце вы получите диплом очного бакалавриата ― такой же, как у студентов офлайн-обучения. Узнать подробности о программе Реклама. ООО "Нетология". Erid 2VSb5z6rppg

🚀 Прорыв в оптимизации LLM: Tree Attention — новый алгоритм для сверхбыстрого масштабирования! Исследователи представили революционный алгоритм Tree Attention, который обещает трансформировать обучение и интерфейс больших языковых моделей (LLM). Ключевые преимущества: 🔥 Ускорение до 8 раз по сравнению с Ring Attention 🧠 Вдвое меньшее использование пиковой памяти 🌐 Значительное снижение межузловых коммуникаций 📊 Сравнение методов (на 1М токенов, 64 GPU): Стандартное внимание: 100% (базовая линия) Ring Attention: 60% времени базовой линии Tree Attention: всего 15% времени базовой линии! 🔬 Теоретическая основа: Функция энергии самовнимания связывает его с энергетическими моделями Байесовская интерпретация как метод максимального правдоподобия ⚙️ Технические детали: Сложность O(N/p + log p) для последовательности длины N на p процессорах Древовидная структура редукции на основе свойств logsumexp и max Интеграция с Flash Attention 2 и оптимизированными операциями NCCL 🖥️ Практическое применение: Оптимизация для GPU-кластеров с учетом топологии сети Непревзойденная эффективность для контекстов >1M токенов 🔮 Влияние на будущее AI: Tree Attention может стать ключом к созданию LLM с гигантскими контекстными окнами, открывая путь к моделям с долгосрочной памятью и более глубоким пониманием сложных текстов. 🔗 Для углубленного изучения: Рекомендуем заинтересованным читателям искать последние публикации по ключевым словам "Tree Attention", "GPU optimization for LLM" на научных порталах, таких как arXiv или Google Scholar. Tree Attention — это не просто оптимизация, а потенциальный прорыв в масштабировании AI. Представьте LLM, способную анализировать целые книги за один проход или вести длительный диалог без потери контекста! 💬 А что вы думаете? Как Tree Attention может изменить ваши AI-проекты? Поделитесь мнением в комментариях! 📌 Почитать #AI #MachineLearning #TreeAttention #LLM #GPUOptimization @data_analysis_ml

🌟 VideoPoet — продвинутая LLM для генерации видео Dan Kondratyuk и его коллеги представляют VideoPoet — языковую модель, способную синтезировать высококачественное видео с соответствующим звуком. VideoPoet использует архитектуру трансформера, работающего только с декодером, который обрабатывает мультимодальные входные сигналы — изображения, видео, текст и аудио. 🟡 Страничка VideoPoet 🟡 Arxiv @data_analysis_ml

Вышла бета-версия Grok-2 https://x.ai/blog/grok-2 Она превосходит, Claude 3.5 Sonnet и GPT-4-Turbo. @data_analysis_ml

🌟 T2V-CompBench — комплексный бенчмарк для анализа T2V-моделей Модели генерации текста в видео (T2V) значительно продвинулись вперед, однако их способность точно компоновать различные объекты, атрибуты и движения в видео остается неизученной. В данной работе Kaiyue Sun с коллегами проводит первое систематическое исследование этого вопроса. В результате работы появился T2V-CompBench — первый бенчмарк, предназначенный для оценивания точности размещения нужных объектов в кадре, точности их движения и т.д. 🟡 Страничка T2V-CompBench 🟡 Arxiv @data_analysis_ml

🤔Запутались в различиях между пользовательскими сценариями (Use Cases) и пользовательскими историями (User Stories)? Не знаете, какой метод лучше использовать в вашем проекте? 😎А теперь представьте, что вы твердо знаете, как и когда использовать каждый метод. Вы умело используете инструменты аналитики и развиваете свои проекты. Хотите это реализовать? Присоединяйтесь к открытому вебинару 20 августа в 20:00 мск, где вы научитесь: - понимать различия между пользовательскими сценариями и пользовательскими историями; - применять практические примеры использования обоих методов; - разрабатывать примеры для закрепления материала. 🤩Урок будет полезен системным и бизнес-аналитикам, менеджерам проектов, учавствующем в процессе работы с требованиями. Встречаемся в преддверии старта курса «Системный аналитик. Advanced». Все участники вебинара получат специальную цену на обучение! Регистрируйтесь прямо сейчас, чтобы не пропустить мероприятие: https://otus.pw/dlU3/ Реклама. ООО "ОТУС ОНЛАЙН-ОБРАЗОВАНИЕ". ИНН 9705100963. erid: LjN8KWuDB