Анализ данных (Data analysis)

🐳 DeepSeek начал новый год с серьёзной статьи. В первый день года команда представила работу, посвящённую одной из самых болезненных проблем современных нейросетей: нестабильности обучения в сложных архитектурах. И предложили решение: подход под названием mHC (Manifold-Constrained Hyper-Connections). Смысл в том, что исследователи взяли мощную, но нестабильную архитектуру Hyper-Connections и ввели ограничения на внутренние связи. 1. Проекция на многообразие (manifold) Вместо того, чтобы оставлять Hyper-Connections свободными, mHC накладывает на них ограничение, они проектируются на особое многообразие (матрицы с особыми свойствами). Это восстанавливает identity-mapping, благодаря чему сигнал остаётся устойчивым даже через десятки или сотни слоёв. 2. Стабильность и масштабируемость Благодаря этому ограничению сеть перестаёт «взрывать» или «затухать» сигнал при глубоком обучении, и её можно эффективно использовать в больших моделях без ухудшения качества и без сложных ухищрений. 3. Инфраструктурные оптимизации Авторы также добавили инженерные улучшения: - слияние ядер (kernel fusion) - уменьшение накладных расходов по памяти - эффекты смешанной точности Это делает mHC быстрым и эффективным в реальных задачах даже при масштабных тренировках. Результат впечатляет: • обучение становится стабильнее на крупных масштабах • модели лучше масштабируются • повышается производительность • снижается потребление памяти • mHC обгоняет классические Hyper-Connections Другими словами, DeepSeek показывает, что путь в будущее - не только большие модели, но и архитектуры, которые устойчивы изнутри. #AI #DeepSeek #MachineLearning #NeuralNetworks #Research https://arxiv.org/abs/2512.24880

💰 Цены на видеокарты в 2026 году могут резко подпрыгнуть и снова причина в памяти. Сообщается, что уже в начале года AMD может поднять цены (январь), а Nvidia подтянется в феврале. И эти подорожания могут тянуться месяцами. Причина проста: память стала главным элементом себестоимости. В среднем она занимает до 80% BOM у видеокарт, а её стоимость к Q2 2026 может вырасти ещё на 40%. ИИ разогрел рынок настолько, что 64 ГБ DDR5 подорожали с $150 до $500 меньше чем за два месяца. В 2025 году производителей спасали фиксированные контракты на поставку памяти, они сглаживали скачки VRAM. Теперь контракты заканчиваются, и рост DRAM/GDDR напрямую попадает в себестоимость. В итоге доля «чип GPU + VRAM» может подбираться к тем же 80% стоимости платы. По утечкам, флагманские RTX 5090 в 2026 году могут добраться до ценника около $5000 - главным образом из-за огромного спроса со стороны индустрии ИИ. Ждать «чудесных скидок» по видеокартам в ближайшее время не стоит. Источник: wccftech .com/amd-and-nvidia-are-expected-to-hike-gpu-prices-early-2026/

🎄🎄 Qwen-Image: обновление как раз к Новому году Свежая версия Qwen-Image получила заметный апгрейд качества. Модель стала генерировать намного реалистичнее и аккуратнее, особенно в сложных сценах. Что изменилось: • более естественные генерации людей, меньше «искусственного» эффекта • детальнее лица и мимика • улучшены натуральные текстуры: вода, шерсть, материалы, пейзажи • намного аккуратнее текст на картинках: лучше верстка и точность в композиции Модель прошла более 10 000 слепых сравнений на AI Arena и показала результат уровня топов среди open-source, оставаясь конкурентной даже рядом с закрытыми решениями. ▪Qwen Chat: https://chat.qwen.ai/?inputFeature=t2i ▪Hugging Face: https://huggingface.co/Qwen/Qwen-Image-2512 ▪ModelScope: https://modelscope.ai/models/Qwen/Qwen-Image-2512 ▪GitHub: https://github.com/QwenLM/Qwen-Image ▪Блог: https://qwen.ai/blog?id=qwen-image-2512 ▪Демо HF: https://huggingface.co/spaces/Qwen/Qwen-Image-2512 ▪Демо ModelScope: https://modelscope.cn/aigc/imageGeneration ▪API: https://modelstudio.console.alibabacloud.com/?tab=doc#/doc/?type=model&url=2840914_2&modelId=group-qwen-image-max @ai_machinelearning_big_data #qwen #qwenimage #openaimodels #imagemodels

🙂 Tongyi Lab, похоже, вот-вот выпустит Qwen-Image-Edit-2512 Вчера, на просторах сети Х, Tongyi Lab запостила тизер "новогоднего подарка, который уже в пути". Так как все очень сильно и давно ждут Z-Image Base и Edit и Omni, сверхразумы Redditа пошли разгадывать таинственный пост. Розыскную бригаду собирать не пришлось - новинку спойлернул gemini-code-assist в репозитории Modelscope : это будет qwen-image-2512 @ai_machinelearning_big_data #news #ai #ml

🇨🇳 Китайские техногиганты устраивают охоту за ИИ-талантами Крупные компании резко поднимают бонусы и зарплаты, чтобы никто не уходил к конкурентам. ByteDance увеличивает бонусы на 35% и закладывает на пересмотр зарплат +150%. Вилки доходов расширяют по всем уровням - рынок перегревается. Tencent активно переманивает специалистов: по сообщениям, отдельные оферы доходят до 2x от текущих зарплат. Плюс в компании появился новый главный AI-учёныйБ бывший исследователь OpenAI Яо Шунью. Инженеры, которые умеют строить и поддерживать системы обучения и инференса LLM, на вес золота. Маленькая команда может тормозить целые продуктовые направления. Внутри Tencent усиливают AI-инфраструктуру: распределённое обучение, масштабное развёртывание моделей, большие данные и ML-пайплайны. И цифры это подтверждают: индекс новых вакансий по ИИ на платформе Maimai вырос на 543% за 2025 год. Китай делает ставку на ИИ. scmp.com/tech/tech-trends/article/3338168/chinas-tech-giants-offer-lavish-year-end-bonuses-amid-ai-talent-war

👨‍🎓 Harvard выложил в открытый доступ учебник по ML-системам и это редкий случай, когда материал действительно полезный. В учебнике показан полный цикл: от понимания основ до построения продакшн-систем, которые можно запускать в реальном мире. Что в книге и почему она стоит внимания: - вы самостоятельно собираете autograd, оптимизаторы, attention и мини-PyTorch — чтобы увидеть, как устроены фреймворки изнутри - разбираетесь в базах: батчи, точность вычислений, архитектуры, процесс обучения - учитесь оптимизировать производительность: работать с ускорителями, бенчмарками и эффективностью систем То есть это не вводная книжка, а полноценный маршрут от теории к продакшну. 📚 Книгу и код можно читать бесплатно прямо сейчас. 📌Репозиторий: https://github.com/harvard-edge/cs249r_book 📌PDF: https://mlsysbook.ai/assets/downloads/Machine-Learning-Systems.pdf

Южная Корея обвинила 10 человек, включая экс-топов Samsung, в утечке секретов DRAM в Китай 🏭🇰🇷➡️🇨🇳 Прокуратура утверждает, что группа передала Китаю производственные секреты Samsung по 10-нм DRAM, которые попали к ChangXin Memory Technologies (CXMT).

10-нм DRAM (Dynamic Random Access Memory) - это динамическая память с произвольным доступом следующего поколения, где «10 нм» указывает на технологический процесс уменьшения размеров транзисторов и ячеек памяти, позволяющий упаковать больше памяти на кристалл, повышая плотность и энергоэффективность.

DRAM производится через сотни строго упорядоченных шагов. Небольшое отклонение - и хорошая пластина становится браком. По версии следствия: - сотрудник компании переписывал процесс вручную, обходя цифровой контроль - заметки использовали, чтобы восстановить и адаптировать процесс под оборудование CXMT - дело также затрагивает попытки получить технологии SK hynix через подрядчика Сообщается, что 5 фигурантов арестованы, остальные проходят без задержания (обвинения по закону о защите промышленных технологий). Ущерб Samsung оценивается в $7–13 млрд. На создание такой памяти обычно уходят годы и приходится множество неудачных запусков. news.yahoo.co.jp/articles/f2f6b69b1ba1395c51a0538a1b24328f776254de

❔ Хотите построить собственного торгового робота и запустить его в облаке? Мы запускаем курс, где вместе с вами создадим полноценного торгового робота для онлайн-торговли на российской бирже. Вы пройдете весь путь от идеи до работающего сервиса.

💪 Что будет реализовано на курсе «ML для финансового анализа»: - работа с реальными биржевыми данными - реализация торговой стратегии (алгоритмы / ML) - тестирование её на исторических данных - настройка риск-менеджмента и мониторинга - развернём робота в облачной среде

Результат: не абстрактный ноутбук, а живой финтех-проект. Кому подойдёт: - студентам IT и технических направлений - начинающим ML / Data / Backend-инженерам - всем, кто хочет понять, как реально работают торговые системы ☝🏻Опыт в трейдинге НЕ обязателен - мы дадим все основы. Если хотите не просто учиться, а делать реальные системы - это к нам. Постройте торгового робота. Запустите его в облаке. Сделайте шаг в финтех. 🔥 Успейте оставить заявку, старт 14 января: https://otus.pw/6dCB/ 🎄Учитесь в новом году по старым ценам! Максимальная скидка 30% 🎁 на обучение до 31.12.2025: 1 курс — тающая скидка 10% до 29.12 и 5% до 31.12 2 курса −25%, 3 курса −30% Учиться системно — выгоднее! Реклама. ООО "ОТУС ОНЛАЙН-ОБРАЗОВАНИЕ", ИНН: 9705100963

⚡️ Эрик Шмидт (ex-CEO Google): «Всё, чему я учился годами: теперь делает ИИ» Эрик Шмидт рассказал, что его молодость прошла за кодом: в 20 лет он писал программы днём и ночью: в колледже и аспирантуре и именно это построило его карьеру. Сегодня всё иначе:

«Каждый из вас носит в кармане суперкомпьютер и суперпрограммиста.»

По словам Шмидта, теперь ИИ способен выполнять всё то, чему он учился годами. Это не про «конец программирования», а про то, что правила игры меняются. Выигрывать будут те, кто не сопротивляется, а учится работать вместе с ИИ, как с инструментом, который усиливает человека.

Статья Step-DeepResearch где показано, что даже 32B-модель может делать по-настоящему глубокие исследования при очень низкой стоимости инференса. 📊 На бенчмарке ResearchRubrics модель получает 61.42, а полный отчет стоит меньше 0,50 RMB. Идея проста: большинство агентов ведут себя как поисковики. Они собирают факты, но не превращают их в проверенный, связный отчет. Здесь исследование понимается как длинный цикл: понять реальную задачу - составить план - искать источники - сравнивать и проверять - исправлять ошибки - писать отчет. 🧩 Цикл разбили на 4 базовых навыка: • планирование • поиск информации • рефлексия и проверка • написание отчета Данные собирали из реальных отчетов, восстанавливая исходные вопросы и планы, а также из вопросов, связанных с базами знаний и документами. ⚙️ Обучение шло в 3 этапа: 1) сначала обучают базовым навыкам 2) затем учат полным цепочкам с инструментами 3) далее добавляют обучение через попытки и проверку, где чек-лист оценивает отчет и награда дается только за полностью пройденный результат 📌 Авторы также представили ADR-Bench, где эксперты сравнивают два отчета бок о бок, а рейтинг строится по системе Elo. https://arxiv.org/pdf/2512.20491

⚡️ Matrix Exponential Attention (MEA) - экспериментальный механизм внимания для трансформеров MEA предлагает альтернативу классическому softmax-attention. Вместо нормализации через softmax используется матричная экспонента, что позволяет моделировать более сложные, высоко-порядковые взаимодействия между токенами. Ключевая идея Внимание формулируется как exp(QKᵀ), а вычисление экспоненты аппроксимируется через усечённый ряд. Это даёт возможность считать внимание линейно по длине последовательности, не создавая огромные n×n матрицы. Что это даёт - Более выразительное внимание по сравнению с softmax - Higher-order взаимодействия между токенами - Линейная сложность по памяти и времени - Подходит для длинных контекстов и исследовательских архитектур Проект находится на стыке Linear Attention и Higher-order Attention и носит исследовательский характер. Это не готовая замена стандартному attention, а попытка расширить его математическую форму. Для ML-исследователей и инженеров, которые изучают новые формы внимания, альтернативы softmax и архитектуры для длинных последовательностей. Экспериментально. Интересно. Не для продакшена - пока. GitHub: github.com/yifanzhang-pro/MEA

💰 ИИ-лабы начали платить начинающим исследователям на уровне опытных инженеров - фактически «закрепляя» таланты ещё на старте. Сегодня стажировки и junior-позиции в топ-лабораториях - это уже не подработк, а прямой вход в исследование: со стипендией и собственным бюджетом на эксперименты. Примеры программ - Anthropic - AI Safety Fellows ~ $3 850 в неделю + примерно $15 000 в месяц на вычисления. По сути — стипендия плюс мини-грант на исследования. Business Insider отмечает: 80% участников публикуют статьи — программа даёт результат. - OpenAI Residency ~ $18 300 в месяц в течение 6 месяцев — формат как оплаченное обучение внутри фронтир-организации. Если дать новичкам деньги + доступ к мощностям, они начинают приносить ощутимый вклад почти сразу. ИИ-карьера всё больше выглядит как полноценная научная работа с зарплатой и ресурсами - с самого старта. businessinsider .com/top-paying-ai-internships-fellowships-residencies-openai-anthropic-meta-google-2025-12

Авито внедряет ИИ-помощников для покупателей и продавцов На технологической платформе началось тестирование двух новых ИИ-ассистентов: Ави для покупателей и Ави Pro для продавцов. На текущем этапе они доступны только ограниченной группе пользователей. Функционал помощников различается. Ави помогает покупателям: подбирает варианты по описанию, сравнивает товары, выделяет их сильные и слабые стороны, а также предлагает сопутствующие продукты, даже если запрос сформулирован нечетко. Ави Pro, в свою очередь, предназначен для продавцов и работает в их личных кабинетах. Этот ассистент анализирует статистику, отслеживает изменения и даёт рекомендации для повышения эффективности продаж. Управляющий директор по искусственному интеллекту Авито Андрей Рыбинцев пояснил, что для компании диалоговый интерфейс представляет собой новый этап в развитии пользовательского опыта. По его словам, это решение сократит число действий для решения задач, повысит конверсию в успешные сделки и позволит платформе лучше понимать намерения клиентов. Запуск ИИ-помощников является ответом компании на запросы рынка. Согласно внутренним исследованиям Авито, 59% пользователей заходят на платформу без четкой цели, при этом 43% уже готовы доверить выбор искусственному интеллекту. На дальнейшее развитие этих технологий в следующем году компания планирует направить около миллиарда рублей.

🚀 MiniMax M2.1 - теперь open-source и один из лучших ИИ для разработчиков — топ-результаты на кодинговых бенчмарках (SWE, VIBE, Multi-SWE) — в ряде тестов обгоняет Gemini 3 Pro и Claude Sonnet 4.5 — MoE-архитектура: активны 10B параметров (230B всего) И это не только цифры модель очень быста в инференсе и просто в деплоится, её можно запустить даже локально. https://huggingf ce.co/MiniMaxAI/MiniMax-M2.1

✔ Маленькая модель - крутой результат: LFM2-2.6B-Exp набирает 42% на GPQA Для модели всего 2,6 млрд параметров такой балл обычно недостижим его ждёшь от куда более крупных систем. Фокус в том, что команда не меняла архитектуру. Они просто добавили RL поверх того же чекпоинта: модель генерирует ответы, получает оценку по задаче и обучается чаще выдавать выигрышные варианты. Почему это важно GPQA - жёсткий набор по научным вопросам, где «угадывание по шаблону» не работает. Что внутри LFM2-2.6B • гибрид: 22 слоя + 8 слоёв внимания • контекст — до 32 768 токенов • веса в bfloat16 ⚡ грамотный дизайн наград + RL способны сильно поднять качество даже у маленьких моделей — без усложнения архитектуры. https://huggingface.co/LiquidAI/LFM2-2.6B-Exp

🚀 FineTuningLLMs - понятный и честный разбор fine-tuning LLM FineTuningLLMs - гайд который объясняет тонкую настройку языковых моделей без лишней теории. Здесь показывают, как fine-tuning работает на самом деле, где он действительно нужен, а где его использование излишне. Автор последовательно разбирает весь путь - от подготовки данных до оценки результата. Особое внимание уделено тому, как формат данных и инструкция влияют на поведение модели после обучения. Хорошо видно, почему плохой датасет нельзя «исправить» даже «хорошим» обучением. Ее каждую задачу стоит решать дообучением, иногда промптинг или RAG дают тот же эффект быстрее и дешевле, а fine-tuning оправдан только там, где нужно устойчивое поведение модели. Минимум магии, максимум практического смысла и здравого инженерного подхода. https://github.com/dvgodoy/FineTuningLLMs/

🎄 К Новому году Yandex Cloud и Forbes подготовили особый подарок для CDO, дата-инженеров и аналитиков! Что, если работа с данными превратится в увлекательную игру во вселенной, вдохновленной классикой — «Героями меча и магии»? ⚔️📊 Игра превращает привычные инструменты обработки данных (PostgreSQL, ClickHouse, Trino, DataLens и другие) в могущественные артефакты. Их можно получить у хранителей или создать самому в кибер-кузнице 🔧✨ В проекте можно найти пасхалки на любимую игру и примеры бизнес-сценариев из финтеха, ритейла и промышленности: помогите персонажам побороть дата-хаос и прокачать навыки работы с данными. Игра доступна на десктопе и телефоне 📱💻 На лендинге также собраны проекты компаний, которые уже используют возможности Yandex Cloud для решения бизнес-задач с данными. Поиграй и вдохновись работой с данными в новом формате! 👉 Играй и узнай больше

🖥 NVIDIA открыла исходный код CUDA Tile dialect и байткода. Компания выложила в open source проект CUDA Tile, который расширяет экосистему MLIR и даёт разработчикам новые инструменты для генерации CUDA-кода на более низком и контролируемом уровне. Что входит в релиз: - CUDA Tile MLIR dialect - Поддержка сериализации и десериализации байткода - Python-биндинги для MLIR, позволяющие программно строить IR - Набор conformance-тестов Что это даёт разработчикам: - Возможность напрямую интегрировать CUDA Tile в свои проекты - Генерацию CUDA Tile dialect или байткода нативно через MLIR - Более тонкий контроль над вычислениями и оптимизациями под GPU CUDA Tile - это шаг к более модульной, компиляторно-ориентированной экосистеме CUDA, где управление вычислениями смещается с ручного CUDA-кода в сторону формальных IR и автоматических оптимизаций. Проект стал результатом совместной работы нескольких команд внутри NVIDIA и подчёркивает стратегию компании по развитию MLIR как ключевого слоя для будущих GPU-вычислений. • NVIDIA Developer: https://developer.nvidia.com/cuda/tile • CUDA Tile Specification: https://docs.nvidia.com/cuda/tile-ir/13.1/index.html

Развернуть PostgreSQL в MWS Cloud Platform ⬜️ — быстрее, чем вспомнить пароль от pgAdmin. И точно быстрее, чем объяснить DevOps'у, зачем ещё одна база. Всего несколько минут и у вас:

⏺️готовая база на сетевых или локальных дисках ⏺️постоянный primary endpoint ⏺️безопасное подключение через Private Link ⏺️автоматические бэкапы и обслуживания по твоему расписанию

🎄🎁 И грант до 10 000 ₽ на запуск — чтобы точно не пришлось вспоминать, как настраивать failover вручную. ➡️Развернуть кластер

⚡️ FAANG software engineer рассказал, как на самом деле выглядит «vibe coding» в FAANG Спойлер: это не просто сидеть и писать код с ИИ. Большая часть работы происходит до того, как ты вообще откроешь редактор. Как это выглядит на практике: 1. Technical Design Doc Всё начинается с дизайн-документа. Это proposal, где ты доказываешь, что идея имеет смысл. Нужно согласие стейкхолдеров, команд и архитекторов. Здесь делается львиная доля работы. 2. Design Review Дизайн-док проходит жёсткий разбор у senior-инженеров. Документ буквально «разрывают». И это нормально - боль просто переносят в начало, чтобы потом не чинить продакшн. 3. Детализация подсистем После одобрения дизайн-дока команды несколько недель дописывают документацию по каждому подсервису и компоненту. 4. Backlog и спринты Dev, PM и TPM вместе дробят систему на конкретные задачи и выстраивают порядок их реализации. 5. Разработка (вот тут появляется vibe coding) Только теперь начинается кодинг. Используется TDD: - сначала ИИ-агент пишет тесты - затем тот же агент помогает реализовать фичу ИИ здесь не замена инженеру, а мощный ускоритель. 6. Code Review Перед мержем нужно одобрение двух разработчиков. ИИ всё чаще помогает и на этапе ревью. 7. Staging и production Сначала тесты и проверка в staging. Если всё ок - деплой в прод. Главный вывод: В FAANG «vibe coding» работает только потому, что вокруг него стоит жёсткая инженерная дисциплина, дизайн-доки и процессы. ИИ ускоряет выполнение задач, но не отменяет системное мышление и архитектуру. reddit.com/r/vibecoding/comments/1myakhd/how_we_vibe_code_at_a_faang/