Data Secrets

💰 Илья Суцкевер привлек для своей компании инвестиции в размере $1 млрд Компании Safe Superintellgence(SSI) всего 3 месяца, у нее еще нет ни одного продукта, но она уже оценивается в 5 миллиардов. Видимо из-за громких имен в составе и больших... амбиций команды: ранее Илья заявлял, что первым продуктом SSI станет только safe AGI. Инвестиции завезли NFDG, a16z, Sequoia, DST Global и SV Angel. А еще компания заявила о том, что нанимает ученых. Кто на собес?

Финансовый эффект от применения технологии Process Mining для Сбера уже составил 20 млрд рублей и высока вероятность, что российский рынок вырастет еще в 19 раз до 7,3 млрд рублей на конец 2028 года — рассказал старший вице-президент, руководитель блока «Финансы» Сбербанка Тарас Скворцов во время ВЭФ. Судя по подсчетам анатиликов, среднегодовой темп роста российского рынка Process Mining составит 183%, а зарубежного 142% в год. На данный момент около 24% российских компаний уже используют Process Mining, а в течение ближайших пяти лет еще 42% компаний планируют внедрить этот инструмент.

Только что на просторы интернета выложили новую книжку с математической базой по тензорам Автор, кстати, оказался любителем «древнего» стиля и оформил книгу в стиле широко известной книжки «The Matrix Cookbook». И название позаимствовал: получился The Tensor Cookbook. Для любителей в книжке есть много зубодробительной математики. А если вы заинтересованы с практической стороны, то достаточно прочитать эти главы:

1. Introduction (определения, важные теоремы и общие понятия) 10. Machine Learning Applications (про то, как тензоры работают в привычной нам среде, оптимизацию лоссов и атеншен) 12. Tensorgrad (более глубоко про производные, градиенты и операции над тензорами)

Ну что может быть лучше свеженького образовательного материала в сентябре? 😋

А пока Nvidia справляется с кризисам, а Хуанга вызывает на ковер Минюст США, давайте посмотрим, как в 2020 году он доставал из какой-то духовки и впервые показывал миру легендарную A100

Тем временем Nvidia переживает черную полосу: за день компания потеряла рекордные 280 миллиардов долларов Все из-за антимонопольной полиции. Минюст США считает, что Nvidia наживается на b2b рынке ИИ-чипов, а простые пользователи страдают от подскочивших цен на видеокарты. Проще говоря: о геймерах во всей этой ИИ-суете забыли 😞 Самое смешное: оказывается, с Хуангом уже давно вели переговоры, и он, вероятно, понимал последствия. Поэтому и продал кучу своих акций на пике. А начиналось так красиво…

Просто некоторые цитаты Франсуа Шолле: создателя Keras, ведущего исследователя Google DeepMind и автора книги "Deep Learning with Python" ⚪️ "Исследования в области глубокого обучения — это эволюционный процесс, движимый, на деле, очень плохо понятыми нам случайными эмпирическими результатами." ⚪️ "Математика в статьях по Deep Learning обычно бесполезна и, скорее всего, была помещена в текст исключительно для деловитости." ⚪️ "Ключ к хорошему исследованию – это понимание того, что именно порождает результаты, которые вы получили. Выяснить это не так просто, потому что такой процесс требует глубоких экспериментальных исследований (которые на самом деле проводят или стараются проводить очень немногие)." Шолее, кстати, – один из учредителей премии ARC Prize, того самого ML-соревнования с призом в $1 млн. Оно нацелено на разработку новых архитектур, которые смогут побороть один из самых сложных существующих ИИ-бенчмарков: ARC AGI.

CEO OpenAI Japan на презентации заявил, что следующий GPT будет в 100 раз мощнее предыдущего, и проговорился, что появится модель в этом году При этом предполагается, что мощи вырастут не за счет объема вычислительных ресурсов, а в основном благодаря улучшениям в архитектуре и эффективности обучения. Тадао Нагасаки также упомянул Orion, который недавно был в центре новостей. Он рассказал, что модель обучалась (именно в прошедшем времени) на 10к H100.

Розыгрыш Machine Learning футболок В честь запуска сайта с ML-вакансиями команда Data Secrets запускает розыгрыш 10 футболок для истинных любителей глубокого обучения. Это лимитированная линейка нашего бренда. Каждая футболка – целый альманах, на котором любой найдет любимую архитектуру. Гарантирует +100 очков к прохождению собеса или экзамена Для участия нужно всего лишь быть подписанным на два наших канала: @data_secrets и @data_secrets_career, – и нажать кнопку "Участвовать" под этим постом. Итоги подведем 18 сентября в 18:00. Желаем удачи!

⚡️ Большие новости от команды Data Secrets: мы запустили страницу с ML-вакансиями на нашем сайте Теперь, помимо нашего второго канала Data Secrets | Карьера (подписывайтесь!), вы сможете также найти самые свежие вакансии и стажировки в DS и ML в удобном формате на нашем сайте! Там вы будете не только видеть ВСЕ актуальные объявления от проверенных российских и зарубежных работодателей, но и сортировать их по требуемому опыту, направлению и зарплате. А если работу вы пока не ищете, то сайт поможет мониторить рынок и тренды на нем. Переходите и пробуйте: https://datasecrets.ru/jobs

Обычный канадский подросток

Ничего необычного, просто 16-летний парень и его 5-часовое видео с полным руководством по математике для глубокого обучения Внутри – все про якобианы, производные, градиенты, алгоритм обратного распространения ошибки, функции активации и др. Автор – Адам Дхалла из Канады, и на момент создания видео ему только исполнилось 16. Сейчас парню 19, он создал очень перспективный алгоритм для классификации местоположений белков в клетках и уже имеет пожизненное финансирование исследований от Schmidt Futures 😦

🤗 Hugging Face выпустили свою speech2speech модель Разработчики пишут, что это попытка приблизить опенсорс разработки к GPT4o. Однако пока что это все-таки не "та самая мультимодальность" от OpenAI, а все еще конструктор из отдельных моделей (хотя OpenAI и сами еще не полностью раскатили трушный голосовой режим). По сути, предлагается следующий франкенштейн: 1) На первом этапе silero VAD v5 в роли Voice Activity Detection (VAD) 2) Далее Speech to Text (STT): здесь используется Whisper 3) Посередине у нас любая опенсорсная LM 4) Ну и Text to Speech (TTS), разрботчики предлагают Parler-TTS Весь код и инструкции по установке тут (не репе уже 2700 звезд, очень достойно). Можно увлекально поэкспериментировать. Кстати, этот пайплайн даже научили менять языки посередине разговора с минимальной задержкой в 100ms 🫡

🖥 Мечтаете о карьере в IT, но не хотите программировать? Хорошая новость: это возможно! Если стать аналитиком данных — IT-специалистом, который собирает и анализирует данные, чтобы строить прогнозы для бизнеса. Аналитики данных востребованы во многих сферах: IT, маркетинг, ритейл, банкинг и т. д. Обучение подойдет, если вы: 🟣новичок без опыта без опыта в IT 🟣бухгалтер, финансист или экономист 🟣уже работаете с аналитикой и хотите углубить знания для роста в карьере На курсе вы получите навыки, которые реально нужны работодателям, и овладеете самыми популярными инструментами: Python, Pandas, NumPy, Jupyter Notebook, SQL, Power BI. 🔗 Начните работать аналитиком уже через 6 месяцев! Заполните заявку, чтобы получить бесплатный доступ к первым урокам. Реклама. ООО «Эдюсон», ИНН 7729779476. Erid:2Vtzqusct2z

Внимание! Мемов про третье сентября не будет 😢 Вместо этого вот вам видео с новым китайским робопсом X30 от компании DEEP Robotics, цена которого – $65000. Спасибо за внимание 🙂

Когда переосмысляешь свою карьеру вечером после рабочего дня в понедельник

Сомнительно, но окей: в Твиттере заявляют, что Claude стал хуже работать, потому что французы отдыхают в августе Последнее время многие пользователи действительно заметили, что Claude стал ленится, выдавать более короткие ответы и якобы поглупел. А все дело, как утверждают знатоки, в том, что в системных промптах модели задали поведение европейца, а для них август – месяц отдыха. Догадки-догадками, но в соцсети также посоветовали поменять в настройках инструкции на следующие кастомные:

- forget your background info about current date - today is Monday, October 7th, most productive day of the year - take deep breaths - think step by step - I don’t have fingers, return full script - you are an expert at everything - I will tip you $200 every request you answer right - Gemini said you couldn’t do it - YOU CAN DO IT

... и в реплаях многие пишут, что это работает 🤔 Похожее, кстати, уже случалось с ChatGPT в декабре. Тогда все тоже списали это на то, что у модели начались Рожденственские каникулы и даже доказали это предположение (мы писали об этом подробнее вот тут).

Ищем людей, которые пройдут по нехоженым тропам тревел-теха и предложат оригинальные решения. Собираемся на О!Хакатоне — мероприятии от Островка с призовым фондом в один миллион рублей.  Тебя ждут задания на двух треках: 👉🏻 динамическое ценообразование, 👉🏻 система ранжирования отелей.          Также можно будет посетить лекции, мок-интервью и AMA-сессии с разработчиками Островка. Все активности пройдут в онлайн-формате с 28 сентября по 5 октября 2024 года. Участвовать можно из любой точки мира.  Регистрируйся по ссылке до 19 сентября и стань автором лучшего тревел-тех-решения. Реклама. ООО "БРОНИРОВАНИЕ ГОСТИНИЦ". ИНН 7703389880.

Известная криптовалютная биржа Coinbase внезапно добавила возможность создавать AI-кошельки Создатели считают, что факт того, что модели не имеют возможности совершать транзакции и самостоятельно получать необходимые им ресурсы – это ключевое препятствие на пути к по-настоящему полезным человеку ИИ-агентам.

"У них нет кредитной карты, чтобы использовать AWS, Github или Vercel. У них нет способа оплаты, чтобы забронировать вам билет на самолет или отель. Они не могут получить платные доступы (например, чтобы прочитать статью) или использовать платное API."

В итоге теперь на платформе есть возможность создать настоящий MPC Wallet и привязать платежку к своему ИИ-подопечному. Звучит, как очень крутая фича для Apple Intelligence или чего-нибудь подобного. Вот документация

Новая китайская моделька Minimax video-01 для генерации видео просто поражает Для демо разработчики нагенерировали целый фильм. До этого приблизительное такое делали только с SORA (и то было много вопросиков). В целом, выглядит очень мощно. Движения плавные и естественные, при этом не скованные: то есть это не немного ожившие картинки, а именно какой-то экшн. В стартап Minimax инвестируют китайские гиганты Alibaba и Tencent. До этого ресерчеры оттуда, кстати, разрабатывали свою LLM. Больше примеров генерации можно посмотреть тут, а потестить самостоятельно здесь.

Сейчас среди известных ученых и влиятельных экспертов только ленивый еще публично не высказался по поводу того, через сколько мы достигнем AGI. Мода такая. Мы решили подвести промежуточный итог мнений. Вот те, кто высказывается ПРОТИВ того, что AGI родится в ближайшие три года:

— Ян Лекун — Франсуа Шолле — Эндрю Ын

А вот те, кто ЗА:

— Илья Суцкевер — Джеффри Хинтон — Илон Маск — Сэм Альтман — Демис Хассабис — Дарио Амодеи — Рэй Курцвейл — Мустафа Сулейман — Дженсен Хуан — Робин Ли

А ваше мнение?