3D ML / World Models
رفتن به کانال در Telegram
Работа с 3D-данными с помощью машинного обучения Обо всем, что на стыке машинного обучения, компьютерной графики и компьютерного зрения, с красивым визуалом и долей иронии от компании PHYGITALISM. Автор: @olegyusupov https://linktr.ee/phygitalism
نمایش بیشتر638
مشترکین
اطلاعاتی وجود ندارد24 ساعت
+17 روز
+130 روز
در حال بارگیری داده...
کانالهای مشابه
ابر برچسبها
هیچ دادهای
مشکلی وجود دارد؟ لطفاً صفحه را تازه کنید یا با مدیر پشتیبانی ما تماس بگیرید.
اشارات ورودی و خروجی
---
---
---
---
---
---
جذب مشترکین
اکتبر '26اکتبر '26
اکتبر '26
+1
در 0 کانالها
سپتامبر '260
در 0 کانالها
Get PRO
اوت '260
در 0 کانالها
Get PRO
ژوئیه '260
در 0 کانالها
Get PRO
ژوئن '260
در 0 کانالها
Get PRO
مه '260
در 0 کانالها
Get PRO
آوریل '260
در 0 کانالها
Get PRO
مارس '260
در 0 کانالها
Get PRO
فوریه '260
در 0 کانالها
Get PRO
ژانویه '260
در 0 کانالها
Get PRO
دسامبر '250
در 0 کانالها
Get PRO
نوامبر '250
در 0 کانالها
Get PRO
اکتبر '250
در 0 کانالها
Get PRO
سپتامبر '250
در 0 کانالها
Get PRO
اوت '250
در 0 کانالها
Get PRO
ژوئیه '250
در 0 کانالها
Get PRO
ژوئن '250
در 0 کانالها
Get PRO
مه '250
در 0 کانالها
Get PRO
آوریل '250
در 0 کانالها
Get PRO
مارس '250
در 0 کانالها
Get PRO
فوریه '250
در 0 کانالها
Get PRO
ژانویه '250
در 0 کانالها
Get PRO
دسامبر '240
در 0 کانالها
Get PRO
نوامبر '24
+6
در 0 کانالها
Get PRO
اکتبر '24
+3
در 0 کانالها
Get PRO
سپتامبر '24
+3
در 0 کانالها
Get PRO
اوت '24
+2
در 0 کانالها
Get PRO
ژوئیه '24
+3
در 0 کانالها
Get PRO
ژوئن '24
+3
در 0 کانالها
Get PRO
مه '24
+5
در 0 کانالها
Get PRO
آوریل '24
+7
در 0 کانالها
Get PRO
مارس '24
+2
در 0 کانالها
Get PRO
فوریه '24
+15
در 0 کانالها
Get PRO
ژانویه '24
+2
در 0 کانالها
Get PRO
دسامبر '23
+19
در 0 کانالها
Get PRO
نوامبر '23
+11
در 0 کانالها
Get PRO
اکتبر '23
+8
در 0 کانالها
Get PRO
سپتامبر '23
+25
در 0 کانالها
Get PRO
اوت '23
+24
در 0 کانالها
Get PRO
ژوئیه '23
+10
در 0 کانالها
Get PRO
ژوئن '23
+3
در 0 کانالها
Get PRO
مه '23
+6
در 0 کانالها
Get PRO
آوریل '23
+9
در 0 کانالها
Get PRO
مارس '23
+7
در 0 کانالها
Get PRO
فوریه '23
+9
در 0 کانالها
Get PRO
ژانویه '23
+10
در 0 کانالها
Get PRO
دسامبر '22
+11
در 0 کانالها
Get PRO
نوامبر '22
+16
در 0 کانالها
Get PRO
اکتبر '22
+5
در 0 کانالها
Get PRO
سپتامبر '22
+18
در 0 کانالها
Get PRO
اوت '22
+23
در 0 کانالها
Get PRO
ژوئیه '22
+13
در 0 کانالها
Get PRO
ژوئن '22
+37
در 0 کانالها
Get PRO
مه '22
+30
در 0 کانالها
Get PRO
آوریل '22
+53
در 0 کانالها
Get PRO
مارس '22
+59
در 0 کانالها
Get PRO
فوریه '22
+21
در 0 کانالها
Get PRO
ژانویه '22
+36
در 0 کانالها
Get PRO
دسامبر '21
+52
در 0 کانالها
Get PRO
نوامبر '21
+85
در 0 کانالها
Get PRO
اکتبر '21
+126
در 0 کانالها
Get PRO
سپتامبر '21
+75
در 0 کانالها
Get PRO
اوت '21
+9
در 0 کانالها
Get PRO
ژوئیه '21
+20
در 0 کانالها
Get PRO
ژوئن '21
+38
در 0 کانالها
Get PRO
مه '21
+233
در 0 کانالها
| تاریخ | رشد مشترکین | اشارات | کانالها | |
| 13 اکتبر | +1 | |||
| 12 اکتبر | 0 | |||
| 11 اکتبر | 0 |
پستهای کانال
@goldybin
Google + Unity: Playground и Unity Spark - генерация полноценных интерактивных игр промптами
7 октября Google и Unity официально объявили стратегическое партнерство и одновременно запустили Playground - экспериментальную AI-платформу, где игру можно создавать и переделывать обычным текстом. Это уже доступный продукт, а не исследовательское демо. blog.google
Playground позволяет с нуля задавать промптами:
персонажей и окружение;
правила игры;
физику;
игровую механику;
затем сразу запускать результат в браузере;
публиковать игру или отправлять ссылкой;
для некоторых жанров есть multiplayer и leaderboards. blog.google
Это закрытая платформа, никаких весов или локального запуска нет. Сегодня она стартовала для пользователей 18+ в США, а объем доступной генерации зависит от уровня Google One. Цены Google пока публично не раскрыла. blog.google
Вторая часть интереснее - Unity Spark. Это новый браузерный AI-инструмент Unity, который подключат к Playground позднее в 2026 году. Unity обещает полноценный Unity runtime, более сложную игровую механику, high-fidelity 3D и прямое использование ассетов из Unity Asset Store. Закрытая beta ожидается скоро. Unity
Источники:
https://blog.google/innovation-and-ai/technology/ai/playground-experimental-gaming-platform/
https://unity.com/news/google-and-unity-partner-on-new-ai-gaming-platform-for-the-next-era-of-interactive-entertainment
https://unity.com/blog/why-we-built-unity-spark
| 2 | https://github.com/Gen-Verse/JEPA-Anything | 71 |
| 3 | https://x.com/madaoer_yxd/status/2106380661502419081?s=46 | 88 |
| 4 | Дико интересная статья про пространство смыслов, которое не зависит от конкретного языка.
Самое захватывающее в том, что его нашли и у кожаных в мозгу и у LLM в "средних слоях".
Итак, исследование показывает, что, несмотря на различия в языках (звуки, алфавиты, синтаксис), их смысловые представления в мозге схожи и могут быть смоделированы нейросетевыми языковыми моделями (LLMs). И человеческий мозг, и LLMs создают сходное "пространство концепций", объединяющее разные языки.
Использовались данные fMRI людей, слушавших одну и ту же историю («Маленький принц») на английском, китайском и французском языках.
Применялись воксельные модели кодирования, связывающие эмбеддинги слов из BERT и Whisper с активностью мозга.
Сравнивались одноязычные модели (uBERT) и многоязычная модель (mBERT), а также мультимодальная модель (Whisper).
Результаты
Сходство представлений: Даже одноязычные модели BERT формируют сходные концептуальные пространства, особенно в средних слоях.
Мозговая активность в зонах, отвечающих за понимание, схожа у всех разно-язычных групп людей
Кросс-языковая генерализация: Модели, обученные предсказывать активность мозга для одного языка, могут предсказывать активность для других языков, если история одинакова по смыслу.
Речь и текст: Whisper выявляет общие фонетические и акустические паттерны между разными языками, которые также отражаются в активности мозга.
Итого:
Смысловое восприятие в мозге не зависит от формы языка.
Как мозг, так и LLMs кодируют концепции в высокоразмерном пространстве (область смыслов\концепций?), где смысловые структуры совпадают для разных языков, иначе говоря, нейронные репрезентации смысла, лежащие в основе разных языков, являются общими для носителей разных языков, и что языковые модели, обученные на разных языках, сходятся на этом общем значении
Общие концептуальные представления формируются благодаря взаимодействию людей с окружающим миром, а не только особенностям языка.
Тут интересно поразмышлять, в каком пространстве мы мыслим - ближе к языку или к вот этим вот скрытым смыслам?
https://paperswithcode.com/paper/brains-and-language-models-converge-on-a
@cgevent | 103 |
| 5 | https://x.com/kirkdborne/status/2103814218503852274?s=46 | 121 |
| 6 | https://x.com/bonniesjli/status/2103590425315754287?s=46 | 123 |
| 7 | Пользователи Алисы AI Про и Yandex AI Studio теперь могут подключиться через MCP к Phygital+ и создать креативных агентов прямо в интерфейсе «Яндекса», для того чтобы автоматизировать креативные задачи:
🔹 собрать карточку для маркетплейса из фото товара и характеристик;
🔹 сделать баннер из текстового брифа;
🔹 собрать диалоговый ролик из наброска сценария;
🔹 сгенерировать видео с продуктом по ссылке на товар;
Подробности — в презентации Дарьи Мухиной, СРО Phygital+, на Yandex Scale, сегодня в 14:00. Если ваша команда хочет собирать креативы в 3–10 раз быстрее и эффективнее, то это выступление точно для вас.
Смотрите онлайн, бесплатно. | 123 |
| 8 | https://x.com/jackson_coder1/status/2102732695923216429?s=46 | 106 |
| 9 | https://lnkd.in/p/eHSxG-9r | 206 |
| 10 | Ответочки по генераторам миров.
Runway бахнули GWM Worlds 2, это типа непрерывный видеомир, который генерируется на лету и реагирует на действия пользователя.
Если тупо: GWM Worlds 2 пытается заменить игровой движок генерацией. Не полностью и пока очень сыро, но концептуально именно так.
Что внутри:
На старте задаются окружение, персонажи, визуальный стиль, атмосфера и правила мира. И один стартовый кадр. Мульти-референсного режима для отдельных персонажей, объектов и стиля Runway не заявляет. После запуска пользователь продолжает взаимодействовать с этим же миром: отдаёт команды отдельным персонажам, меняет сцену, двигает камеру, вызывает новые события.
Runway заявляет генерацию 720p при 24 fps со звуком 48 kHz в реальном времени. Ээ-ээ. Ну ок. Вон Минимакс Макс стримит, просто я еще не привык.
Например, можно создать сцену с корованами и грабежом в пустыне, а затем во время сессии заставить их идти, взаимодействовать с объектами, изменить погоду или освещение и одновременно свободно двигать камеру. Для игровых корованных демо текстовые команды можно привязывать к клавишам и мыши, поэтому со стороны это начинает выглядеть почти как обычная игра.
Это развитие прошлогоднего GWM-1 - General World Model, который Runway представила как фундамент для нескольких направлений: Worlds, Avatars и Robotics.
В GWM-1 ветка Worlds уже показывала идею интерактивных генерируемых окружений, но Worlds 2 делает следующий шаг: Runway отдельно подчёркивает непрерывную audiovisual-генерацию, управление несколькими субъектами, свободную камеру и возможность менять сам мир во время сессии.
GWM Worlds 2 остаётся генеративной audio-video моделью. Runway описывает её как autoregressive diffusion model: новые кадры строятся на основе исходного описания мира, первого кадра, предыдущей генерации и текущих действий пользователя.
Это означает, что модель не обязана хранить точное постоянное 3D-состояние каждого объекта. Runway сама предупреждает, что на длинных сессиях могут постепенно меняться геометрия, текстуры и детали, особенно при быстрых движениях камеры.
С физикой похожая история. Runway позволяет задавать правила вроде гравитации и столкновений, но это не означает наличие отдельного детерминированного физического движка. Модель скорее пытается визуально продолжать сцену в соответствии с заданными правилами.
Отдельно интересно появление синхронного аудио. Звук теперь является частью того же генерируемого мира: речь, ambience и звуковые события могут продолжаться вместе с видео.
В перспективе Runway видит применение GWM Worlds 2 в нузагеймдев, виртуальных персонажах, робототехнике и симуляциях embodied agents.
Сейчас GWM Worlds 2 находится в статусе research preview.
Это явно ответочка на Атлас: Runway двигается от генератора видео к модели, которая пытается быть самой средой, внутри которой можно действовать.
Кстати, я тут видел похожую поделку из говна и палок на базе Minimax H3 Max. Скоро опенсорс ответит.
Ссылки:
https://runway.com/research/introducing-gwm-worlds-2
https://runway.com/research/runway-game-worlds
А демо с тетенькой огонь... неужели без поста..?
@cgevent | 224 |
| 11 | https://x.com/rsasaki0109/status/2067804567660884432?s=46 | 409 |
| 12 | https://developer.nvidia.com/blog/pretrained-to-imagine-fine-tuned-to-act-the-rise-of-world-action-models/?ncid=so-nvsh-295997-vt48&source=everyonesocial&network=linkedin&userID=ffaed652-bd64-4c1e-92a8-7a4927915622&es_id=ad341e32ec | 386 |
| 13 | https://open.substack.com/pub/jonathankarl1/p/world-models?utm_campaign=post&utm_medium=web | 301 |
| 14 | Хорошая визуализация других подходов к анализу WM
https://x.com/furongh/status/2066203382117962182?s=46 | 334 |
| 15 | https://x.com/drfeifei/status/2062247238143996275?s=46 | 363 |
| 16 | https://x.com/venturetwins/status/2062288709786235269?s=46 | 326 |
| 17 | https://x.com/a16z/status/2062266181890031815?s=46 | 307 |
| 18 | https://www.linkedin.com/posts/debarghyadas_this-is-the-single-best-read-on-world-models-share-7460183179157544961-2Q-2?utm_source=social_share_send&utm_medium=ios_app&rcm=ACoAAAo229EBgUVwBUm62kNn262oyuBMAG5gFx0&utm_campaign=copy_link | 335 |
| 19 | https://x.com/junfanzhu98/status/2047030655440376214?s=46&t=IO_D6IRtK8iS_1pLCdDWnA | 363 |
| 20 | https://x.com/ivanlandabaso/status/2045779729920192659?s=46&t=IO_D6IRtK8iS_1pLCdDWnA | 401 |
