CGIT_Vines

А помните EBSynth - тот алгоритм, что работал совсем не на нейронках, а на векторфилдах? Тогда ему требовалось некоторое количество времени для вычислений. Теперь ее доработали, и она работает реалтайм. https://youtu.be/TZ0W5UQ5mrQ https://ondrejtexler.github.io/patch-based_training/

Небольшое, но залипательное видео где показывают новый подход для симуляции повреждений у 3D объектов: https://youtu.be/eXJi7pkUZn0?t=237 Надеюсь выйдет такая игра, где все что можно будет делать, это есть стейки палочками как в видео ✨

Программное обеспечение с открытым кодом AI Economist на базе ML разработана для того, чтобы параллельно моделировать миллионы лет экономики и помочь экономистам, правительствам и другим лицам планировать налоговую политику, которая оптимизирует социальные результаты в реальном мире. Жду, когда наиболее жизнеспособные варианты отдадут на реальные тесты в metaverse/ https://youtu.be/4iQUcGyQhdA Большая исследовательская работа на тему поиска налоговой политики/ https://blog.einstein.ai/the-ai-economist/

Дэвид Боуи в роли Зигги Стардаст UE4 8K Real-Time, работающий на Nvidia 2080ti. Тут брейкдаун

Как известно, пока наибольшее количество заслуг у нейрогенерации пока все же в 2D. Дайте время, они только начали в 3D. https://arxiv.org/abs/2004.13297

Фестивальное кино "Windup", сделанное на Unity. Да, это тот самый проект, который презентовали 2 года назад как тест. О качестве судите сами, тут важнее то, что не только на Unreal делают мульты. Есть решения для facial capture на IphoneX. Делают небольшой удаленной командой из США, Китая, Швеции, Франции, Испании и Канады.

Сейчас большое количество людей начинают интересоваться созданием больших или маленьких студий для Virtual Production, и в связи с увеличенным количеством запросов ко мне я нашел небольшой гайд от эпиков для старта. Сделать простую студию уже можно в домашних условиях, так что я буду стараться поддерживать здесь эту тему и энтузиастов или студии, которые начали этим заниматься. В 4.25 уже будет production ready raytracing + ControlRig - все это звучит более заманчиво для начала экспериментов. На видео - клип, собранный как раз с VP инструментарием.

SpatialFirst занимаются тем, что позволяют переносить трехмерные пространства в AR. Большие пространства, не пропсы. Можно посмотреть на примере звонка в Zoom и вместо окружения своей квартиры использовать любой трехмерный фон, который будет привязан к вашему положению в пространстве. В этом видео чуть подробнее

Кстати это не единственный инструмент с использованием дополненной реальности от Shopify. В 2018 году они запустили Shopify AR, а потом и Shopify 3D, чтобы помочь магазинам создавать 3д-модели своих товаров. Тогда это был интересный эксперимент и вау-эффект. Сейчас циферки посчитаны и понятно, почему Shopify нанимает AR/VR разработчиков, дизайнеров и исследователей (прост напишите сообщение в твиттор главе их AR/VR-отдела, он классный twitter.com/pushmatrix/status/1253028976118939649?s=21) Ну а цифры такие: • 3д-модели продуктов в дополненной реальности увеличивают конверсию на странице товара до 250% • пользователи, взаимодействующие с 3д-моделью, на 44% больше добавляют этот товар в корзину и на 27% больше покупают его, чем те, кто просто залипал на фото и видео • те, кто смотрит товар в AR, вообще покупают его на 65% больше остальных

Последние события, по крайней мере у меня в голове, но думаю, что и у вас, укрепили мысль о том, насколько важно цифровое пространство, что мы создали за последние 20 с лишним лет. Очевидно, сеть прошла испытание, и бессознательно мы понимаем, что она получила глобальный кредит доверия, даже больший чем медицина. Она уже стала нашим неокортексом и совершенно точно продолжит развиваться. Наши взаимосвязи станут ещё крепче, и мы будем зависеть от нее ещё больше. Идеи новой сети давно придуманы: она будет более геймефицирована, социальна и вберет в себя максимальное количество наших активностей, она станет хабом нашего существования. Её условное название - Metaverse. Возможно, она не появится в вашем горизонте внимания, как не появляется Telegram, или TikTok, или Like в обиходе ваших родителей, это сеть для следующего поколения. В небольшой статье Washington post рассказали, почему ближе всего к этой трансформации готовы игры, подобные Fortnite. К слову сегодня прошел многомиллионный ивент с музыкантом Travis Scott. Статья https://youtu.be/zavUDoptwQs

Плагин от Nvidia для шумоподавления. Если у вас RTX карточка, то велкам на тесты. Обновление, вот гайд как запустить на более старых картах

Плагин с динамическими риалтаймовыми небесами для UE4, про который я писал недавно, вышел из бэты, теперь его можно купить за скромные $15.

Мы стали слишком много заказывать. Поэтому для доставки теперь есть экзоскелеты. А может, все же гений?

Ух, вот это реально должно быть годнотой: 3D реконструкция лица для карикатур с использованием нелинейной параметрической модели. Исходники тут.

Интересный перевод статьи про рейтрейсинг в Minecraft. И подробный разбор от Digital Foundry с разработчиками Nvidia о том, как они работали над алгоритмами рендеринга. Не нужно думать, что Minecraft был выбран, потому что он выглядит простым. Во-первых, алгоритмы просчета одни и те же, во-вторых, в игре есть возможность использовать текстуры высокого разрешения. Minecraft сейчас является просто полигоном для разработки тех алгоритмов, которые будут в перспективе использоваться повсеместно. Краткий текстовый обзор

В последнем обновлении на Magic Leap добавили новую систему ручного ввода. По видео видно, есть некоторое запаздывание, и окклюзия работает весьма драфтово.

Художник, скульптор и дизайнер KAWS в коллаборации с платформой смешанной реальности Acute Art запустил ивент EXPANDED HOLIDAY. Его можно посмотреть через приложение Acute Art. Действительно хорошие работы в дополненной реальности за последнее время.

Как раз думал недавно, куда подевались все анимационные кейсы, сделанные на ue4. Южная Корея продолжает эксперименты с риалтаймовой анимацией. Снимают один полный метр и один сериал уже с поддержкой рейтрейсинга. Рассказывают про тех.процесс, что ассетное производство немного удешевили с Megascans и Houdini Digital Asset. Кстати, компания NCAM занимается готовыми решениями для виртуал продакшен. Статейка: https://www.unrealengine.com/en-US/tech-blog/real-time-unlocks-new-animation-workflows-and-opportunities-for-vfx-studio-mofac

Сравнение Hyprface SDK с AR Emoji от Samsung: захват на расстоянии, отслеживание нескольких лиц, захват при тусклом освещении, скорость захвата - почти по всем параметрам Hyprface выигрывает. Попробовал сам - захват, в целом как и все похожие решения, не идеален. Для желающих поковырять триальный SDK вот линк. Кстати, если кто-то знает хорошие решения для лицевого рига через мобилки, кидайте в личку. Кроме Babyface, конечно. https://youtu.be/0K_Gab7tJfk

Прекрасный рабочий пример того, как выглядит ремонт или покупка пустой квартиры с возможностью примерить меблировку заранее. Сделано на Unity в коллабе с Matterport. К слову, продукты, аналогичные Matterport, уже доступны на телефонах. Архвизеры уже могут брать в работу. https://youtu.be/o96Ij6kX6QI