CGIT_Vines

Проект Атлас от magic leap. Есть в этом процессе что-то медитативное - оно как будто дышит. Почему-то так круто наблюдать за тем, как рождается пространство: это как скульптура, когда отсекается все лишнее, только тут обратный процесс - пространство выскульпчивается из цифры. https://youtu.be/9NOPcOGV6nU project: http://zak.murez.com/atlas/ paper: https://arxiv.org/abs/2003.10432 code: https://github.com/magicleap/Atlas

Небольшой отрывок из интервью Эндрю Прайса о том, как он преподавал блендер в тюрьме. Сразу вспомнился скандал с нашей исправительной колонией, где подпольно работала студия постпродакшена, состоящая из уголовников - моушендизайнеры строгого режима.

Виртуальные миры для мероприятий и развлечений, онлайновые конференции, выставки и тусовки — все это за несколько месяцев карантинов с разными названиями стало обретать серьезную форму: в начале-то, понятно, все делалось из говна и палок, лепилось на скорую руку из готового. И это было совершенно нормально, но теперь пришла пора изучать уже специально разработанные кастомные решения. Виртуальность не вытеснит реальность, конечно, но займет свое место рядом, и часто это будет выгодное и интересное место. Вот вам выросший рядом со знаменитыми музеями новенький и пока уникальный VOMA — Virtual Online Museum of Art. Конечно, пока далеко не MOMA, но есть потенциал 🙂 https://hypebeast.com/2020/8/voma-first-fully-interactive-virtual-museum-launch Для широкой публики https://voma.space откроется 14 августа

В который раз посчу работы Niki Studio и NoClip. Одни талантливо снимают документалки о разработке игр, другие талантливо их локализуют. Возможно от этого смотреть так интересно, конечно, в первую очередь тем, кто занят в игровой разработке. В этот раз 36 минут об особенностях дизайна Transistor игры от создателей Bastion. Я не являюсь фанатом этой серии, но смотреть за разработчиками и ходом мысли от этого не менее интересно. https://youtu.be/okcV79JJL78

С каких пор делают клипы на PS4? Я сейчас буду писать медленно, а вы читайте медленно. Media Molecule в своей игре Dreams на ps4 сделали вот такой графоний для клипа Ноа Сайрус на джойстиках для ps4! Звучит весьма странно, но выглядит достойно. Вообще, сообщество Dreams довольно большое, и туда регулярно постятся работы хорошего качества. Посмотрите, кому интересно. https://www.youtube.com/watch?v=Zpz9SoVx-TM

А вот это уже интересное смешение - семантическая модель, которая реагирует на контекст и позволяет управлять формами и классами объектов. Так я себе и представлял создание концептов, мы должны пройти через этот этап: выбираешь класс изображения, подкласс объекта, берешь кисть и рисуешь объекты заранее выданными маркерами. Описание PDF GIT

Как-то эта новость прошла мимо всех, по крайней мере я не видел постов о ней. Daniel Voshart пошел чуть дальше от единичного воссоздания личностей Давида и Сократа и сделал все портреты римских императоров, вооружившись Артбридером, фотошопом и историческими справками. Там реально не пара кликов - он брал несколько видов статуй с разных ракурсов, миксил их между собой, затирал трещины, чтобы это не мешало алгоритмам восстанавливать лица. В результате мы имеем лица 54 императоров (с 27 г. до н.э. до 285 г. н.э.). Ну и все это он выставил на продажу. https://link.medium.com/FwypB6kdo8

Еще одна новость заключается в том, что Weta Digital запускает виртуальное производство в Новой Зеландии. Если коротко: пророчат большое будущее VP, по их заявлениям это ускоряет процесс производства, добавляет удобства режиссеру и и гибкости на ранних этапах или полностью заменяет привычные этапы постпродакшена. Подробнее по ссылке.

Пока я отсутствовал, скопилось несколько новостей, и пора смахнуть с них нафталин. The Mill выпустила короткий ролик как дань уважения UE4. Концепция была сосредоточена на четырех столпах творчества: архитектуре, автомобилестроении, играх и медиа. К сожалению, доступно только по ссылке. https://www.themill.com/stories/the-mills-filfury-directs-a-film-of-epic-proportions-for-unreal/

Вот это реально охуенно: данные OpenStreetMap импортируются в Unity с использованием Houdini для создания сред реального времени на основе реальных городов. Все объекты в видео сгенерировано процедурно. Стащено отсюда

Laan Labs выпустили приложение для прошки. Лидар сканер, который не берет с вас деньги за выгрузку меша, которому не нужно облако и регистрация. За это придется заплатить качеством и скоростью)

В общем, я не знаю, что за пацаны, но выглядит просто супер охуенно - это лучший эпитет здесь. У них есть страница на стиме и есть вот такой ролик, судите сами) Игра выйдет в 2022.

Еще один схожий по идее обновленный алгоритм, но уже не для машин. Обычно подобные алгоритмы и люди работают по принципу поиска информации о недостающих кусках в соседних кадрах. Тут несколько иной подход. Какой - читайте в pdf, приложенном к работе. Полное видео Ссылка на работу

Epic заплатит вам $10 000 за обучение виртуал продакшену в UE4. Чтобы подать заявку на участие в программе Unreal Fellowship, вам необходимо не менее пяти лет опыта работы в сфере коммерческого кино и телевидения, развлечений или разработки игр.  Заявки закрываются в понедельник, 27 июля. Обучение будет проходить с 24 августа по 21 сентября 2020 года. https://www.unrealengine.com/en-US/fellowship

Не так часто в играх встретишь оригинальный подход к оружию, но иногда получаются прямо занятные экземпляры, как технически, так и визуально. Unity developer FickleSwimming разработал пушку, которая плавит предметы - выглядит реально круто, я бы с такой побегал, поплавил скалы или небоскребы.

Исследователи из MIT пришли к неутешительному выводу: глубокое обучение приблизилось к ограничению, связанному с вычислительными мощностями. Они проанализировали более 1000 научных публикаций на тему deep learning. Особенное внимание уделили таким применениям технологии как image classification, object detection, question answering, named entity recognition, and machine translation. Для каждой публикации оценили количество вычислительных операций и объем вычислительных мощностей, необходимых для создания модели определенной точности. Оказалось, что даже при значительном увеличении вычислительных мощностей точность современных моделей возрастает незначительно. За последние годы в области машинного обучения случилось много прорывов благодаря новым алгоритмам и доступным вычислительным мощностям. Но теперь этот рецепт, кажется, исчерпал себя. Исследователи предполагают, что для дальнейшего прогресса нужны новые, менее прожорливые алгоритмы, и новые техники глубокого обучения - возможно, еще не открытые. Исследование, статья

Тут довольно интересная схема восстановления сцены. Кто бы мог подумать из рядовых тридешников, что алгоритмы для работы с декомпозитингом изображения придут из автомобильной отрасли? В общем, есть проблема в автономном вождении: когда машина двигается по дороге, у нее нет четкого представления о ситуации на дороге, - для этого нужно полное понимание о трехмерной сцене; этому мешают другие автомобили, которые вносят свои переменные. Алгоритм решает задачу восстановления пространства без этих переменных, т.е., если понятнее, готовит клинплейт окружения. Тут, конечно, участвует, кроме софта, еще куча разнообразных датчиков. Как там, кстати, дела у The Foundry? https://arxiv.org/abs/2007.08854 https://arxiv.org/pdf/2007.08854.pdf

Никогда не был интересен Watchdogs, новая часть не исключение - абсолютно беззубая, особенно что касается арта. Но есть светлое пятно - это синематик, снятый Альберто Миэльго (тот самый чувак, что снял одну из серий "Witness" Love Death and Robots). Он, конечно, заложник своего стиля, но в контексте клипов или синематика это вполне работает. А вот мэйкиноф к нему, который смотреть не менее интересно.

Очередной тренд, вызванный пандемией, – корпоративные дипфейки. Британский холдинг WPP решил не тратить деньги на запись обучающих видеороликов для сотрудников, а вместо этого использовал синтетический контент. Компания сгенерировала виртуальную модель, которая зачитала текст о пользе искусственного интеллекта в маркетинге. Аватар произносит тексты на трех языках и обращается к каждому сотруднику персонально по имени. Создание 20 роликов продолжительностью по 5 минут каждый обошлось WPP в $100 тыс. Бизнес уже пару лет использует дипфейки, но обычно их применяют для продвижения товаров и услуг. Виртуальные блогеры, вроде Лил Микелы, рекламируют одежду, такие площадки, как Taobao, нанимают виртуальных айдолов, а компании, например, Rosebud AI, генерируют ИИ-моделей для интернет-магазинов. Технология уже отработана: в несколько кликов можно поменять этническую принадлежность аватара, добавить улыбку, сменить виртуальную одежду. Недавно российское модельное агентство Areola Models оцифровало 10 своих моделей – виртуальные копии могут участвовать в съемках по всему миру и работать 24 на 7. Интересно, как будут оплачивать труд прототипов. Например, компания Synthesia, которая делала дипфейки для WPP, выплачивает реальным моделям роялти за использование их внешности. Сами разработчики видят в технологии только плюсы: с помощью ИИ можно генерировать разные образы, создавать небинарных персон и выходить за рамки традиционных стандартов красоты. Противники идеи считают, что дипфейки лишают работы представителей меньшинств, которым и так сложно трудоустроиться. Еще один интересный пример применения дипфейков – это “цифровое протезирование”, при котором лица реальных людей заменяют лицами волонтеров. Такую технологию использовали создатели документального фильма Welcome to Chechnya, чтобы сохранить анонимность героев. Разработчик технологии Райан Лэйни недавно основал компанию Teus Media – она будет создавать “цифровую вуаль” для героев репортажей и документалок, которые хотят оставаться анонимными. Большинство компаний, которые официально зарабатывают на дипфейках, стараются продумать собственный этический кодекс. Так, Synthesia обещает не использовать чужие образы без разрешения и не создавать сатирических видео с политиками и звездами. А Rosebud AI выступает против фальшивых новостей.

Ещё одна крутая тема, тоже вывалилась совсем недавно, теперь уже для нижней части тела. Я знаю, вы просили, и вот оно - теперь можно собрать худо-бедно персонажника, как Франкенштейна: голова отсюда, тело оттуда, и вот он цифровой аватар. Теперь осталось дождаться единого решения, чтобы не плясать с бубном. Естественно, ещё не тестчена. Где найти время на все эти ништяки? Я в растерянности. Офсайт https://youtu.be/jpkuDujQd8w