CGIT_Vines

​​Meta AI + Google AI cоздают единую модель понимания всей человеческой речи. В 2021 это уже не фантастика, а чисто инженерная задача. Под дымовую завесу пустопорожней полемики о реализуемости сильного ИИ (AGI), БигТех проявляет бульдожью хватку при решении самых востребованных для бизнеса задач. И пока ширнармассы всюду где попало щеголяют знанием в реальности уже устаревшего термина «Большие Данные», БигТех уже сделал ставку на понятии нового поколения - «Большие Модели». В новой системе самостоятельного обучения речи на 128 языках используется очень большая модель. XLS-R – это нейронная сеть для распознавания речи, определения языка и перевода. Она использует 2 млрд параметров и почти полумиллиона часов общедоступной речевой аудиозаписи на 128 языках, что почти в 10 раз больше, чем в предыдущей системе Facebook, созданной в прошлом году. Результат уже впечатляет - снижение уровеня ошибок в среднем на 14-34%. Бизнес цель планируемого прорыва двойная: • Окончательное решение вопроса синхронного перевода человеческой речи, с помощью мобильных гаджетов (мечта фантастов 20го века) • Голосовое общение человеко-машинных сущностей в виртуальных средах Метавселенной (на что фантастам не хватило фантазии, а вот БигТеху хватило) Объявление Подробное описание #NLP

Ziva Dyamics запустила ZRT Face Trainer - свой облачный сервис обработки лиц, на машинном обучении, предназначенный для игр и работы в режиме реального времени. Построен на базе библиотеки, содержащей более 15 ТБ данных 4D-сканирования + авториг + доступ к 72000 лицевых шейпов. Бесплатный доступ на попробовать дают только некоторым счастливчикам, попробовать можно тут.

Первые новости о том, что у России появится собственный "Starlink" космический интернет "Сфера" были еще летом, тогда обещали, что первые прототипы спутников запустят к концу 22 года; пока что всё идет по плану. Сегодня Рогозин, прости г*споди, подтвердил планы: первый-таки полетит в 22, второй в 23 году. А к 24 около 600 уже будут кружить над нашей головой. Что будет с доступом к Starlink, я думаю, можно догадаться/ Теперь можно будет смотреть Соловьёва из космоса!

Суини - один из немногих визионеров, кому хочется доверять, и это доверие не без того, что он отличный практик. Высказал интересную мысль о том, что в ближайшие 5-10 лет выкристаллизуется лидер в области меты, а предшествовать этому будет жестокая борьба за первое место, так что определённо жить в этот период будет очень интересно. Время перемен - время возможностей! https://uploadvr.com/epic-sweeney-metaverse

Marco Di Lucca умеет удивлять классическими пайплайнами.

В реддите играются с нейронными фильтрами фотошопа и скайримом. На видео показано сравнение оригинала, и двух референсных картинок, та что менее зеленая выглядит намного круче с художественной точки зрения. Водичка вообще зачет. Правда рендерилась вся эта красота 3 часа, но можно надеяться что когда-нибудь такую красоту мы сможем наблюдать в риалтайме, например с квантовыми чипами. В идеале иметь набор из размеченных ассетов, вместо рисования текстур по геометрии, а дальше сетка сама будет понимать, что на картинке что и дорисовывать финальный вижн основываясь на паре атмосферных концептов.

А вот так выглядят сами приводы. Тактильная перчатка может даже убедить систему восприятия пользователя в том, что она ощущает вес объекта, осторожно потянув за кожу пальцев пользователя с помощью приводов, чтобы имитировать силу тяжести удерживаемого объекта. Но все это должно быть точно рассчитано по времени.

Meta собрала команду, которая занимается будущим взаимодействием людей в виртуальных средах. Эта команда буквально изобретает новые области научных исследований. Полученные в результате технологии обладают потенциалом не только фундаментально изменить ход дополненной и виртуальной реальности, но и потенциально повлиять на такие разнообразные области, как медицина и космические путешествия. Только посмотрите, насколько крутая обратная отдача на этом прототипе, я буквально ощущаю это по видео. Кроме того, команде пришлось изобрести новые приводы вместо привычных пневматических. Идеи взяли из "мягкой робототехники" и микрофлюидных технологий. В общем, в горизонте 10 лет - это точно будет отвал башки, если только Маск с неинвазивкой не опередит. Обязательно статью почитайте.

Google AI заопенсорсили 2D\3D трекинг рук (одновременный трекинг нескольких рук, предсказание поз и прочее). Пдфка исследования здесь. Код здесь. Протестировать демо здесь.

Для того, чтобы построить действительно связанную глобальную среду, не обязательно придумывать шлемы VR, какие-то новые соцсети со сторьками или клабхаусы. Достаточно дать людям возможность общаться в реальном времени на любых языках безбарьерно. Так мы будем достраивать вавилонскую башню в цифре. Microsoft вместо конфетти из Meta-аватаров ставит на куда менее привлекательную внешне, но более важную технологию перевода. Именно это может стать прорывной точкой для цифрового объединения. https://www.inc.com/kelly-main/microsofts-new-3d-meetings-wont-change-your-life-but-this-other-new-feature-could-change-world.html

Говорят, технологии не отличимы от магии. К Skyrim VR прикрутили мод, в котором при помощи нейрообруча на голову действительно придётся концентрироваться, чтобы скастовать какое-нибудь колдунство. Самое интересное, что механика заклинания напрямую зависит от вашей концентрации: чем сильнее сконцентрированы, тем больше маны на спелл.

"Невозможно смоделировать это на чём-то ещё. Традиционное «железо» не способно обрабатывать такие объёмы информации. Для сопоставимой производительности потребуется суперкомпьютер, который больше, чем наша планета." Весьма мощное заявление генерального директора IBM прозвучало сегодня. Квантовый процессор, впервые на 127 кубитов, обещает нам прорыв в вычислениях, необходимых для искусственного интеллекта в течение следующих 10 лет. Там, правда, всё ещё нужны криогенные установки, и количество ошибок при вычислениях пока ещё велико. Так же в IBM заявили, что готовят в 22 году проц на 433 кубита и 1121 вслед за ним. В ближайшем будущем скорее всего появятся гибридные системы с обычными и квантовыми процессорами. p.s. Кстати объясните мне почему алгоритмы монтекарло на которых построены современные рендеры не могут вычисляться на квантовых процессорах? https://www.reuters.com/article/ibm-quantum/ibm-says-quantum-chip-could-beat-standard-chips-in-two-years-idINL1N2S4007

Внимательное прочтение квартального отчета компании Vizio (она производит популярные дешевые телевизоры для рынка США в первую очередь) привело к любопытному открытию: Производитель телевизоров получил от продажи самих телевизоров $25.6m. А от рекламы и продажи информации о том, что смотрят его пользователи - $57.6m. Т.е. Vizio получает денег от рекламы и слежки за пользователями в два раза больше, чем от самого железа. Еще раз напоминаю, когда вы получаете что-то даром или дешево - скорее всего вы просто не понимаете как перепродают вас самих https://investors.vizio.com/news/news-details/2021/VIZIO-HOLDING-CORP.-Reports-Q3-2021-Financial-Results/default.aspx

​Вы же помните Т-1000 из «Терминатор −2»? Так вот, хотя на весь хронометраж фильма присутствовало всего 3,5 минуты CGI, сцены, где пули попадают в жидкого терминатора, нам на радость, сделаны без использования графики. Да, в те года приходилось экономить, графика стоила кучу денег (ну и была такой себе), а обработка самых обычных ныне спецэффектов длилась месяцами. В общем, команда по спецэффектам исследовала правильный вид ударов брызг, они кидали снаряды в грязь и кропотливо копировали получившиеся «кратеры», потом отливали их с помощью смеси поролона и делали хромирование получившихся поролоновых кратеров. А дальше дело техники — мягкие «брызги» спрессовывали в ёмкость из стеклопластика, которая закрывалась своеобразной крышкой, которая в свою очередь удерживалась штырём на тросе. С помощью беспроводного пульта натягивался трос, который тянул за собой штырь — поролон вылетал, раскрывался как бутон и прорывая ткань. Фоток самого устройства, к сожалению, нет, зато можно посмотреть как это было в действии на одной из репетиций. Если интересно, тут можете посмотреть дополнительные материалы (это сайт прям тех ребят, которые занимались эффектами), а тут можно даже купить оригинальные формы от выстрелов. Надеюсь, сцена где терминатор проходит сквозь решетку все же графика 🌚

А еще в ближайшее время ожидаем генерацию техники, но я, как вы помните, жду интерьеры.

Каждый раз удивляюсь, заходя в ARTBREEDER, тому, что там появляются годные вещи. Так появился раздел для генерации зданий. А что самое интересное - теперь к стандартному набору генов можно подмешивать гены, сгенерированные кем-то из художников. Посмотрите, какая красота получается. И будьте осторожны с геном Chaos - иногда он просто взрывает картинку.

На этой неделе NVIDIA объявила о планах по созданию самого мощного в мире суперкомпьютера с искусственным интеллектом, предназначенного для прогнозирования изменения климата, названная Земля-2 или Е-2. К слову, очень удобный комментарий для инвесторов звучит как "Мы не будем ощущать отдачи от наших усилий в течение десятилетий".

Уже, наверное, лет 8 идёт разговор о едином стандарте трёхмерки для web 3, метаверсов, для всех видов VR, XR, MR и всей этой нечести. То и дело всплывает стандарт USD, вот и на последней конфе Nvidia объявили о поддержке USD для Omniverse и называют его чуть ли не новый HTML 3D. Он уже поддерживается всеми популярными софтами, в т.ч и Unreal. Кстати, если кто-нибудь плотно работал с этим форматом, напишите плюсы, минусы и подводные камни, с которыми сталкивались. UPD: Сергей Ципцин в коментах оставил супер линки на чат в телеге про обсуждение usd и на лекцию на CGEvent на эту тему. https://www.theregister.com/2021/11/10/usd_3d_format/

Deepmind выпустил алгоритм, который позволяет генерировать картины разными математическими методами. По дефолту сеть обучена подходу к созданию описанным Рудольфом Арнхеймом теоретиком художественного искусства и кино. На самом деле даже просто интересно почитать, как алгоритмами пытаются воссоздать техники живописи. А смотреть на процесс просчёта сродни зарождению органики. Коллаб присутствует, но сам не пробовал, с мобилы не удобно. https://github.com/deepmind/arnheim/blob/main/arnheim_2.ipynb

Выложили демку AnimeGANv2 Если получитесь крайне симпатичными, скидывайте в коменты) Попробовать Git