Generative Ai

Это код соответствия модели и логического вывода для эстетических регрессий CLIP, обученных на Simulacra Aesthetic Captions . Эти удивительно простые модели подражают человеческому эстетическому суждению. Их можно использовать в таких задачах, как фильтрация наборов данных, чтобы перед обучением удалить из корпуса заведомо некачественные изображения. https://github.com/crowsonkb/simulacra-aesthetic-models

Dataset: Simulacra Aesthetic Captions — это набор данных из более чем 238 000 синтетических изображений, созданных с помощью моделей ИИ, таких как скрытое GLIDE CompVis и Stable Diffusion , из более чем сорока тысяч запросов, отправленных пользователями. Изображения оцениваются пользователями по их эстетической ценности от 1 до 10 для создания триплетов подписи, изображения и рейтинга. Результатом является высококачественный бесплатный набор данных с более чем 176 000 оценок. https://github.com/JD-P/simulacra-aesthetic-captions

Сервинг моделей для китайского фреймворка Paddle Serving https://github.com/PaddlePaddle/Serving

Practical Deep Learning. Пятый запуск курса https://course.fast.ai/

Тинькофф приглашает на питерский AI-митап 🔎 На митапе команда исследований расскажет о том, как развивает AI-ресерч в Тинькофф. — Расскажут про последние статьи в NLP Research — модели early exiting и контролируемую генерацию; — разберут недавние эксперименты со стохастическими нейронными сетями; — объяснят ситуации, когда применяли Offline RL в реальной жизни. Митап пройдет 29 июля в Санкт-Петербурге в технопарке ЛЕНПОЛИГРАФМАША. Начало в 19:00. Регистрируйтесь по ссылке: https://l.tinkoff.ru/ai-saintp-research-meetup

Больше 280 (!) нейронных сетей для работы с графикой на одном сайте Мы сделали самую большую библиотеку нейронных сетей для работы с графикой. Она бесплатна и обновляется ежедневно - AI library by Phygital+ Внутри удобный поиск, описание, примеры и гуглколабы для ускорения работы креатора и повышения его воображения. Пишите обратную связь автору канала: что хотите добавить, какой функционал нужен. А чтобы дать возможность всем освоить ИИ, скоро мы анонсируем серию открытых лекций и OpenCall для художников о том, как ИИ можно использовать в своих работах. Подписывайтесь) А если хотите первыми получить доступ к нашему продукту, который соединил лучшие нейронные сети в одном удобном интерфейсе - добавляйтесь тут в waitlist

Не могу не поделиться ссылкой на такой классный курс! MIT 6.S192: Deep Learning for Art, Aesthetics, and Creativity https://ali-design.github.io/deepcreativity Лекции на ютубе: https://www.youtube.com/watch?v=MABLFo7IV3I&list=PLCpMvp7ftsnIbNwRnQJbDNRqO6qiN3EyH

Мета выпустила переводчик на 200 языков. Зацените новый прорыв Меты в области машинного перевода, о котором только что объявил Марк Цукерберг. Они создали и выложили в открытый доступ модель, с громким названием No language left behind (Ни один язык не останется за бортом), которая переводит с 200 различных языков. Методы из этой работы были применены для улучшения переводов на Facebook, Instagram и даже Wikipedia. 📖 Статья 🗽 Код

6DRepNet: 6D Rotation representation for unconstrained head pose estimation Статейка о распознавании 3Д позы головы в дикой природе. Основной трюк метода в "удобном для нейросети" 6D представлении матрицы поворота. Есть репозиторий с кодом, весами и демкой для веб -камеры. @ai_newz

меня как моушн дизайнера печалит что в демо далли можно генерить только статику. но при этом далли отлично умеет в инпейнтинг - дорисовку недостающей части изображения. в этом эксперименте каждую следующую картинку я генерил на основе предыдущей, уменьшая и поворачивая ее. получается такой бесконечный зум аут, в процессе создания которого можно полностью менять наполнение кадра @тоже моушн

Ты гарантированно получишь работу с зп от 100 000₽ и устроишься на позицию Junior+ или Middle Java-разработчика после обучения в Kata. За 8-9 месяцев беспощадного кодинга под руководством ментора ты изучишь весь необходимый стек Java: Java Core, ООП, Spring, Hibernate, Git и другое. Здесь не учат с нуля — чтобы поступить в Kata, придется сдать тестовое задание и быть готовым к переезду в Москву или Петербург. Ты платишь за учебу только после трудоустройства на позицию разработчика с минимальной зп от 100 000₽. Отучился, но на работу не взяли? Тогда ты ничего не должен — это закреплено в договоре. Записывайся на курс: https://clck.ru/rbRt6

Недообученные нейросети — лучшие feature экстракторы К удивительному выводу пришли две независимые группы исследователей из Google и Baidu — чем дольше учить нейронную сеть, тем хуже выразительная способность её фичей. То есть, не смотря на рост top-1 accuracy по мере обучения, качество её репрезентаций в какой-то момент начинает падать! VGG и AlexNet давно известны тем, что их фичи отлично подходят для оценки perceptual similarity, но оказалось, что и все современные SOTA модели тоже подходят — просто надо брать не самый последний чекпоинт. Более того, похоже, что для down-stream задач тоже лучше использовать эмбеддинги от недообученных моделей. P.S. Проблема в том, что в какой-то момент модель становится настолько умной, что её фичи только она сама и понимает 🤷‍♂️ статья1, статья2

Выбирайте сервис DBaaS и вы получите: • готовую базу данных необходимой конфигурации; • помощь в миграции с любой ИТ-инфраструктуры; • безопасность данных: БД разворачиваются внутри защищенного периметра; • экспертизу и поддержку сертифицированных специалистов. Решайте конкретные задачи бизнеса, а не занимайтесь настройкой и обслуживанием баз данных! Оформите бесплатный тестовый доступ на нашем сайте. Приглашаем к сотрудничеству в рамках партнерской программы. 📞 Тел: +74952601082 🌏 Сайт: https://nubes.ru/

30-миллиардная модель OPT теперь доступна на Hugging Face! Можно в несколько строк запустить самую большую и умную из доступных на сегодня языковых моделей 🤗 Статья, GitHub, HuggingFace

DALL-E Mini Explained with Demo Tech report: - Financed by Google Cloud and HF, essentially an advertising campaign for JAX, 8 person team - 27x smaller than the original, trained on a single TPU v3-8 for only 3 days + ~3 weeks for experiments, 400M params - 30m image-text pairs, only 2m used to fine-tune the VQGAN encoder - Could use preemptible TPU instances - Pre-trained BART Encoder - Pre-trained VQGAN encoder - Pre-trained CLIP is used to select the best generated images - (so the actual cost probably is actually ~1-2 orders of magnitude higher) - (compare with 20k GPU days stipulated by Sber) - The report is expertly written and easy to read

​Новый околонаучный дайджест за эту неделю: 🗑 Не успели мы освоить другую планету, как уже начали на ней мусорить. Вот, например, на Марсе Perseverance нашел странную штуку, которая оказалась термоматериалом, застрявшем в камне. Его отнесло от места посадки на 2 км марсианским ветром (Rus / Eng) 🐕 Ghost Robotics (это которые военные робо-псы) разработала модуль для перемещения пёсика вплавь со скоростью 3 узла (это примерно 1,5 м/с), он просто ложится в воду и поджимает лапы, после чего начинает работать реактивный двигатель (Eng) 📡 Израильская фирма Camero-Tech говорит, что разработала портативную систему обработки изображений, которая может «видеть» сквозь стены. Радар работает, естественно, с ИИ и отслеживает живые цели в 3D, короче штука для военных (Rus / Eng) 🥶 Зоологи выяснили, что в Гренландии есть изолированные медведи «отшельники», которые научились выживать в условиях нехватки морского льда. В качестве опоры в летний период они используют пресный лёд, который сползает с ледников в море (Rus / Eng) 🟡 Учёные выяснили, что скорость и направление вращения Земного ядра меняется со временем, то есть на основе компьютерных моделей было определено, что оно вращается то в одном, то в другом направлении с изменяющейся скоростью (Rus / Eng) 🕸 Очередной эпик про глубокий космос — с помощью радиотелескопа ALMA астрономы обнаружили в огромной области звездообразования реальную сеть из связанных нитей холодного молекулярного газа. В общем, даже в таких условиях процесс рождения новых звёзд идёт весьма эффективно, в источнике фото/видео (Rus / Eng) 🔭 Никогда бы не подумал что такое возможно, но в Индии запустили новый телескоп с главным зеркалом из жидкой ртути, 50 литров находятся внутри четырёхметрового параболического зеркала (Rus / Eng) 🎲 Youtube канал о науке вдохновил физиков на проверку эффекта домино. Они смоделировали падение выстроенных костяшек, где учитывали все тонкости, вплоть до силы трения пластика об поверхность и объяснили редкие аномалии, связанные со спонтанной остановкой волны (Rus / Eng) Дайджест событий прошлой недели тут. На картинке медведь-отшельник готовит себе ужин, спасибо Dalle:

Слышали о том, что анализ данных — востребованная сфера? Давайте разберёмся в профессии аналитика данных вместе. Собрали всю базовую информацию о специальности в бесплатном гайде. За 10 минут чтения вы поймёте: — какие задачи решает аналитик; — кто такие и чем отличаются друг от друга джун, мидл и синьор; — какие навыки и знания нужны для старта в профессии; — как можно освоить профессию; — как и куда расти джуну. А ещё мы собрали полезные ссылки для начинающих аналитиков: где читать новости и узнавать новое. Чтобы получить гайд, переходите по ссылке.

Задачу генерации картинок из текста можно считать решенной — поэтому исследователи постепенно переходят к задаче «А давайте генерировать целые гифки по текстовому описанию». Вчера выложили пример работы алгоритма CogVideo — суть у него такая же как у Dalle, вы пишите текст, а он выдает вам видео в 4 секунды длинной. Кода пока нет, но по видимому будет тут. У меня две мысли: 1) Лев который пьет — офигенный 2) Исследователи так порно индустрию без денег оставят своими нейронками @Denis

https://github.com/THUDM/CogVideo #cv #video