Performance artist

Я тут вписался в небольшой арт-проект, который в феврале может вырасти до выставки. Пять дней заставляю SD2.1 и собственный микс моделей в Автоматике1111 рисовать натурально, с передачей мазков кисти и брызг краски – создаю свой стиль. Это съедает у меня кучу времени, поэтому новых постов не хотелось писать. В ближайшие дни исправлюсь, по нейросеткам появилось много нового и полезного. #automatic1111 #dreamstudio #stablediffusion

Вячеслав Фурашов «Лотосы Артём ГРЭС» 100 x 72 см Картина, живопись. #dreamstudio

Сходил на встречу с IT-бизнесом, где узнал, что я тоже считаюсь айтишником, только по креативной части. Хитом встречи внезапно оказался вопрос «как сделать так, чтобы айтишники не уезжали, а работали тут». Говорили много, но ни к чему не пришли, потому что слишком сильные «против», и очень хилые «за». Реально, 2 часа никто не мог внятно объяснить, зачем молодому спецу торчать тут, если где-нибудь в Казани ему будет теплее и сытнее, не говоря уже о других странах. Одна из очевидных причин «против» это наши местные гранты 2023 – конкурс на 4 позиции по 800к за разработку отечественного ПО сроком на год. А ещё был смешной момент: – Приходите к нам в ВУЗ учить студентов айтишников! – Окей, что для этого нужно? – Профильное преподавательское образование. Зато в холле есть очень подробная диорама с городом, как на вертолёте полетал. #реальность

Если вы серьёзный человек с деньгами, живущий за пределами СНГ (или очень настойчивый житель этого самого СНГ с криптокартой, одноразовым индийским номером за 10 рублей, VPN с функцией выбора айпишника не-СНГ страны...) и вы по какой-то причине решили выбрать своим путём DALL-E2, то у компании OpenAI есть для вас неплохой гайд. Да, он из июля 2022 года, но принцип составления промпта в Далли с тех пор не изменился. Смотреть тут, есть ссылки на скачивание и онлайн просмотр: https://dallery.gallery/the-dalle-2-prompt-book/ Для чего вам DALL-E2? Раньше я говорил только про годный пиксель-арт, теперь добавил ещё одну причину – прототипирование. Да, картинки по качеству отстают от SD и MJ. Да, только квадраты. Зато Далли позволяет играть с формой объекта и понимает, что ты хочешь поменять материалы без её изменения. Интересный факт – если в ChatGPT упомянуть DALL-E2 и попросить разработать варианты промптов для картинок на основе пары ключевых слов, то вы получите очень хорошие рабочие варианты. OpenAI пытается интегрировать свои разработки друг в друга, практически Apple. #полезное #dalle2 #chatgpt

Если вы по какой-то причине сделали выбор в пользу StableDiffusion и его многочисленных моделей, то вам придётся сложнее. Ребята из StabilityAI не сильно парятся подробными гайдами, полагая, что сообщество само во всём разберётся. Оно конечно разбирается, однако новичкам бывает сложно с запросами в SD, потому что он более капризный к точности промпта, синтаксису и командам. Вам предстоит детально описывать, что вы хотите получить, и более того – что вы точно НЕ хотите получить. Картинки с короткими промптами вам скорее всего не понравятся, а рабочие промпты в StableDiffusion более длинные и громоздкие, чем в Midjourney и DALL-E. Вот какие есть официальные руководства: пошаговый гайд по промптам https://beta.dreamstudio.ai/prompt-guide PDF от StabilityAI для новых версий SD 2.1 и 2.1-768 https://openart.ai/promptbook Можете оценить сюр момента. Компания выпускает гайд с промптами – в виде пдф-ки. Чтобы ты перепечатывал текст с картинки, переключаясь между вкладками, вместо привычных Ctrl+C/Ctrl+V. #полезное #stablediffusion

Я постоянно говорю, что изучение принципов работы с Midjourney стоит начинать с их классного и очень подробного мануала. Но судя по вопросам в личке и тому, что я вижу на форумах про МЖ, до него добирается в лучшем случае один из пяти пользователей. Все остальные кидаются генерить по скопированным промптам. Серьёзно, это лучшее руководство из тех, что есть по нейросеткам. Мануалам DALL-E и StableDiffusion до него очень далеко. Тут вам пошагово объясняют с нуля, как регаться в Discord и на канале Midjourney, как пользоваться интерфейсом, как платить, как составлять промпт, какие команды на что влияют и т.д. Выбрали МЖ основным инструментом? Сохраните себе и внимательно прочитайте, в будущем вам будет СИЛЬНО проще работать и получать то, что задумано. Всё тут: https://midjourney.gitbook.io/docs/ #полезное #midjourney

А теперь полезная инфа. Это собранные сообществом ai-артистов и неравнодушными искусствоведами датасеты художественных стилей, современных художников и одежды разных эпох для Midjourney. Всё с примерами генераций, да ещё и на движках сразу двух версий 3 и 4 – что логично, порой отдельные образы выходят лучше на старом коде. Информации так много, что я могу представить использование этих данных только как справочник/словарь для своей работы. Если хочется просто погенерить, то глаза разбегаются и не знаешь, за что хвататься. Художники: https://docs.google.com/spreadsheets/d/1cm6239gw1XvvDMRtazV6txa9pnejpKkM5z24wRhhFz0/edit#gid=1057933666 Стили, одежда и существа: https://docs.google.com/spreadsheets/d/1MsX0NYYqhv4ZhZ7-50cXH1gvYE2FKLixLBvAkI40ha0/edit#gid=1519949392 Запаситесь терпением, таблицы лагают и очень долго грузятся. #полезное #midjourney

Сегодня погода подарила мне неожиданное вдохновение. Южный ветер нагнал снежные облака, через которые проглядывало бледное золотистое солнце. Ближе к закату небо стало красным, солнце поменялось и стало похоже на луну. Такие фото вряд ли зацепят кого-то, а вот живописные картины другое дело. #реальность #dreamstudio

Амигуруми — японское искусство вязания на спицах или крючком маленьких мягких зверушек. Узнал я про него из подборки стилей Midjourney, раньше даже не слышал этого названия. В итоге попробовал сгенерить милых тигров для мерча Fat Tiger, а получилась классная подборка разных зверей с приятным фоном. #dreamstudio #stablediffusion

text2image уже никого не удивить, поэтому вот вам image2sound Загружаешь картинку и получаешь звуковой файл, сгенерированный на её основе. ИИ анализирует содержание и подбирает тематику. Так и вижу через годик вариант стикеров/обычных картинок, где при отправке сразу генерится короткий аудиофрагмент. Общение станет более интерактивным. Советую попробовать, чтобы потом не было шока. А пока ai-Шаляпин и звуки его окружения. Ещё не поёт, но скоро сможет. https://imaginarysoundscape.net/view/MENnLXlhendPMHF4/MzUzNjUxXzUxODc0NzJfMQ/v2.0

Одна из полезных моделей StableDiffusion это Lexica Aperture. Начиналось всё как простенький сайт-поисковик, куда сохранялись промпты с картинками из общего Discord-канала StableDiffusion. С сентября по ноябрь Lexica была самым удобным хранилищем текстовых запросов для самообучения и вдохновения. Ты заходишь, вбиваешь ключевое слово, смотришь подходящий арт и правишь его промпт под себя. Идеально. Когда в начале ноября вышел SD 2.0, на Лексике появилась своя дообученная модель Aperture, с упором на фотореализм и рендеры. Модель хорошая и максимально простая в использовании. На старте дают 25 бесплатных генераций, потом 10$ в месяц за 800 картинок / 96$ в год. Более дорогие планы я бы не стал покупать, т.к. некуда будет тратить 3000 картинок (дают за 30$ в месяц). Lexica всё же нишевый инструмент. Не так универсальна, как MJ, но в некоторых случаях сильно круче. А поиск по картинкам оставили только для генераций в собственной модели :( Пробовать тут: https://lexica.art/aperture #lexicaaperture #полезное

Где-то с ноября стали появляться вакансии с участием ИИ в разных форматах. Вот например, предлагают наполнять всякие желтушные сайты текстами под входящий трафик. Текст тебе генерит ChatGPT, потом картинку генеришь в Midjourney, в конце закидываешь готовую «статью» на ГуглоДиск редактору. Получаешь, как средний промоутер на точке а супермаркете. Рыночек порешал, что твоя работа это ввод данных и сортировка, в остальном за тебя машина трудится. Интересный пример, как практичные люди пытаются встроить новые технологии в уже имеющиеся ниши. Почитайте описание, очень познавательно. Ссыль на вакансию: https://hh.ru/vacancy/73952944?from=share_android #реальность #chatgpt #midjourney

Ещё одна причина использовать разные модели. Эти три дня я делаю прототипы и опять столкнулся с проблемой непонимания образа. В Dreamstudio никак не получается сделать нормальный диван, всё какие-то угловатые уродцы вылезают. Закинул тот же промпт в Lexica Aperture – и штамповать можно сразу, никаких проблем. Правдивая форма, освещение, интересные концепты. Но если предмет меняется, и ты просишь у Лексики стеклянный стакан/бокал необычной формы, лотоса например, то модель выдаст обычные стаканы с рисунками цветка. Зато в Dreamstudio такие бокалы получаются сразу и на любой вкус – прозрачные, многослойные, цветные. Поэтому хорошей практикой будет проверять промт в нескольких моделях, одна из них точно будет лучше других на данный момент. В Midjourney не тестил, потому что у меня кончилась подписка ещё на праздниках. #dreamstudio #stablediffusion #lexicaaperture

Новая сетка от StabilityAI, которая умеет в текст. На лекции в декабре я рассказывал, что читаемый текст это одна из проблем для генераций в нейросетях и предсказывал, что надо где-то полгода подождать, прежде чем она решится. Справились за месяц. Сетка называется DeepFloyd IF, в её основе StableDiffusion и она сейчас в бета-тесте. Однако один из разработчиков предложил протестировать промпты, чем я с благодарностью воспользовался – и предложил такой вариант: piece of textured white paper with large handwritten text "Fat tiger", capital letters, centered text, lettering, handwritten В картинках этот промпт и другие прикольные примеры. Кроме текста, получаются хорошие, довольно точные картинки, т.е. эта моделька SD очень даже рабочая. Скоро будет лучше и проще. #stablediffusion

Неожиданно для себя обнаружил, что кроме пиксель арта, ещё одна сильная сторона DALL-E2 – прототипирование. В примерах: – светильники с использованием световых трубок/фанерных абажуров; – мягкая мебель для современного интерьера, с добавлением деталей прямо по ходу генерации. Начинал я делать в StableDiffusion, постепенно усложняя промпт, но стабильных результатов так и не смог добиться. Провозился я пару часов, прежде чем придумал закинуть положительную часть промпта в DALL-E2. И он начал мне штамповать годные варианты с самого начала. Да, есть что дорабатывать и к чему придраться, но меня радует, что Далли нашлось ещё одно применение. *варианты, где нет лого Далли в нижнем правом углу – из NightCafe, где тоже можно генерить на движке Далли, не прибегая к пляскам с регистрацией на официальном сайте. Всё потому, что я потратил январские 15 free далли-кредитов за час работы. #dalle2

Удачный промпт с морской губкой в колабе от Katherine Crowson. #stablediffusion #colab

Impossible vases, которые оказались вполне себе possible. Эксперимент с формами и тест пределов реалистичности в Дримстудии – что будет, если скрестить природные формы и классическую керамику. #stablediffusion #dreamstudio

Для тех, кто хочет создавать анимацию вроде той, что я выкладывал ранее – вышел обновлённый «официальный» колаб Deforum 0.7 от самих StabilityAI. Довольно сложный интерфейс, тонкие настройки, но если посидеть с ним несколько вечеров и разобраться, то можно делать топовые штуки. Всё можно запускать бесплатно, просто будет медленно и тупо. Если заплатить Гуглу, то будет скорость, плюс Deforum 0.7 жрёт кредиты медленнее, чем версия от Katherine Crowson. Сам колаб вот тут: https://colab.research.google.com/github/deforum-art/deforum-stable-diffusion/blob/main/Deforum_Stable_Diffusion.ipynb#scrollTo=0D2HQO-PWM_t Видео с разбором настроек для предыдущей версии 0.6 (на английском): https://www.youtube.com/watch?v=kHgRQt3eTPw #stablediffusion

StableDiffusion 1.5/2.1 в быстром и стабильном колабе от Автоматик1111. Если у вас нет мощного компьютера, чтобы поднимать всё это локально, и вы как и я сидите с нетбука – то в таком колабе сможете поработать с разными тренированными моделями для StableDiffusion. Пробовать тут: https://colab.research.google.com/github/TheLastBen/fast-stable-diffusion/blob/main/fast_stable_diffusion_AUTOMATIC1111.ipynb#scrollTo=PjzwxTkPSPHf Я вам даже видео на русском нашёл, как этим пользоваться ^^ https://www.youtube.com/watch?v=reaj2_G38qs #stablediffusion