Нейроэстетика

🪩 Диффузионки позволяют ремастерить игры при помощи текстовых промптов. Nvidia показала пайплайн ремастеринга текстур в популярном графично-нодовом интерфейсе ComfyAI. Теперь можно не только апскейлить текстуры с определением свойств материалов для трассировки лучей, но и контролировать стиль при помощи промптов. RTX Remix — инструмент для ремастеринга классических игр с использованием технологий трассировки лучей и DLSS 3.5. И интеграция RTX Remix Toolkit с ComfyUI выглядит обещающей, позволяя модерам задавать стиль текстур с помощью текстовых промптов. Это ускоряет процесс моддинга и упрощает создание качественных текстур. Теперь маленькие команды модеров могут быстро создавать текстуры высокого разрешения с физически корректными свойствами, освобождая время для доработки ключевых элементов. А пока ждем обещанный Half-Life 2 RTX. Ну и я лично мечтал бы увидеть Half-Life Alyx с RTX в VR.

🫦 GPT-4o — Вот вам "HER" от OpenAI tl:dr End-to-End Image + Text + Speech версия GPT-4 До появления GPT-4o использование режима Voice Mode с ChatGPT позволяло получать ответы со средним временем задержки в 2.8 секунды для GPT-3.5 и 5.4 секунды для GPT-4. В этом режиме были задействованы три отдельные модели: 1. Speech-to-Text переводила аудио в текст 2. Затем GPT-3.5 или GPT-4 обрабатывала текст и генерирует ответ. 3. И, наконец, третья модель переводила текст обратно в аудио. Это означает, что модель GPT-4 не имеет доступа ко всей информации — она не воспринимает интонации, не различает голоса разных собеседников и не учитывает фоновые шумы, она не может воспроизводить смех, пение или передавать эмоции. GPT-4o представляет собой новую модель, обученную end-to-end на трех доменах, включая текст, изображения и аудио. 👁 Блог OpenAI 🎞 YouTube OpenAI Го тестить: ✨ Модель ChatGPT "HER" ✨

Сборник 75-в-1 SORA генераций https://youtu.be/jicsH-wxZDU?si=Df329j1pGfVPF9HM

Сбросили визуализацию multi-head attention при инференсе GPT-4 в реальном времени. Интересная идея

Stable Diffusion XL — Turbo. Text2Image в реальном времени Stability AI представила SDXL Turbo — новаторскую модель генерации изображений из текста в реальном времени. Основываясь на технологии Adversarial Diffusion Distillation (ADD), SDXL Turbo достигает высочайшего качества, уменьшая количество необходимых шагов инференса с 50 до одного! SDXL Turbo доступна для испытаний на платформе редактирования изображений Stability AI: Clipdrop, и пока предназначена только для некоммерческого использования. https://youtu.be/adDyTzBdUcg?si=8NqucZ4y29IAHYNE 👉 https://stability.ai/news/stability-ai-sdxl-turbo

#Дайджест Нейроэстетика HUB