EXTENDED (SUR)REALITY

Ну что, появился новый конкурент Sora Речь о китайской Kling, создающей видео-ролики продолжительностью до 2 минут. Она неплохо справляется с моделированием пространств, движений и физических законов (конечно, пока не на ‘отлично’, но все лучше, чем некоторые видео от гугловской Veo). Напомню, что такие генеративные модели нужны не только для того, чтобы отнимать работу у режиссеров и видео-креаторов, но и для обучения ИИ-агентов. (Кстати, наконец нашла удобоваримый термин, который заменяет более тяжеловесный «универсально-воплощенный агент»: foundation agents. Это как foundation model, только речь уже не о языковых моделях, а об агентах, обученных на мультимодальных датасетах, способных действовать как в физических, так и в виртуальных средах, а также автономно принимать решения. Подробнее - в этой статье). Так вот, если реальных интерактивных данных недостаточно или их получение невозможно, для обучения «фундаментальных агентов» можно использовать симуляторы и генеративные модели, такие как Sora, Veo или Kling. Так что чем больше конкурентоспособных моделей, генерирующих консистентные видео, тем больше потенциальных данных для будущих агентов. И тем больше шансы, что OpenAI в конце-концов откроет доступ к Sora. #technologies

Начала вчера листать 165-страничный документ от экс-сотрудника OpenAI о будущем AGI: если коротко, то вполне возможно, что «общий ИИ» появится к 2027 году, а там и суперинтеллект не за горами (тут есть интервью с автором статьи, где он пересказывает основные идеи работы на протяжении 4 часов). В какой-то момент я не выдержала и отвлеклась на новую фишку GPT-4о: теперь нам показали, как модель говорит разными голосами, которые пользователь может настраивать в соответствии со своими пожеланиями. Актеров озвучки, конечно, немного жалко, но, черт возьми, как же это прикольно. #trends #technologies

Крайне редко смотрю сериалы - видимо, потому что ждала чего-то такого: встречайте, сервис Showrunner, который уже назвали “The Netflix of AI” Компания, показавшая нам в прошлом году эпизод «Южного парка», созданный с помощью ИИ, запускает платформу, позволяющую пользователям генерировать свои собственные сериалы по текстовому промпту (продолжительность сцены/эпизода - от 2 до 16 минут, с диалогами, монтажом, консистентными персонажами и последовательным развитием сюжета). The Simulation (бывшая Fable Studio) уже анонсировала 10 веб-сериалов, каждый из которых выполнен в разных анимационных стилях, от аниме до Pixar. (Посмотрите, например, “Exit Valley” - едкую сатиру на жителей Кремниевой долины; в главных ролях Цукерберг, Альтман, Маск). На данный момент главная слабость Showrunner заключается в том, что сервис пока больше подходит для создания эпизодического контента, а не для эпичных многосерийных продуктов. Но это, как заверяет компания, дело времени. В планах у них также создание реалистичных сериалов, а не только анимационных. Мне лично сразу вспомнилось начало книги Макса Тегмарка «Жизнь 3.0»: вымышленная команда Omega создает ИИ, который сначала используется для генерации мультфильмов в целях привлечения коммерческой прибыли, а затем - и для управления всем миром (прочитайте это небольшое введение, оно любопытное). #future #trends

На фоне новостей про ChatGPT Edu, разработанный специально для образовательных учреждений, а также про новый сервис Perplexity Pages для создания вики-статей и рефератов, решила прочитать нашумевшую книгу про будущее образования. Речь о «Brave New Words: How AI Will Revolutionize Education (and Why That's a Good Thing)». Автор - Салман Хан, основатель проекта Khan Academy. Книга нашумела во многом из-за того, что про нее весьма хвалебно высказался Билл Гейтс. Работа, в целом, и правда любопытная (если закрыть глаза на неприкрытую рекламу разработанного автором и его коллегами чат-бота Khanmigo). Многие упомянутые там идеи и соображения по поводу будущего образования в «пост-GPT эпоху» уже давно витают в воздухе (например, о развитии индивидуального подхода к обучению за счет применения персональных ИИ-тьюторов). Вот несколько интересных мыслей из книги: 🔷 Очевидный минус внедрения LLM в образовательный процесс - возрастающие риски читинга со стороны студентов, когда те начинают выдавать сгенерированный текст за свой. Автор предлагает разработать «таксономию читинга», чтобы наглядно показать, что условный копипаст из Википедии - это хуже, чем, например, текст, написанный студентом, но отредактированный ChatGPT. Навык написания текстов все еще крайне актуален, но подходы к этому процессу будут существенно меняться. “You are writing with AI, but it is not writing for you”. 🔷Процесс чтения будет иметь интерактивный характер: вместо зубрежки учебника может предполагаться диалог с ИИ-чатботом, который будет пересказывать ключевые моменты книги или даже давать ответы от лица литературного героя, ученого или автора, написавшего текст. В новом образовании будет наблюдаться перенос акцента с конечного ответа обучающегося на правильно заданные им вопросы. 🔷 На фоне внедрения ИИ преподаватели-люди (которые, естественно, никуда не денутся) могут и должны: а) требовать от учеников большего; б) интегрировать работу с ИИ в свои аудиторные занятия; в) отказаться от лекционного формата. Интерактивность и коллаборативность должны поддерживаться на всех уровнях, надо отдавать предпочтение более вовлекающим формам обучения. Придумывать новые задания, проверять работы, создавать полезный контент к занятиям поможет, конечно, ИИ. Основный посыл: нам сейчас как никогда нужна определенная храбрость для того, чтобы круто изменить почти весь привычный подход к образованию (или хотя бы свыкнуться с мыслью о том, что рано или поздно изменят нас). Но мы справимся, ведь “teaching is an art form”. И да, эту книгу я читала вместе с GPT-4o, а вы как думали #books

Дайджест за май Технологии ▪️Обучение робопса в симуляциях ▪️Бионические робопчелы и роевой интеллект ▪️Китайские человекоподобные роботы от компании ExRobots ▪️Про GPT-4o (Omni) ▪️Симуляция больницы с ИИ-агентами ▪️Признание о сознании от Gemini 1,5 Pro ▪️ИИ-устройство для регуляции окружающих звуков Культура и искусство ▪️Про ASCII-арт и gpt2-chatbot ▪️Выставка «Поэтика шифрования» ▪️Проект “Synthetic Memories” для пациентов с болезнью Альцгеймера ▪️Про постфотографию ▪️ИИ-фотокамера Наука ▪️AlfaFold-3 для визуализации белковых реакций ▪️Псевдо-проект BrainBridge ▪️Про Spatial AI и новый «кэмбрийский взрыв» Также ▪️Подборка статей про alignment от Яна Лейке ▪️Подборка Substack про ИИ и философию ▪️Платформа Delve вместо Википедии ▪️Подборка новых статей про ИИ #дайджест

3 свежие статьи про ИИ, которые стоит прочитать ▪️How Far We from AGI Группа китайских исследователей опубликовала 120-страничный труд, где говорится об определении AGI, его необходимых свойствах (рассуждение, память, metacognition и т.п.), его возможных архитектурах, а также о проблеме выравнивания (alignment), и, конечно, о прогнозах, связанных со сроками реализации (5+ лет). (Я пока просмотрела статью лишь по диагонали, но выглядит как хороший обзорный текст) ▪️Managing extreme AI risks amid rapid progress Группа выдающихся ученых и специалистов по ML (в том числе Йошуа Бенжио и Джеффри Хинтон) опубликовали статью в Science, где говорят о проблемах контроля и безопасности автономного ИИ. Статья короткая и слегка нашумевшая (хотя никаких сверхъестественных выводов там нет), поэтому можно ознакомиться просто чтобы понять, о чем нынче рассуждают некоторые лауреаты премии Тьюринга. ▪️Mapping the Mind of a Large Language Model Исследователи из компании Anthropic опубликовали текст про интерпретируемость LLM на примере их модели Claude 3 Sonnet. (Напомню, что изучение «внутренностей» модели, а именно ее работы с репрезентациями и концепциями - крайне важная задача для решения проблемы «черного ящика»). Любопытно, что исследование показало, как внутренняя организация концепций в модели соответствует, по крайней мере, в некоторой степени, нашим человеческим представлениям о сходстве и аналогии (возможно, именно в этом заключается превосходная способность Клода работать с метафорами). #papers

В последнее время отчаянно цепляюсь за любые новости про Spatial AI (У меня не закрыт гештальт с темой пространственных вычислений - видимо из-за того, что наш самый нашумевший «пространственный компьютер» Apple Vision Pro, мягко говоря, не выстрелил, хотя классные кейсы с применением этих очков периодически всплывают - вот пример). Напомню, Spatial AI - это область, которая фокусируется на исследованиях восприятия, понимания и взаимодействия ИИ с 3D-миром, физическим и/или виртуальным. Сюда относятся: анализ и интерпретация визуальных данных (изображений, видео, 3D-сканов и др.), создание 3D-моделей реальных объектов и пространств (цифровых двойников) для реализации обучающих симуляций, определение положения ИИ-агента (робота) в пространстве, картографирование ИИ окружающей среды, планирование перемещения в ней, манипуляция физическими объектами и т.д. Spatial AI находит применение в робототехнике, создании беспилотных автомобилей, развитии умных домов/городов, проектировании промышленных метавселенных и др. Примеры можно приводить бесконечно: платформа Omniverse от Nvidia, обучение роботов Optimus на примере действий людей в VR-шлемах (видео сверху), обучение робопсов в симуляторах. Deloitte в своем ежегодном отчете отмечают, что объем рынка пространственных вычислений к 2032 году составит $600 млрд (ну предположим). А еще я заметила недавнее выступление Фей-Фей Ли, которая говорит про «цифровой Кэмбрийский взрыв» в контексте развития пространственного ИИ. В общем, цифровой философ потирает ладошки, когда слова «ИИ», «симуляция», «цифровые двойники» и «трилобиты» используются в одном контексте. #technologies #philosophy

Для любителей бесконечно залипать в Википедии Попробовала поиграться с новой платформой Delve, работающей на базе GPT-4: у нее удобный интерфейс, позволяющий общаться с моделью в режиме чат-бота, а также легко переходить от одного концепта к другому. Конечно, со сложными темами особенно не разгуляешься, но для начальной работы с интересующим вас запросом вполне сойдет. Платформа бесплатная, в РФ работает с VPN, без ограничений по количеству запросов - забирайте и go down rabbit holes! #рекомендасьон

Подборка substack, которые я читаю. Substack это пока еще нишевая площадка до которой не добрался enshittening. Уже на подходе, так как они запилили аналог твиттера, но пока уровень держится. Качество авторских блогов очень высокое. Формат при этом отличается от телеграм каналов: более длинные и глубокие тексты. https://thescope.substack.com/ Единственный в списке блог на русском языке. Всякие цифровые интересности и кругозор. https://julienposture.substack.com/ Новое пополнение. Блог антрополога, который изучает восприятие изображений и стиля с помощью нейронок. https://boldreasoningwithpetersinger.substack.com/ Блог одного из самых известных философов современности. https://www.natesilver.net/ Блог лучшего в мире специалиста по прогнозированию результатов выборов. Много про рациональность, прогнозирование и общество. https://www.theintrinsicperspective.com/ Экс-ученый и экс-журналист пишет очень хорошие эссе на совершенно разные темы. Интересное объединение научного мировоззрения с humanities. Эссе от критического сравнения аргументов спора про ИИ риски до Гегелевской диалектики современного мира. https://www.astralcodexten.com/ Скотт Александр едва ли нуждается в представлении подписчикам моего канала. Считаю его одним из самых крутых мыслителей современности. https://thesequence.substack.com/ Новости ИИ, но, в отличие от многих подобных рассылок, без лишней шелухи. https://syncedreview.com/ Тоже новости ИИ, но бывают хорошие и подробные разборы важных работ. https://borisagain.substack.com/ Мастрид блог, меня хлебом не корми дай его почитать.

Градус Sci-Fi начал зашкаливать Мало того, что на днях китайские ученые впервые успешно разморозили клетки мозга без каких-либо повреждений (как вы понимаете, это прорыв в крионике - мы стали на шаг ближе к бессмертию). Так теперь все начали обсуждать совершенно фантастический проект BrainBridge, в рамках которого ученые планируют учиться пересаживать головы (есть небольшой ролик о том, как это будет происходить, но предупреждаю, что он может показаться неприятным). Проект пока существует в формате концепта, но на него, разумеется, уже обрушилась волна критики. Но в целом занятно, как общий ажиотаж на фоне стремительного развития ИИ и сопутствующих технологий вдохновляет исследователей браться за совершенно безумные идеи, а некоторую публику - верить в их потенциальную реализуемость. Кажется, мы уже смирились с тем, что слово «невозможно» нынче не очень популярно. #science #surreal