Выпустил
новый ролик на канале про исследование, в котором авторы подозревают проблески сильного искусственного интеллекта у GPT-4 (новой версии большой лингвистической модели от компании Open AI).
Произошло это на фоне целой серии серии призывов авторитетных и влиятельных людей приостановить разработку новых подобных систем ИИ. Илон Маск, Стивен Возняк и еще 4,5 тысячи значимых персон подписали
открытое письмо. Известный поборник рациональности Елиэзер Юдковский вовсе предложил
бомбить самые мощные вычислительные центры для обучения ИИ. То есть люди остаются людьми, и эмоции зашкаливают.
Про угрозы ИИ реальные и мнимые я планирую отдельный ролик. В новом же выпуске я разбирал лишь главный инсайт нового исследования о проблесках сильного ИИ у уже существующей системы. И в начале видео, где я ввожу в тему ролика и даю фрагменты комментариев экспертов, анонсируя, что будет дальше, я поставил в том числе реплику Сергея Маркова, специалиста по машинному обучению. Она состояла из двух кусочков, цитирую, как было опубликовано на канале: "Апокалипсис в силу этого дешевеет", "Наши технологии становятся все более могущественными, а вот наш разум, наша способность принимать умные решения она никак очень быстро не прогрессирует по сравнению с нашими технологиями".
В исходном разговоре первая фраза относилась к теме моратория на развитие ИИ. Сергей говорил в полной версии почти часового нашего разговора для ролика: "Во всем мире одновременно запретить это невозможно, во первых. А во вторых, даже если и возможно, это все очень опасно, очень опасно еще по другой причине. Потому что технологическое могущество человечества, оно нарастает в разных областях. И апокалипсис в силу этого дешевеет. То есть, скажем, 200 лет назад, даже если мы бы захотели бы навредить природе биосферы, земли, своему виду собственному всерьез, у нас не было технологических возможностей для этого с середины 20 века, для того, чтобы такой апокалиптический сценарий воплотился жизнь, нужны были усилия."
То есть я взял из исходной записи из одного контекста небольшую фразы для другого контекста. Дальше в своем ролике я рассказываю про то, как значительно поумневший GPT-4 может использоваться во зло (например, создавать целые кампании по дезинформации и для манипуляции людьми). Именно поэтому сразу после фразы про апокалипсис я поставил фразу о том, что наш человеческий мозг не поспевает за нашими возможностями. Мне казалось это сразу задает тон всему ролику. Это работало на мой авторский замысел.
Сергей глубоко оскорбился, поскольку счел, что фраза про удешевление апокалипсиса вне исходного контекста выставляет его алармистом и сторонником запрета развития ИИ, что для него как специалиста в этой сфере и сторонника технологии недопустимо.
Я не исключаю, что фраза может вызвать и такую трактовку у кого-то, за что я принес извинения лично и приношу их публично. Встроенным редактором Ютуба я вырезал эту двухсекундную фразу, и ее больше нет в видео.
Я прошел по грани, когда взял фразу из другого контекста. Но я не согласен с тем, что фраза использовалась неуместно для контекста, в который была помещена и якобы возникала манипуляция. Созданный контекст транслировал ровно противоположный оскорбительному для Сергея смысл: ИИ дает новые возможности, человек по-прежнему плохо с ними умеет справляться. Вот почему "удешевление апокалипсиса". Более того именно комментарии Сергея далее в ролике приземляют все страхи и рисуют конструктивную и взвешенную картину состояния технологий машинного обучения и ИИ на сегодня. Ради этого я к Сергею и обращался за комментарием. К этим фрагментам у Сергея претензий не было, там все осталось на своем месте.
Вы можете посмотреть без правок и сокращений весь наш разговор по зуму (длительностью чуть больше часа). Сергей рассказал намного больше, чем можно было вместить в ролик:
https://youtu.be/04Zm24tFT4g