en
Feedback

Don't get caught by a cheater! Telemetrio finds and tags such channels 👉 If you want to see the tag, subscribe

Всеволод Викулин

Всеволод Викулин

Open in Telegram

Нормальный AI, а не бесконечные пилоты. Стратегия для руководителей — vikulin.ai Для связи — @vsevolod_vikulin

Show more
5 540
Subscribers
+224 hours
+97 days
+7730 days
Posts Archive
В чём сила, брат? В экспертизе Когда мы говорим об эффектах AI, почему-то первым делом думаем об автоматизации. Руки так и чешутся кого-нибудь автоматизировать! Эта кровожадность вполне объяснима, но не очень рациональна. Потому что самые большие эффекты AI могут быть не от сокращения ФОТа, а от того, что мы начинаем продавать клиенту другой продукт. Или даже меняем саму бизнес-модель. Кейс компании Gamma В 2020 году ребята из США решили сделать удобный PowerPoint. За два года набрали 60 тысяч пользователей, большинство из которых попробовали продукт один раз и больше не возвращались. За это время основатели хорошо изучили, как люди создают презентации, и обнаружили главную проблему — чистый лист. Представьте: вы открываете редактор, а там один пустой слайд. Мне даже писать такое страшно! Можно было сделать редактор удобнее, добавить шаблонов, упростить форматирование. Но появился генеративный AI. И они поняли, что теперь могут сразу дать клиенту готовый черновик, который останется только доработать. При этом у Gamma уже был собственный редактор и два года продуктового опыта. Они знали, как люди создают презентации и с какими проблемами сталкиваются. Через три месяца после запуска AI-версии у них было уже 3 миллиона пользователей. А в апреле 2025 года — $50 млн годовой подписной выручки при 30 сотрудниках (вот что AI-native животворящий делает). Они не стали вставлять милый чат-бот в их PowerPoint. Они перевернули логику продукта: раньше человек создавал презентацию в редакторе, теперь AI создаёт презентацию, которую человек редактирует. [Источник] Кейс компании Matrix Design Основанная в 2010 году китайская компания занималась профессиональным дизайном интерьеров: жилых комплексов, офисов, гостиниц и т. д. В 2022 году компания начали экспериментировать с Midjourney и Stable Diffusion. Но оказалось, что универсальные решения плохо подходят под их реальные процессы. И они решили разработать собственную AI-платформу для дизайна. Matrix собрала опытных дизайнеров из разных подразделений и поручила им структурировать свои знания: описывать стили, сочетания цветов, материалы, освещение, организацию пространства. А для оценки результатов создали группу старших дизайнеров, которая определяла, какие изображения действительно соответствуют профессиональному стандарту. В 2024 году платформу запустили внутри компании. В результате время подготовки визуализаций сократилось со 120 до 8 часов. А потом подумали: давайте продавать платформу другим! К началу 2025 года на платформе было уже более 20 тысяч зарегистрированных внешних дизайнеров. Вот вам и переход от продажи дизайн-услуг к SaaS для дизайнеров. Нужно было просто упаковать собственную экспертизу в технологический продукт. [Источник] Так делали задолго до GenAI. Датская компания Copenhagen Merchants с 1977 года занимается посредничеством в торговле зерном. Её брокеры находят покупателей и продавцов, анализируют цены, помогают заключать сделки. За десятилетия работы компания накопила огромный объём рыночных данных и отраслевой экспертизы. В 2018 году решили превратить всё это в отдельный продукт — аналитическую платформу. Она объединяет данные о ценах, товарных потоках и морских перевозках, помогая трейдерам находить выгодные торговые возможности. Раньше компания продавала посреднические услуги, а теперь ещё и доступ к собственной аналитике. Совершенно другой продукт. И для этого даже не понадобились LLM. [Источник] Что на самом деле ваше конкурентное преимущество? AI позволяет автоматизировать труд и благодаря этому перестраивать бизнес-модели. Приближать продукт непосредственно к клиенту, убирая целую цепочку людей между ним и результатом. И за счёт этого получать гораздо более маржинальную экономику. Но тут возникает вопрос. Если мы убираем людей из этой цепочки, почему всё не закончится монополией нескольких AI-гигантов? Зачем вообще нужны Gamma и Matrix Design, если OpenAI тоже умеет генерировать презентации и изображения? Внутренняя экспертиза. Каждое исправление презентации в Gamma или дизайна в Matrix — это потенциально новое знание, которое можно использовать для улучшения системы. И в следующий раз агент сделает работу лучше. Да, я стал немного сектантом по системам с обратной связью. Ваше главное конкурентное преимущество — экспертиза в создании ценности для своих клиентов. И эту экспертизу нужно уметь оборачивать в современные технологии. Позавчера — в интернет-сервис, вчера — в мобильное приложение, сегодня — в AI-агента. А завтра — кто его знает? Я честно не знаю, что будет дальше. Но точно знаю, что мы с вами справимся.
18 Nov, 01:56

Каждое исправление презентации в Gamma или дизайна в Matrix — это потенциально новое знание, которое можно использовать для улучшения системы. И в следующий раз агент сделает работу лучше. Да, я стал немного сектантом по системам с обратной связью. Ваше главное конкурентное преимущество — экспертиза в создании ценности для своих клиентов. И эту экспертизу нужно уметь оборачивать в современные технологии. Позавчера — в интернет-сервис, вчера — в мобильное приложение, сегодня — в AI-агента. А завтра — кто его знает? Я честно не знаю, что будет дальше. Но точно знаю, что мы с вами справимся.
18 Nov, 01:53
18 Nov, ~01:54

В чём сила, брат? В экспертизе Когда мы говорим об эффектах AI, почему-то первым делом думаем об автоматизации. Руки так и чешутся кого-нибудь автоматизировать! Эта кровожадность вполне объяснима, но не очень рациональна. Потому что самые большие эффекты AI могут быть не от сокращения ФОТа, а от того, что мы начинаем продавать клиенту другой продукт. Или даже меняем саму бизнес-модель. Кейс компании Gamma В 2020 году ребята из США решили сделать удобный PowerPoint. За два года набрали 60 тысяч пользователей, большинство из которых попробовали продукт один раз и больше не возвращались. За это время основатели хорошо изучили, как люди создают презентации, и обнаружили главную проблему — чистый лист. Представьте: вы открываете редактор, а там один пустой слайд. Мне даже писать такое страшно! Можно было сделать редактор удобнее, добавить шаблонов, упростить форматирование. Но появился генеративный AI. И они поняли, что теперь могут сразу дать клиенту готовый черновик, который останется только доработать. При этом у Gamma уже был собственный редактор и два года продуктового опыта. Они знали, как люди создают презентации и с какими проблемами сталкиваются. Через три месяца после запуска AI-версии у них было уже 3 миллиона пользователей. А в апреле 2025 года — $50 млн годовой подписной выручки при 30 сотрудниках (вот что AI-native животворящий делает). Они не стали вставлять милый чат-бот в их PowerPoint. Они перевернули логику продукта: раньше человек создавал презентацию в редакторе, теперь AI создаёт презентацию, которую человек редактирует. [Источник] Кейс компании Matrix Design Основанная в 2010 году китайская компания занималась профессиональным дизайном интерьеров: жилых комплексов, офисов, гостиниц и т. д. В 2022 году компания начали экспериментировать с Midjourney и Stable Diffusion. Но оказалось, что универсальные решения плохо подходят под их реальные процессы. И они решили разработать собственную AI-платформу для дизайна. Matrix собрала опытных дизайнеров из разных подразделений и поручила им структурировать свои знания: описывать стили, сочетания цветов, материалы, освещение, организацию пространства. А для оценки результатов создали группу старших дизайнеров, которая определяла, какие изображения действительно соответствуют профессиональному стандарту. В 2024 году платформу запустили внутри компании. В результате время подготовки визуализаций сократилось со 120 до 8 часов. А потом подумали: давайте продавать платформу другим! К началу 2025 года на платформе было уже более 20 тысяч зарегистрированных внешних дизайнеров. Вот вам и переход от продажи дизайн-услуг к SaaS для дизайнеров. Нужно было просто упаковать собственную экспертизу в технологический продукт. [Источник] Так делали задолго до GenAI. Датская компания Copenhagen Merchants с 1977 года занимается посредничеством в торговле зерном. Её брокеры находят покупателей и продавцов, анализируют цены, помогают заключать сделки. За десятилетия работы компания накопила огромный объём рыночных данных и отраслевой экспертизы. В 2018 году решили превратить всё это в отдельный продукт — аналитическую платформу. Она объединяет данные о ценах, товарных потоках и морских перевозках, помогая трейдерам находить выгодные торговые возможности. Раньше компания продавала посреднические услуги, а теперь ещё и доступ к собственной аналитике. Совершенно другой продукт. И для этого даже не понадобились LLM. [Источник] Что на самом деле ваше конкурентное преимущество? AI позволяет автоматизировать труд и благодаря этому перестраивать бизнес-модели. Приближать продукт непосредственно к клиенту, убирая целую цепочку людей между ним и результатом. И за счёт этого получать гораздо более маржинальную экономику. Но тут возникает вопрос. Если мы убираем людей из этой цепочки, почему всё не закончится монополией нескольких AI-гигантов? Зачем вообще нужны Gamma и Matrix Design, если OpenAI тоже умеет генерировать презентации и изображения? Внутренняя экспертиза.
18 Nov, 01:53
18 Nov, ~01:54

Каждое исправление презентации в Gamma или дизайна в Matrix — это потенциально новое знание, которое можно использовать для улучшения системы. И в следующий раз агент сделает работу лучше. Да, я стал немного сектантом по системам с обратной связью. Ваше главное конкурентное преимущество — экспертиза в создании ценности для своих клиентов. И эту экспертизу нужно уметь оборачивать в современные технологии. Позавчера — в интернет-сервис, вчера — в мобильное приложение, сегодня — в AI-агента. А завтра — кто его знает? Я честно не знаю, что будет дальше. Но точно знаю, что мы с вами справимся.
18 Nov, 01:52
18 Nov, ~01:53

В чём сила, брат? В экспертизе Когда мы говорим об эффектах AI, почему-то первым делом думаем об автоматизации. Руки так и чешутся кого-нибудь автоматизировать! Эта кровожадность вполне объяснима, но не очень рациональна. Потому что самые большие эффекты AI могут быть не от сокращения ФОТа, а от того, что мы начинаем продавать клиенту другой продукт. Или даже меняем саму бизнес-модель. Кейс компании Gamma В 2020 году ребята из США решили сделать удобный PowerPoint. За два года набрали 60 тысяч пользователей, большинство из которых попробовали продукт один раз и больше не возвращались. За это время основатели хорошо изучили, как люди создают презентации, и обнаружили главную проблему — чистый лист. Представьте: вы открываете редактор, а там один пустой слайд. Мне даже писать такое страшно! Можно было сделать редактор удобнее, добавить шаблонов, упростить форматирование. Но появился генеративный AI. И они поняли, что теперь могут сразу дать клиенту готовый черновик, который останется только доработать. При этом у Gamma уже был собственный редактор и два года продуктового опыта. Они знали, как люди создают презентации и с какими проблемами сталкиваются. Через три месяца после запуска AI-версии у них было уже 3 миллиона пользователей. А в апреле 2025 года — $50 млн годовой подписной выручки при 30 сотрудниках (вот что AI-native животворящий делает). Они не стали вставлять милый чат-бот в их PowerPoint. Они перевернули логику продукта: раньше человек создавал презентацию в редакторе, теперь AI создаёт презентацию, которую человек редактирует. [Источник] Кейс компании Matrix Design Основанная в 2010 году китайская компания занималась профессиональным дизайном интерьеров: жилых комплексов, офисов, гостиниц и т. д. В 2022 году компания начали экспериментировать с Midjourney и Stable Diffusion. Но оказалось, что универсальные решения плохо подходят под их реальные процессы. И они решили разработать собственную AI-платформу для дизайна. Matrix собрала опытных дизайнеров из разных подразделений и поручила им структурировать свои знания: описывать стили, сочетания цветов, материалы, освещение, организацию пространства. А для оценки результатов создали группу старших дизайнеров, которая определяла, какие изображения действительно соответствуют профессиональному стандарту. В 2024 году платформу запустили внутри компании. В результате время подготовки визуализаций сократилось со 120 до 8 часов. А потом подумали: давайте продавать платформу другим! К началу 2025 года на платформе было уже более 20 тысяч зарегистрированных внешних дизайнеров. Вот вам и переход от продажи дизайн-услуг к SaaS для дизайнеров. Нужно было просто упаковать собственную экспертизу в технологический продукт. [Источник] Так делали задолго до GenAI. Датская компания Copenhagen Merchants с 1977 года занимается посредничеством в торговле зерном. Её брокеры находят покупателей и продавцов, анализируют цены, помогают заключать сделки. За десятилетия работы компания накопила огромный объём рыночных данных и отраслевой экспертизы. В 2018 году решили превратить всё это в отдельный продукт — аналитическую платформу. Она объединяет данные о ценах, товарных потоках и морских перевозках, помогая трейдерам находить выгодные торговые возможности. Раньше компания продавала посреднические услуги, а теперь ещё и доступ к собственной аналитике. Совершенно другой продукт. И для этого даже не понадобились LLM. [Источник] Что на самом деле ваше конкурентное преимущество? AI позволяет автоматизировать труд и благодаря этому перестраивать бизнес-модели. Приближать продукт непосредственно к клиенту, убирая целую цепочку людей между ним и результатом. И за счёт этого получать гораздо более маржинальную экономику. Но тут возникает вопрос. Если мы убираем людей из этой цепочки, почему всё не закончится монополией нескольких AI-гигантов? Зачем вообще нужны Gamma и Matrix Design, если OpenAI тоже умеет генерировать презентации и изображения? Внутренняя экспертиза.
18 Nov, 01:52
18 Nov, ~01:53

Малому бизнесу проще получить эффект от AI Кажется, я вас уже достал рассказами о том, что реального профита от искусственного интеллекта пока мало. Но мы всегда смотрели на AI-трансформацию крупных компаний. А что с малым бизнесом? Спойлер: мне кажется, там всё будет сильно легче. У крупных компаний проблема не с AI А с людьми. Я люблю людей, правда. Но когда их много, ими очень сложно управлять. Клянусь, когда мы с командой отмечали новый релиз, даже за один стол всех усадить было сложно (но вы всё равно молодцы). Это мне с 20 людьми и столом было сложно. А теперь представьте, что у вас отдел на сотню. Или на тысячу. И всем надо внедрить искусственный интеллект, а не стол. Больно, да? В 1996 году профессор Гарварда Джон Коттер написал книгу Leading Change, которую TIME потом включил в 25 самых влиятельных книг по менеджменту. Согласен с TIME, мне она тоже очень нравится. Но это, блин, целая книга о том, как заставить МНОГО ЛЮДЕЙ МЕНЯТЬСЯ. Цельных 8 этапов организационных изменений. В прошлой статье я рассказывал, что для получения реального эффекта от AI нужно перестраивать бизнес-процессы. Но в большой компании тысячи процессов. Они связаны между собой, в них участвуют разные отделы. Чувствуете, да? Вам придется тысячу раз пройти через восемь, мать их, этапов, которые Джон Коттер описал ещё в 1996 году. Сколько лет это займёт? Минутка научных исследований стартапов А что, если вы очень маленький? Например, стартап. Два-три друга в гараже (почему всегда в гараже? Откуда у всех, блин, эти гаражи?) решили делать бабки. Людей пока меньше, чем этапов у Джона Коттера. Может, в таком бизнесе внедрение ИИ пойдёт гораздо лучше? Давайте посмотрим на исследования. В работе Mapping AI into Production исследователи INSEAD (это известная международная бизнес-школа) провели эксперимент с 515 стартапами. Все получили доступ к ИИ-инструментам и техническому обучению (как промпты писать). Но одной группе дополнительно показали, как другие компании реинжинирят работу вокруг AI, и помогли найти такое в собственном бизнесе. Давайте ещё раз. Обеим группам дали AI. Но одной дополнительно объяснили, как перестраивать под него бизнес-процессы. То есть примерно то, о чём вы совершенно бесплатно прочитали у меня! Выручка экспериментальной группы оказалась в 1,9 раза выше, чем у контрольной. Статистически значимо. А заявленная потребность во внешнем капитале оказалась на 39,5% ниже. Чувствуете, как вам со мной повезло? Эффект от искусственного интеллекта возникает, когда вы меняете не инструмент сотрудника, а сам способ работы компании. И маленькому бизнесу сделать это может быть гораздо проще. Что вам делать на практике Если вы маленький, вам повезло. Вы ещё не успели нанять тысячу людей, построить огромную иерархию и придумать сотню комитетов. Поэтому у вас есть возможность быстро-быстро реинжинирить бизнес под AI. А если вы крупный бизнес, вам тоже повезло! Но по-другому! Поздравляю, вы сможете на практике применить лучшие методы научного менеджмента и управления организационными изменениями. И вам, кстати, очень важно прочитать мою статью про этот процесс. Не пожалеете. Да, вам будет тяжелее. Но если начнёте делать сейчас, а не ждать идеального момента, может, ещё успеете. Пока ваш маленький брат не встроил себе рой ИИ-агентов вместо сотрудников. Кстати, если вы собственник или руководитель компании — напишите мне @vsevolod_vikulin . Я провожу исследование, где искусственный интеллект на практике приносит компаниям наибольший экономический эффект.
11 Nov, 01:17

90% компаний внедрили AI. Заработали 6% Это свежие данные McKinsey. И за год доля заработавших не сдвинулась ни на процент. Компании штампуют пилоты: суммаризация тут, чат-бот там. Каждый по отдельности неплох, но вместе они не перестраивают систему, и на уровне компании эффекта не видно. Как делать по-другому, я собрал в новой статье. Там вы найдёте: — Как перестраивать бизнес-процессы, а не посыпать их горсткой AI-пыли — Как управлять разработкой по гейтам и не проиграть все деньги в этом казино — Почему трансформацию нужно делать внутри организации — Когда, а главное, зачем строить платформу Статья длинная, но с картинками! Как всегда, жду вопросы и мысли в комментариях или в личных сообщениях.
03 Nov, 01:19

AI-разработка через циклы обратной связи Никто заранее не знает, какой промпт вам написать, какие тулы дать агенту и на какой
AI-разработка через циклы обратной связи Никто заранее не знает, какой промпт вам написать, какие тулы дать агенту и на какой LLM его запустить. Не знаю даже я. Хорошая новость: для успеха вам и не нужно это знать. Нужно построить процесс, который покажет, где вы ошиблись и что исправить. Я правда считаю этот пост самым полезным советом, который я могу дать по разработке агентов. И который мы с командой нашли за этот год. Почему нет инструкции по сборке агента Было бы приятно: берёте Qwen такого-то размера, кладёте в контекст столько-то токенов, подключаете семь тулов. Поздравляю, бухгалтерия автоматизирована. Но — нет. Всё зависит от задачи. А пока вы собирали лучшие практики для одной модели, вышла следующая, которой половина этих практик только мешает. Поэтому вместо поиска идеальной архитектуры вам нужен поиск источника обратной связи. Что-то, что покажет: здесь агент справился, а здесь полез не в ту базу и уверенно насоветовал всякого безобразного. Как выглядит цикл Допустим, агент помогает сотрудникам разбираться в документах. Человек спрашивает про возврат товара. Агент лезет в старую базу регламентов и приносит инструкцию, которая не действует уже полгода. Сотрудник пишет: «По возвратам надо смотреть в другую базу». Отлично. Нет, агент отработал плохо. Отлично, что теперь вы знаете, что исправлять. Дальше разбираетесь: агент не понял описание тула? Не знал, какая база актуальная? Или нужную базу ему вообще забыли подключить? Исправляете причину, проверяете на этом и других примерах, выкатываете обновление. Получается цикл: Агент поработал → получили обратную связь → разобрали ошибки → внесли изменения. Больше так не ошибаемся. И в новый цикл. Кстати, часть этого цикла вы тоже можете автоматизировать агентами (про это пост и будут еще). Но это для продвинутых, начните сначала с человеками. Кто скажет, что агент накосячил - Асессоры. Разбирают ответы по вашим критериям и отмечают ошибки. Важно, чтобы сами одинаково понимали, что ошибка. Иначе получите дискуссионный клуб (подробнее в посте). - LLM-as-judge. Другая модель оценивает работу агента. Только сначала проверьте, что её оценки согласуются с человеческими (подробнее в посте). - Ваш сотрудник. Тот самый, которому вы автоматизируете работу. Он часто лучше асессора знает, почему ответ бесполезен: регламент устарел, исключение не учтено, в эту систему вообще нельзя писать без согласования. - Ваш клиент. «Тупой бот, позови оператора» — тоже обратная связь. Не самая подробная, зато искренняя. В AI много внимания уделяют первым двум вариантам. Они полезны, но разметка стоит денег, а критерии ещё нужно придумать и поддерживать. Поэтому не игнорируйте людей, которые уже работают с агентом. Они каждый день находят вам ошибки. Бесплатно. И от души. На чём фокусироваться в разработке Как только вы сделали цикл, все о чем важно думать — как сделать его короче. Нужно как можно быстрее получать фидбек и как можно быстрее проворачивать изменения. Заметили проблему, поняли причину, исправили, проверили. И делаете так постоянно, пока не будет работать. В классическом ML это знакомая история: собрали ошибки, поправили данные, переобучили модель. Удобно соревноваться на задачах, где правильный ответ уже известен, нужно научить LLM его воспроизводить. В реальной работе ответ часто ещё нужно найти. Поэтому такие советы сложно найти в статьях/конференциях. Но знаете где можно? Правильно, у меня.
28 Oct, 02:50

Видеозапись моего доклада Стратегия внедрения AI-агентов на Gigaconf. На нашем с командой опыте обсудили, как строить агентский заводик. Чтобы систематично на нем выпекать агентов. Как выглядит CJM на этом заводике, какие вакансии на нем открыты и как его уже можно автоматизировать. Теперь вы точно знаете, чем заняться в выходные. Если остались вопросы по масштабированию агентов в компании, пишите в личные сообщения.
24 Oct, 05:45

Почему в R&D выживают только параноики Сложно управлять разработкой, когда не знаешь, получится ли вообще что-то разработать. Даже психологически. В AI такое возникает постоянно. Неважно, внедряете вы первого в компании AI-ассистента, копилота для аналитика или агента-тестировщика, — вы попадаете в R&D. Сегодня обсудим, как им управлять, чтобы прийти к успеху. Ну или хотя бы не проиграть все деньги в этом казино. Что такое R&D Это когда непонятно, реально ли то, что вы задумали. Лезть в такое имеет смысл, когда есть гипотеза, на которой можно заработать очень много денег. Самый понятный пример — фарма. Провести новое лекарство через все клинические испытания может стоить сотню миллионов долларов. Успешно проходит примерно 1 из 10, остальные девять отправляются в корзину (вместе с деньгами). Но одно вышедшее лекарство окупает весь этот карнавал научной мысли. В AI такое случается, когда вы берётесь за проект, который никто ни в вашей компании, ни в соседних ещё не делал. В смысле, не делал успешно. Как управлять такой разработкой В фарме клинические испытание сначала проводят на небольшой группе, потом побольше, потом еще побольше. Дорогие исследования ставят на самый конец, чтобы не тратить кучу денег на бесперспективную технологию. Вот ровно также нужно делать и вам в AI. Представьте, что вы параноик. У вас в голове должен быть список причин, почему проект провалится (блокеров). Планируйте разработку через испытания, чтобы причины как можно скорее подтверждались. Ну или, если повезет, — не подтвердились. Вначале — самые дешевые испытания. Допустим, мы делаем на опенсорсе AI-ассистента, который собирает подборки интересных товаров. Что может пойти не так? Блокер 1 (самый вероятный): это нафиг не нужно вашим пользователям. Как проверить? Возьмите частотные запросы вроде «айфон {?} Pro Max» и напишите на них 1000 ответов экспертами. Покажите их пользователям и посмотрите, будут ли они переходить в товары. Не взлетело — разбираемся почему. Не поняли, как поправить, — закрываем проект. Поздравляю, вы уберегли себя от вкапывания месяцев разработки в никуда. Блокер 2: эксперты такое написать могут, а LLM ещё нет. Промптим самый свежий Opus или GPT, сохраняем ответы в офлайн-базу, повторяем эксперимент. Анализируем. Не поняли, в чём фейл, — что делаем? Правильно, закрываем. Сэкономленный рубль — заработанный рубль! Блокер 3: на Opus такое сделать можно, а на опенсорсе нельзя… думаю, вы поняли. …и так, пока не сделаете ассистента. Чем сильнее менеджер, тем больше причин провалов он заранее предусмотрит. Вместо резюме  Далеко не всем вообще нужно лезть в AI R&D. Я бы даже сказал, почти никому. Если на кону не куча денег, просто не лезьте туда. Большая ошибка — когда компании, которым НАФИГ НЕ НУЖЕН AI-АНАЛИТИК, бегут собирать его первыми. Скорее всего, не соберут. А если каким-то чудом соберут, не получат ничего, кроме самоудовлетворения. Побудьте немножко ждуном. Подождите, пока компании с бо́льшим штатом аналитиков соберут эти копилоты, а потом за чашкой чая (ведь чая?) узнайте все их секретики. И вот потом сделаете. С бюджетом в 10 раз меньше. Этот эффект известен далеко за пределами AI: первооткрывателем быть выгодно не всегда. Графический интерфейс Mac подсмотрен у Xerox, а Стив Джобс отвечал: «Мы никогда не стеснялись воровать великие идеи». И заработал на этом кучу денег. Может, и вам пора воровать идеи из этого канала? Все проверены, рекомендую.
20 Oct, 02:20

Две стадии AI-трансформации Вам нужно трансформировать какую-то функцию: поддержку, бухгалтерию, разработку. Как подходить к
Две стадии AI-трансформации Вам нужно трансформировать какую-то функцию: поддержку, бухгалтерию, разработку. Как подходить к такой объемной задаче? Мы с командой нашли рабочую схему. Рекомендую применить или хотя бы детально ознакомиться. Стадия 1. R&D На старте ничего не понятно. Ясно, что нужны агенты, а как без них. Но как именно нужны — непонятно совсем. Вам нужна небольшая и очень экспертная команда. Такая, которая умеет выдвигать гипотезы и не демотивируется, когда 99% из них проваливаются. Фокусируйте команду не на итоговой метрике (например, уровне автоматизации), а на скорости проверки одной гипотезы. Автоматизацию будете улучшать потом, когда станет понятно, что работает. В команде должен быть явный перекос в сторону сильных инженеров. Им придётся принимать много решений исключительно на интуиции. У команды должна быть высокая автономность, а ваш стиль управления — поддерживающим. Команда глубже всех погружена в новое и неизвестное, поэтому ваша роль — взгляд со стороны, чтобы подсвечивать слепые пятна. Нормально, что сразу всё не получится. Но если вы проверяете адекватные гипотезы и не бегаете по кругу, рано или поздно найдёте нужную связку. Стадия 2. Масштабирование R&D закончился успехом, но метрики процесса не изменились, потому что массово в проде еще ничего нет. Теперь технологию нужно внедрять, и главная проблема этой стадии — внедрять придётся очень много. Здесь и появляются новые роли вроде FDE, про которых я писал в статье. Тут тоже нужна экспертная команда, но уже для того, чтобы построить процессы и платформу. И фокус меняется: теперь вы качаете итоговую метрику, а значит, фокусируйтесь на скорости внедрения. Главный рычаг, который мы нашли, — агенты, ускоряющие само внедрение. Разбейте CJM внедрения на участки, найдите бутылочные горлышки и встройте агента в каждое (подробнее про эти горлышки — в книге «Критическая цепь» Голдратта). То есть секрет успешного внедрения — сразу автоматизировать команду внедрения. И R&D после первого успеха можно не сворачивать. Он может найти новые технологии, которые поднимут ROI FDE-команды в несколько раз. Что вы накапливаете во время стадий Трансформация крупной функции — очень сложный проект, и технологически, и организационно. Можете мне поверить. И упирается он не в технологии, а в экспертизу людей. На этих двух стадиях вы строите не только технологии и процессы. В первую очередь вы копите экспертизу команды — связку людей, которая прошла путь от первых гипотез до масштабного внедрения. Поэтому после первой успешной трансформации можно идти трансформировать всё остальное. Там будет совсем другая специфика, но технологические и организационные вызовы — ровно те же. И с опытной командой вы пройдёте их сильно быстрее. Только не переживайте, что это работа скоро закончится. Человечество столько насоздавало процессов. На нашем веку хватит. Даже бок о бок с агентами.
13 Oct, 02:34

Нас ждёт очередная технологическая трансформация Угадайте, про что нобелевский лауреат по экономике Роберт Солоу сказал: «***
Нас ждёт очередная технологическая трансформация Угадайте, про что нобелевский лауреат по экономике Роберт Солоу сказал: «*** видны уже везде, кроме статистики производительности». Про AI-агентов? Нет. Про компьютеры. Цитата 1987-го года. Все большие технологические трансформации идут по одному сценарию. Поэтому, чтобы понять, что будет, полезно заглянуть в историю. GPT — это GPT Есть класс технологий, который экономисты называют General Purpose Technology, технологии общего назначения. Сокращённо GPT. Иронично, правда? Эта технология проникает во все сферы и меняет то, как мы живём и работаем. Примеры: паровой двигатель, электричество, компьютер. А теперь, похоже, и AI. Главное её свойство — она порождает сопутствующие инновации. На её базе появляются продукты и процессы, которые раньше были невозможны. Нельзя просто так взять и внедрить GPT Сама по себе технология общего назначения приносит мало. Деньги появляются, когда под неё перестраивают весь способ работы. Классика — электрификация заводов. В конце XIX века фабрика работала от одной большой паровой машины. Она крутила вал под потолком, а от вала ремнями приводились все станки. Сначала люди просто выкинули паровик и поставили на его место большой мотор. И ничего не изменилось. Эффект пришёл, когда до инженеров дошло: теперь мотор можно поставить на каждый станок. Исчезли валы, станки расставили по ходу производства. Производительность скакнула. Ушло на это около 40 лет. Это называется комплиментарные инвестиции. Это вложения во всё, без чего технология не работает: образование сотрудников, перестройка процессов, инфраструктура и тд. По оценкам экономистов, в ИТ-трансформации на них приходилось 90% всех вложений. Деньги будут, но не сразу В начале перестройки эффекта не видно: затраты уже есть, а отдачи ещё нет. Ученые называют это J-кривой (см. картинку). Сначала показатели проседают, скептики в этот момент кричат: пузырь, пузырь! Солоу пошутил в 1987-м, а во второй половине 90-х рост производительности в США заметно ускорился. И две трети этого ускорения экономисты приписали как раз ИТ. Компьютерам понадобилось лет десять. Электричеству — сорок. Что вам делать с AI AI будет внедряться по тем же законам. Только быстрее: заводы перестраивать не надо, а часть инфраструктуры AI вообще пишет себе сам. Сначала определитесь, где новый паровой двигатель даст вам самое большое преимущество. И уверенно перестраивайте эту сферу на AI-рельсы. Вкладываясь в экспертизу команды и инфраструктуру. Как именно это делать — обсудим вместе. И сделаем. Обещаю, быстрее, чем за 40 лет.
07 Oct, 02:30

Друзья, многим стали писать в личку по поводу «обучения у меня». Наконец-то стал чувствовать себя знаменитым) Это спам. У меня нет никаких наставничеств/ коучингов/менторств и тд. Единственное, что у меня есть это совместный курс с ВШЭ для руководителей. Курс хардкорный. Мы там смотрим на AI-стратегию компании, найм команды и приоритизацию кейсов. Вот это не спам. Мы с командой стараемся делать его лучше каждый раз. На остальное не обращайте внимание. Берегите время и деньги.
05 Oct, 05:00

Мне сегодня 31 AI-эксперт — он как вино. Хорошеет с каждым годом! А благодаря вам у меня был отличный год. Мы читали посты, ходили на конференции и откладывали в туду лист большие статьи. Спасибо вам за это. Кстати, если хотите мне что-то подарить — подарите мне внимание и прочитайте мою последнюю статью! Только ради бога, не просите просто саммери у ChatGPT. Это ровно тот контент, которым жалко делиться с ИИ.
02 Oct, 04:00

Кто должен внедрять AI в корпорацию? Новая статья Любые технологические трансформации это сложно. В первую очередь, потому что организации требуются новые компетенции. Поэтому возникают новые профессии. Мы с командой довольно сильно продвинулись в этом. Ключевые выводы я написал в новой статье. Там вы найдете: - Почему возникают новые роли - Кто такой Forward Deployed Engineer - Что будет с профессией в будущем, и какая роль будет вместо нее Как всегда, жду ваши вопросы/мысли в комментариях или в личных сообщениях.
01 Oct, 04:07

Решаем бизнес-кейс У большинства сложных проблем нет единственно правильного решения. На своих занятиях я люблю разбирать их в виде кейсов. Делаем автоматизацию бухгалтерии. Взяли последнюю GPT: все работает, метрики хорошие. Но данные нельзя отдавать во внешние API, поэтому пересаживаемся на опенсорс. Берем любимую версию Qwen, тюним промпт — качество сильно отстает. Перед вами встает вопрос: что делать дальше? Базовые мысли Если на GPT все работает, значит, вы уже собрали весь контекст. То есть все знания у модели есть, просто ей не хватает интеллекта, чтобы правильно их использовать. Значит, интеллект нужно как-то добавить. Каким образом это можно сделать: 1. Взять LLM побольше. 2. Дать LLM порассуждать подольше. 3. Сделать сложный харнесс: контекст-инжиниринг, мультиагентность, вот это все. 4. Дообучить модель. В чем размен каждого варианта При одинаковом качестве важны два свойства: 1. Стоимость работы: а) сколько GPU нужно купить; б) сколько людей нужно, чтобы решение не развалилось. 2. Стоимость улучшения: насколько дорого переходить на новую технологию. Разложим все четыре варианта по этим двум осям. 1. LLM побольше. Дорого из-за GPU. Поддерживать недорого: просто следим за инференсом. Улучшать дешево: просто подменяем модель и получаем тонны профита. 2. Рассуждать подольше. Также как пункт 1, только платим не столько за размер модели, сколько за токены. 3. Делать харнесс. По железу может быть дешевле пунктов 1 и 2, потому что можно работать с моделями поменьше (например, рекомендую харнесс Т-Серч, реально помогает). Но улучшать его сильно дороже: новая модель в старом харнессе может не дать аплифта, и его придется полностью переделывать. LangChain переделывал свой харнесс Open Deep Research 3 раза за год. 4. Дообучать. Инференс можно гонять на модели поменьше, зато нужна ML-команда. Вы попадаете в проблему data drift и постоянного переобучения. Новые модели тоже придется дообучать, и не факт, что это получится тем же кодом. Что выбрать Все зависит от вашей ситуации. — Если кровь из носа нужен эффект с самой дешевой экономикой прямо сейчас, делайте 4. — Если готовы немного переплатить за счастье в будущем, выбирайте 3 и старайтесь делать харнесс как можно легче. Вам все равно потом его переписывать. — Если вы богатый Буратино, идите в 1 или 2: через 5 лет скажете себе из прошлого спасибо. Это, кстати, известный принцип — The Bitter Lesson. Его в 2019 году сформулировал Ричард Саттон, один из отцов современного RL: в долгосрочной перспективе всегда выигрывают методы, которые масштабируются вычислениями. Иногда эффект автоматизации настолько мал, что правильный ответ — вообще ничего не делать. Честно сказать, что сейчас эту задачу выгоднее не автоматизировать. Подождать, пока опенсорс созреет, и тогда сорвать это сладенькое яблочко. Вы же помните, что мы решали бизнес-кейс?
28 Sep, 02:47

Кому можно вайбкодить и как это делать Управление AI-агентами очень похоже на управление людьми. Это мало кто в индустрии пон
Кому можно вайбкодить и как это делать Управление AI-агентами очень похоже на управление людьми. Это мало кто в индустрии понимает, но я попробую вас убедить на самом простом примере — вайбкодинге. Про вайбкодинг есть два крайних мнения: от «программисты больше не нужны» до «пользы никакой, раньше писали код, теперь ревьюим Клод. Давайте разберёмся, как к этому подходить, вдохновляясь дисциплиной, которой люди хорошо овладели. Менеджментом. Базовая теория управления от Всеволода Викулина Есть два ключевых фактора, от которых зависит, как передать работу другому исполнителю: экспертность исполнителя в задаче и ваша экспертность в задаче. — Вы эксперт, а исполнитель нет. Тогда вам нужно самому декомпозировать задачу до такого уровня, чтобы исполнитель был экспертен в подзадаче. Потом принять результат подзадачи, дать следующую, и так далее. — Вы не эксперт, а исполнитель эксперт. Декомпозировать сами вы уже не можете. Но совсем не контролировать нельзя, а то наделает всякого. Вы не контролируете его по ходу работы, а ставите конкретные KPI, которые он должен выполнить. Например, пройденные тесты, скорость работы и тд. Но не забывайте тут закон Гудхарта. — И вы эксперт, и исполнитель эксперт. Идеальная комбинация. Можно пробовать оба варианта: и KPI навесить (он же эксперт, сам разберется), и расписать, что конкретно делать, если вы считаете, что вы самый умный (у меня так). — Ни вы, ни исполнитель не эксперты. Ну, вы понимаете, что будет. Не вайбкодер, а багодел Может ли менеджер навайбкодить простой личный сайт? Может, даже если он не разбирается в разработке (я, кстати, навайбкодил). Клод в этом давно экспертен, а результат легко проверить глазами. А сложный сайт с базой данных и регистрацией уже не сможет. Клод всё ещё экспертен, но менеджер не сможет чётко объяснить, что именно нужно сделать. И не напишет тесты, на которых агент будет проверяться, а глазами такое не проверишь. Нечем проверить результат — получаете багодельню. Я сам видел много сайтов AI-консалтеров, где не работала половина функционала. Может ли опытный разработчик довайбкодить большую корпоративную легаси систему? Может, если разобьёт задачу на понятные куски и аккуратно объяснит Клоду, что надо делать. В этой задаче Клод пока не эксперт. И даже тесты ему не помогут. Возможно, следующие модели будут лучше навигироваться по тонне легаси-кода, но не уверен. Вместо резюме В менеджменте агентов нет ничего уникального. Вы на самом деле всё это уже умеете делать со своими коллегами. Хотя нет, всё-таки есть. Агент не принесёт вам оффер, что другой человек платит ему x2 за те же токены. В OpenAI до этого ещё не додумались. Пожалуйста, не подсказывайте им.
21 Sep, 02:20

Кто управляет разработкой AI-проекта Несколько лет назад во время очередного запуска я понял, как называется моя профессия. Проджект-менеджер. Почему-то многие фыркают на это название. Ну, деливери-менеджер. Ну ладно, AI-деливери-менеджер. Так точно должно звучать круто. Сейчас обсудим, что это за зверь и как им стать. В чем задача? Довести проект до прода. И чтобы он был успешным для бизнеса. Как вы понимаете, учитывая плачевную статистику AI-проектов, сделать это сложно. А чтобы ваши проекты были успешными, вам одновременно надо иметь: — Техническую адекватность. Вы должны хорошо знать ML, базово — бэкенд, немного фронтенд и продакт-менеджмент. Не лучше всех в команде, но достаточно, чтобы выслушать профессионала и понять его. — Хорошие софты. Лидерство. Короче, чтобы с вами было хорошо и приятно работать. — Любовь к принятию решений. Вы не самый сильный технарь, но вы должны брать на себя ответственность за финальное решение. Вам должно быть ОК принимать решения в условиях неопределенности. И отвечать за принятое. Откуда такие берутся? На самом деле пересечение этих трех осей довольно редкое. Такой милый технарь-решала (прям мой портрет, ей-богу!). Обычно они вырастают из двух профессий. Либо ML-щики с высокой тягой к ответственности и бизнес-эффектам (ваш покорный слуга). Либо продакты с инженерным образованием и желанием прокачиваться в тех. скилах. Я видел успешные кейсы и тех, и других. Хорошим проджект-менеджером AI-деливери-менеджером можно стать за несколько лет внедрения реальных кейсов. Успешного внедрения. Карьерные перспективы Это очень-очень дефицитная профессия. Ее уже не хватает, и дальше будет не хватать все сильнее. Взять этот ваш AI, собрать команду головорезов технарей и нанести непоправимую пользу бизнесу — это будет все востребованнее. Наносить пользу можно в разных масштабах: один агентик в соло, пять агентиков с командой — и вот ты уже трансформируешь огромную операционную функцию. Дальше можно и всю компанию! А что дальше? На самом деле, с точки зрения именно менеджмента, это довольно несложная профессия. Потому что это управление твоей продуктовой командой. Короче говоря, ты босс своего проекта. Более сильное менеджерское кунфу — это управление людьми, которые вне твоей команды. Там свои отдельные техники. Про это я тоже напишу пост. Когда сам разберусь. Обязательно разберусь, вот увидите.
16 Sep, 01:49

Всеобъемлющая статья про инференс LLM Многие у меня спрашивают, как посчитать GPU и как после этого сохранить рассудок. Потому что насчитали столько, что даже начальник, который очень-очень любит ИИ, не окнет. Теперь у меня есть для вас решение: прочитать мою статью и начать оптимизировать насчитанное. Всю статью старался писать максимально простым языком, чтобы было понятно не только хардкорному инженеру. В ней есть: - Как устроен инференс LLM - Как оценить, сколько на него нужно GPU - Какие есть методы оптимизации - В каких движках это релизовано Читайте, делитесь с друзьями. И задавайте вовпросы в комментариях или в личные сообщения @seva_batareika.
08 Sep, 02:17

Как стать AI-native компанией AI всегда был гонкой инфраструктуры. Если вы хотите крутые AI-продукты, пожалуйста, сделайте логирование всех данных, сложите их в огромное хранилище, потом варите из этого таблички, а сверху табличек обучайте модели на кластере. Хотите покруче — переходите на новую инфраструктуру. Через 2 года сможете. Чтобы варить лучшую AI-кашку, нужно иметь дорогой горшочек. Почти из золота. Мне, кстати, никогда это не нравилось. Я люблю 80% эффекта за 20% усилий. Поэтому мне нравится искать дырки в заборах: нетривиальные решения, которые срезают дорогие и долгие углы. Вот, например, последняя дырка в заборе — как мы описываем процесс для автоматизации через агентов. Дешево и быстро. А дорогие и долгие процессы мне не нравятся. Как-то неспортивно. Вот сейчас открылась огромная дырень в заборе технологичности. И я просто кайфую. Готовы узнать какая? AI может сам писать код. Наверное, вы ожидали инсайда покруче. Давайте еще раз. Дорогая инфраструктура — это код. AI может сам писать код. Так должно стать понятнее. Нету хорошего интерфейса для разметки? Навайбкодь его. Нет всех тулов для агентов? Навайбкодь их. Нету бизнес-описания процесса? Ах да, только что рассказывал. Конечно, мне стало тяжелее. Психологически. Стало сильно меньше отмазок, почему мой проект не взлетел. Надеюсь, так не только у меня. Ценность софта будет падать. Я допускаю, что через год Codex за 2 недели работы сделает с нуля неплохую A/B-платформу. Куда тогда инвестировать, если не в инфраструктуру? В людей. Инвестировать надо в людей. Именно этим я занимаюсь в этом канале и каждый день на работе. Один умный человек с правильными инструментами может найти дырку, пролезть в нее и вылезти обратно уже с мешком аплифтов. А если у вас есть бодрая опытная команда, она может собрать AI-экскаватор, которым уже можно дырявить огромные бетонные стены. И загребать ковшом тонны профита. AI-native — это люди. А не GPU, хранилища, кластера и крутые платформы. Главное — собрать таких людей. Ну и чтобы они потом не разбежались. Вы ведь не уйдете, правда?
30 Aug, 04:24