LEFT JOIN

Аналитик SQL: профессия прошлого? 😥 Мы продолжаем знакомить вас с возможностями GPT-3 и, в частности, тем, как модель может повлиять на рабочий инструментарий аналитиков и инженеров данных в самом ближайшем будущем. Что произошло? Кен ван Харен, сооснователь платформы Patterns, решил проверить способности GPT-3, создав бот в Patterns Studio и подключив его к закрытой базе данных Crunchbase. Разработчика еще с прошлой работы беспокоила проблема необходимости тратить свое время на бессистемные мелкие SQL задачи, когда компания спонтанно требует предоставить отчет или уточнить какую-то информацию, отвлекая аналитика от более глобальных и серьезных проблем. И что получилось? Кену удалось, посредством стратегии из 6 шагов, создать CrunchBot — бот в Slack, который способен самостоятельно (при поддержке GPT-3, конечно) найти ответ на заданный вопрос, выгрузить необходимые данные и предоставить SQL запрос, который модель использовала в ходе решения задачи. Конечно, из-за дефицита контекста или недостаточной отладки процесса, CrunchBot может выдавать результаты с ошибками, но сам факт автоматизации SQL аналитики таким простым способом говорит о том, что восстание GPT-моделей против рутинных задач не за горами. Познакомиться с пошаговым гайдом по созданию аналогичного бота вы можете в статье Кена, где также можно подробнее узнать о том, как его настроить.

OpenAI выпустили классификатор, который определяет написан ли текст вручную или с использованием нейронки. Чем-то напоминает мне историю про антивирусные компании, которые вирусы сами и создают. Однако у меня данный классификатор не смог детектировать сгенерированную жалобу на простейшем промпте к ChatGPT — две картинки в карусели.

‍Умные заметки, генератор сопроводительных и мемов: семь AI-моделей, которым можно делегировать задачи — подборка @leftjoin для всех, кому нужен перерыв от ChatGPT 1. Summari — инструмент, который трансформирует любой текст на английском языке в короткий абзац с главной мыслью. Подойдет, если нужно быстро вытащить суть, а статью достаточно прочесть по диагонали. 2. Spreadsheet Magic — модель на основе GPT-3, которая может дополнить Google-таблицу через поиск и анализ информации в интернете. Закрытые и непопулярные данные не подтянет, но найти Twitter-аккаунты известных личностей или население штатов США у неё получится. 3. Refraction — сервис работает с C#, C++, Java, Python и другими языками и помогает создавать тесты, писать документацию, искать баги и объяснять код. Ваш код тоже может оптимизировать — никто не догадается, если программировать вы начали недавно. Первые пять попыток бесплатно. 4. Supermeme — генератор мемов на основе текста. Чувство юмора теперь можно отдать на аутсорс — с вас только жизненная ситуация, а генератор сам придумает, как ее обыграть. Первые 20 генераций бесплатные, причем получается не один вариант мема, а целая подборка. 5. Mem — не еще один генератор юмора, а умные заметки. Задача сервиса — автоматически рассортировать ваши идеи или записи по событиям, темам и людям, сохранить важные ссылки, назначить встречу и напомнить на нее явиться. Есть умный поиск и подсказки по редактуре. 6. Your Cover Letter — генератор сопроводительных писем на основе загруженного резюме и текста вакансии. Сводит ваш опыт с требованиями к должности и оформляет в красивый текст. Полезно, если устали выдумывать оригинальные сопроводительные для откликов на Linkedin. 7. Supernormal — AI-платформа, которая генерирует заметки с онлайн-встречи. Больше не придется выделять отдельного человека на самап и все смогут полноценно участвовать в созвоне — в конце достаточно отредактировать готовую заметку. Поддержки русского языка пока нет, но ждем локализаций. А если работаете в англоговорящей компании, уже можно тестировать. А что из своих задач вы бы делегировали на нейросеть? Пишите в комментарии — вдруг и под это уже придумали сервис.

Для ребят из @setters (которых мы любим и уважаем за их маркетинг, обучение и другие сайд-проекты) собрали подборочку AI-сервисов. Думаю, что и наши подписчики найдут что-то интересненькое для себя 😎

MusicLM: новая веха в музыкальной истории 🎼 Разработчики из Google Research выпустили доклад о модели MusicLM, которая генерирует музыку на основе текстовых подсказок, а также открыли доступ к датасету MusicCaps, в который входит 5.5k пар текст + музыка. Такое мы уже где-то видели! В отличие от Riffusion, модели для генерации музыки на основе Stable Diffusion, о которой мы писали ранее, MusicLM генерирует музыку высокого качества, а также может основываться не только на тексте, который описывает предназначение трека, настроение и инструменты, но и мелодию, позволяя также регламентировать каждый из этих аспектов указанием тайминга. Например, вы можете задать последовательную смену настроения композиции: начать с меланхоличной мелодии, перейти к бодро-танцевальной и закончить на симфоническом буйстве в стиле саундтреков Marvel. По ссылке на исследование вы также можете ознакомиться с интересными примерами генерации музыки на основе описаний картин, которые словно воссоздают полотна в аудио контексте, давая вам возможность представить, как бы «звучала» та или иная работа художника. Где попробовать запустить? Несмотря на релиз доклада и датасета, сама модель MusicLM выложена в открытый доступ еще не была, и, по слухам, в ближайшее время не будет. Вероятно, для релиза модели нужно подготовить данные о том, на чем ее обучали, что может привести к всплеску исков со стороны правообладателей о нарушении авторского права. Что вы думаете о развитии AI-технологий? Оставляйте ❤️, если вам нравится заметный прорыв в этом направлении и 😱, если стремительное развитие нейросетей вас пугает или тревожит.

Знаете ли вы реальные цены на Enterprise-внедрение dbt? Пташки нашептали мне реальный прайс на внедрение dbt в одну US-организацию. Хотел бы поделиться и раскрыть карты на реальное коммерческое положение дел по внедрению модного analytics engineering solution. Итак, 10 developer-доступов и 50 read-доступов обойдутся вам в $38K в год, добавьте к этому $6.3K в качестве one-time fee на онбординг и дело в шляпе. Кстати, в 2017 году примерно по такой же цене внедрялся Looker и очень похожая модель была с так называемым jump start kit (цена тоже очень похожая). И еще по этой теме недавно я наткнулся на интересный пост: автор придумал как оптимизировать такие приличные затраты на dbt заменив их github workflows.

42364369483

Студенты: хочу блистать знаниями во время онлайн семинаров и не палиться NVIDIA: ✔️ Мечты сбываются: в свежем релизе NVIDIA Broadcast — платформы для стриминга и видеоконференций. NVIDIA внедрила AI, чтобы ваш зрительный контакт с человеком по ту сторону экрана не прерывался. AI «нарисует» вам глаза (максимально реалистично, надо отдать честь!) пока вы будете спокойно смотреть видео на Youtube во время очередного совещания. Также, для создания более реалистичной картинки, разработчики представили в новой версии возможность размывать фон и добавлять виньетку, что позволяет увеличить глубину пространства в кадре и придать ему большую достоверность или более аккуратный вид. Ну а вдруг вы боитесь, что аккуратно разложенные позади вас предметы домашнего быта кто-то может заклеймить фразой «визуальный шум» 🧐 ...Где-то негодуют студенты, которые сдавали экзамены по Zoom'у в сезон локдауна в 2020 году.

Sketch — библиотека, которая выполнит всю работу за вас Если честно, при просмотре этого видео складывается ощущение, что больше можно совершенно не учиться программировать на Python, ведь Sketch может писать код и проводить анализ самостоятельно. Как она работает? Волшебно. А если серьезно, то эта библиотека — AI-ассистент по написанию кода: она заточена под анализ данных, в особенности с использованием библиотеки pandas (но и других тоже). Вам нужно подключить Sketch, загрузить данные, а затем либо задавать модели вопросы по данным, либо просить ее посчитать что-то на их основе, добавить переменные или нарисовать график. Если вы уже запереживали Спешим напомнить, что любое развитие науки и техники можно приручить и получать от него выгоду (а не потерю рабочего места). Не забывайте, что задачи, которые под силу лишь человеку, всегда будут. Не знаю, как вы, а я уже набираю pip install sketch и начинаю тестировать. Делитесь в комментариях, если вам уже это удалось!

📹 YouTube-канал LEFT JOIN вновь оживает: обзор на RocketBI 🚀 Спешу поделиться с вами первым (и далеко не последним!) ютуб-роликом в 2023 году. Что в обзоре? В этом обзоре мы познакомимся с новым BI-инструментом, Rocket.BI, и детально изучим его внушительные возможности визуализации данных, а также определим, в чем преимущества данного инструмента и его недостатки. А еще обсудим, почему разработчикам Redash стоит побеспокоиться о своем продукте, ведь на рынке у него появился сильный конкурент! Можно ли было увидеть его раньше? Можно! В канале FULL JOIN все эксклюзивные материалы выходят на две недели раньше. Присоединяйтесь и будьте в курсе всех новинок вместе с нами.

Аналитика данных — блог опытного специалиста в области данных (который активно работает с данными Uber!). Что в канале? 📍Много практических статей по использованию библиотек и методов, которые разобраны до мельчайших деталей понятным языком 📍Гайды по использованию Python 📍Советы и лайфхаки по оптимизации работы разных сред (например, Jupyter Notebook), которыми можно козырнуть на собеседовании Подписывайтесь, ведь много профессионального контента не-бы-ва-ет! #реклама

Одеваться как разработчик — скучно? Нет, практично! Как минимум, если одеваться как вполне конкретный разработчик Олоф Ховерфельт. Почему? Все дело в том, что Олоф подошел к анализу предметов гардероба, как к рабочей задаче. Он отмечал, какие вещи и когда носит, а затем проанализировал данные. В итоге, он смог разобраться какие вещи служат дольше, какие стоят своих денег и, самое главное, что ему вообще больше всего нравится и к чему «тянется рука». Какие данные он собирал? Всего у Олофа было 426 предметов одежды, которые он разделил на 12 типичных категорий. Каждый вечер он вносил в дневник информацию об одежде, которую носил в течение дня. На основе этих данных он посчитал специфические метрики: Cost Per Wear (CPW) — стоимость износа вещи или, иными словами, амортизацию новых вещей — и Category Daily Cost — сумму всех CPW вещей категории. Что получилось? ▫️ «Скупой не всегда платит дважды» — в зависимости от бренда, иногда более дешевые вещи служили дольше, чем дорогие, а иногда — нет. Например, кроссовки от Converse радовали обладателя дольше более дешевого аналога, но их CPW была значительно ниже дорогущих Diesel. ▫️ «Качество не ограничивается долговечностью и не может быть измерено только ею» — не стоит забывать про важность эмоций и переплату за бренд, который нравится и все тут. ▫️ Количество вещей, которые нуждаются в стирке, должно быть достаточным, чтобы они не закончились в неподходящий момент, но не слишком большим, чтобы они циклично стирались и не лежали неделями без дела. ▫️ Благодаря трекингу частоты носки вещей, получилось составить капсульный гардероб, то есть группу вещей, которые больше всего любит Олоф. В конце статьи есть список из 10 простых советов по оптимизации гардероба. Если честно, ничего прорывного и удивительного он не обнаружил. Однако, подход, который он использовал, помог ему изучить собственные привычки и заставил задуматься о тех вещах, на которые многие привыкли совсем не обращать внимание!

Очередная коллаборация GPT – теперь с Google Sheets То, с какой скоростью влияние и применение моделей GPT распространяется на нашу жизнь просто поражает воображение. Мы уже показывали вам, как один разработчик использовал gpt3 для заполнения таблиц. Но и этот метод активно развивается и улучшается! Что на гифке? Несколько дней назад в профиле LinkedIn ChatGPT, появилось видео автозаполнения пустых полей в таблице функцией gpt3(). С её помощью можно найти и добавить информацию из интеренета в вашу таблицу за считанные секунды. Нужны лишь заполненные ячейки и подписи строк и столбцов. Главное теперь научиться использовать сэкономленное время с умом!

Мой stacked bar chart До После стайлгайда стайлгайда

Здравствуйте, вам одобрена кредитная карта! Вам, наверное, неоднократно звонили «роботы» с предложением оформить карту Халва или взять кредит в Альфа банке? Возможно, вы никогда не задумывались над тем, что изначально эти голосовые сообщения были записаны живым диктором. Мы называем их «роботами», но время роботов только наступает! Например, всеобщее внимание недавно привлек проект компании Eleven Labs. Что за проект? Eleven Labs — это разработчики инструментов, которые специализируются на клонировании голоса, синтезировании речи и авто-дубляже. Почему о них стоит узнать? Eleven Labs готовятся выпустить в феврале этого года платформу, которая позволит сгенерировать новый голос, используя настройки и дерзость собственной фантазии. Аудиоспектакли, реклама, видео игры, обучающие курсы и музыка — подобный инструмент найдет применение как в бизнесе, так и в творчестве. Eleven Labs уже работали с синтезом речи ранее и, вдохновленные шумихой вокруг ChatGPT, Stable Diffusion, DALL-E и Midjourney, решили внести свой вклад и натренировали модель на основе своего банка голосов. Указав пол, возраст, акцент, высоту голоса и стиль речи, разработчики научили свою модель генерировать абсолютно новые голоса и готовятся поделиться своим изобретением со всем миром! А что будет с дикторами? Конечно, при таком широком спектре задач, которые могут решаться голосом AI, встает этический вопрос: а останется ли место на рынке труда для заработка обычным дикторам и актерам дубляжа? Eleven Labs уверяют, что этим профессиям ничего не угрожает, так как услуги профессиональных артистов всегда будут актуальны. Свою миссию разработчики видят в том, чтобы предоставить доступный сервис для тех, кому лицензированный голос живого диктора не по карману, или тем, для кого важна скорость выполнения проекта, реализовать который за один час не под силу даже самому продуктивному специалисту.

Мое лицо, когда я открыл Slack после отпуска: #мем

Свет мой, ChatGPT! Скажи, да всю правду доложи 🤖 Модель ChatGPT, натренированная OpenAI, — одна из нашумевших новостей прошлого года, и посты о ней льются в соцсетях бесконечным потоком. Но нам же хочется чего-то применимого на практике, верно? Тогда вот: 50 подсказок, которые можно использовать, чтобы ChatGPT генерировала текст в рамках определенной задачи. Хотите попереписываться с Гермионой Грейнджер? Или завести библиотеку английских панчлайнов? Или потренироваться для предстоящего интервью на должность старшего аналитика данных? Тогда вот целый PDF с идеями, как скрасить себе вечер, прокачать навыки в письме на английском или повысить уверенность в себе. Не забывайте делиться вашими скриншотами из ChatGPT, если что-то пошло не так или очень даже так! 🤪