This is Data

Для многих IT-компаний A/B-тестирование стало не просто важным инструментом аналитики, а скорее стартовой площадкой для качественного развития продукта. Без применения A/B-тестов может быть сложно оценить, какие изменения необходимы продукту и как они повлияют на поведение пользователей. Информации о статистике и о том, как проводить A/B-тесты, много, но большинство источников сосредоточены на "технической стороне", подсчете выборки, проблеме подглядывания, правильной интерпретации p-value... А вот практических советов по менеджменту A/B-тестов не так много. Мы с коллегой обобщили свой опыт с опытом других команд и собрали вместе основные знания по управлению A/B-тестами в виде чек-листа.

Дал комментарии для ppc.world относительно появления в Яндекс Метрике инструмента «Эксперименты» на базе технологии Varioqub. «Varioqub — новое решение от Яндекса для проведения A/B-тестов, представленное в ноябре 2022 года на Матемаркетинге и до недавнего времени находящееся на этапе бета-тестирования. Новость о том, что Яндекс сделал эту технологию доступной для всех пользователей Метрики, потрясающая, так как раньше на нашем рынке не было подобного сервиса. Да, есть Sigma от EXPF и Google Optimize. Однако, Sigma — это достаточно нишевый продукт, помогающий проводить сложные A/B-тесты и требующий серьезных знаний аналитики и математической статистики. А Google Optimize прекратит работу 30 сентября 2023 года. Сейчас в Varioqub есть два тарифа — бесплатный базовый и платный расширенный. Базовый тариф доступен «из коробки» в Яндекс Метрике и будет полезен для самостоятельных аналитиков и маркетологов, которые хотят проводить простые эксперименты, не требующие навыков программирования. Для таких экспериментов можно использовать визуальный редактор или сервис редиректов, распределяющий трафик между вариантами страниц. Расширенный тариф подойдет для крупного бизнеса с многостраничными сложными сайтами и собственной командой разработки. Здесь понадобятся разработчики для настройки более продвинутых экспериментов через API или фича-флаги. В расширенном тарифе возможностей больше, чем достаточно — 100 одновременно запущенных тестов, 11 метрик для эксперимента, фильтрация по клиентским параметрам, выгрузка сырых данных через LogsAPI. Сейчас сервис доступен только для веба, но ребята обещают скорый релиз системы сплитования для мобильных приложений. Очень рад за команду Яндекс Метрики и желаю им не останавливаться и развивать этот очень нужный нашему digital-комьюнити инструмент!»

«В Википедии сквозная аналитика определяется как метод анализа эффективности маркетинговых инвестиций на основе данных, прослеживающий полный путь клиента, начиная от просмотра рекламного объявления, посещения сайта и заканчивая продажей. Однако бизнесу неинтересны показатели просмотров объявлений, кликов по ним, количество событий на сайте и т.д... Бизнесу интересны деньги. С его точки зрения, сквозная аналитика это — способ быстро и качественно сделать вывод о результативности маркетинга и его процессов для принятия решения...» Развиваем данную тему вместе с Александром Мориным и коллегами из ppc.world в статье «Проанализировать все: какие сервисы для сквозной аналитики используют специалисты».

Дал комментарии для ppc.world к статье «23 фишки Google Analytics 4, которых нет в Universal Analytics»: «Логика, заложенная в Universal Analytics: сеансы, «пользователи», события состоящие из четырех параметров, уже давно морально устарела и требовала обновлений. Поэтому я всячески приветствую Google Analytics 4 и уже внедрил новую версию во все проекты, с которыми работаю. Также большим плюсом является возможность установки одного трекера на сайт и в мобильное приложение, что позволит создать единую систему событий для разных интерфейсов взаимодействия с пользователем. А это сильно облегчит работу по анализу рекламных кампаний и созданию отчетности.»

Друзья, привет! Моя коллега, Ксения Шипулина, подготовила отличный материал о основных лайфхаках, проблемах и ошибках, которые возникают при проведении A/B-тестов. Если такие словосочетания, как «Fake door тест», «P-hacking» или «Cherry picking» вводят вас в замешательство, то мы знаем, как это исправить.

Рассказал Rusbase о том, как заместить аналитическую инфраструктуру и не потерять в качестве данных и предоставляемых выводов. Данная статья будет полезна как аналитикам, так и руководителям смежных подразделений.

Друзья привет! Как и обещал, делюсь подробным рассказом о том, как начиналась аналитика в Сравни и с какими проблемами пришлось столкнуться. В статье я попытался осмыслить само понятие «аналитика» и ее роль в жизни бизнеса. А также подробно разобрал тонкости правильной настройки трекинга — от внедрения UTM-разметки, до создания карты событий и настройки GTM.

Друзья привет! В своей новой статье рассказал о том, как устроена аналитика в Сравни и что нам с коллегами удалось построить за последние пару лет. Эта часть вводная, в следующих статьях планирую детальнее раскрыть нашу «аналитическую кухню» — трекинг, отчетность, создание DWH, A/B-тесты и даже найм.

Друзья привет! Рад поделиться третьей статьей из серии материалов о системном анализе. В этот раз речь пойдет о таком понятии, как системный рефакторинг, о его видах, а также будет дано несколько советов как выстроить рефакторинг в своей команде.

Рассказал проекту JMS University про карьерный трек веб-аналитика, необходимый стек и то, на что стоит обратить внимание новичкам в этой области.