AB тесты и все вот про это вот все

Привет! Меня зовут Полина, я руковожу A/B‑платформой в СберМаркете. В этой статье я расскажу о нескольких нюансах экспериментирования, которые возникают на разных этапах: от дизайна и сплитования до...

Запись стрима о том, как, где и каким способом проводить AB-тесты после заката Google Optimize. И не только об этом. Участники: Александр Игнатенко, эксперт по маркетинг-аналитике, автор телеграм-канала «Модель атрибуции» -

Виталий Черемисинов, со-основатель продуктовой и консалтинговой компании в области проведения экспериментов EXPF и сервиса AB-тестирования Sigma.

Анатолий Карповm, СЕО Karpov.Courses Kolesa Conf 2022, 8 октября Описание доклада: Уметь отвечать на вопрос «Как долго должен идти А/Б-тест?» — важнейший навык аналитика. Если вы запускаете А/Б-тест на глазок, будьте готовы, что вас ждёт множество проблем: проблема подглядывания, недостаточная мощность теста, ложные срабатывания. Мы подробно разберём, как правильно оценивать размер выборки и время проведения теста, и с какими неочевидными трудностями вы можете столкнуться на этом пути. В докладе обсудим: – Как правильно подглядывать за А/Б-тестами. – Что сильнее: t-test или непараметрика? – Почему симуляция данных позволяет глубже понять свой продукт. – Как правильно оценить размер выборки для эксперимента в случае нетривиального дизайна исследования.

Программа 18:00 – 18:30 Как из подручных средств организовать процесс А/В тестирования Макс Шевченко, OKKO 18:30 – 19:00 Критерии валидности АБ-тестов Полина Ревина, руководитель платформы экспериментов СберМаркет 19:00 – 19:30 Поиск Эффективных Прокси-Метрик, Александр Кузнецов, ведущий аналитик EXPF 19:30 — 20:00 Сбор качественных данных для проведения А/Б тестов Константин Елисеев, Product manager DataGo!

Привет, Хабр! В прошлой статье я указал, что в A/B-тестах используются три основных типа метрик, а именно пользовательские конверсии , средние метрики пользователей и ratio-метрики . К последним...

Одной из самых распространённых задач современной аналитики является формирование суждений о большой совокупности (например, о миллионах пользователей приложения), опираясь на данные лишь о небольшой...

ABacus: fast hypothesis testing and experiment design solution - kolmogorov-lab/abacus

Хабр, привет! Сегодня рассмотрим кейс, в котором классические статистические критерии не работают, и разберёмся, почему так происходит. Научимся строить свои собственные критерии по историческим...

Приглашаем на онлайн-митап СберМаркет Tech. Регистрируйся и присоединяйся к нам!