Подглядываем в A/B-тесты правильно. Вебинар 20 октября
Как правильно подглядывать в A/B-тесты: что это за проблема, почему она актуальна, как её решить
Подглядываем в A/B-тесты правильно. Вебинар 20 октября
Published
15.10.2020
|
devtodev

На следующей неделе devtodev проведёт вебинар по проблеме подглядывания в А/В-тестах, на котором мы разберём, как она возникает, почему это плохо и как с ней бороться.

В вебинаре примут участие Евгений Матвеев, аналитик devtodev, и Максим Неронов, Product analyst в NX Studio - одном из ведущих разработчиков мобильных игр.

Максим Неронов ранее работал в дизайн-студии AIC, где его основной задачей было построение data-driven подхода к веб-дизайну. Там он получил огромный багаж практического опыта, хорошие практики на рынке и усилил свою подготовку в области работы с данными. В настоящее время Максим работает над проектом Hero Wars Mobile в студии NX, где отвечает за процесс A/B-тестирования и следит за правильностью целеполагания и прозрачностью процесса подготовки/тестирования.

Евгений Матвеев выполняет роль главного внутреннего аналитика системы devtodev, и знает, как работает игровая аналитика и как лучше понять и предсказать поведение пользователя.

Какие вопросы спикеры обсудят во время вебинара:

1. Что такое подглядывание, где оно возможно и для кого это важно

  • Классическое A/B тестирование, история

  • В чём заключается соблазн подглядывания и почему мы это делаем

  • Пример с подглядыванием в классическом тесте

2. Как работает подглядывание и почему подглядывать плохо

  • Multiple Comparison Problem и эффект Look-Elsewhere

  • Как сильно увеличивается рост ошибки первого рода

3. Как исправить эту проблему

  • Закладываться на поправки

  • Байесовский анализ

  • Последовательное тестирование

  • Отказаться от подглядывания

Вебинар будет полезен аналитикам, инди-разработчикам, маркетологам, продюсерам и всем, кому небезразличны A/B-тесты и проверка гипотез.

Вебинар пройдёт 20 октября в 18:00 по Москве.

Регистрируйтесь по ссылке

Подписывайтесь на YouTube-канал devtodev, добавляйтесь в нашу группу в Facebook и ВКонтакте, чтобы всегда оставаться в курсе наших последних новостей.

Read more