На следующей неделе devtodev проведёт вебинар по проблеме подглядывания в А/В-тестах, на котором мы разберём, как она возникает, почему это плохо и как с ней бороться.
В вебинаре примут участие Евгений Матвеев, аналитик devtodev, и Максим Неронов, Product analyst в NX Studio - одном из ведущих разработчиков мобильных игр.
Максим Неронов ранее работал в дизайн-студии AIC, где его основной задачей было построение data-driven подхода к веб-дизайну. Там он получил огромный багаж практического опыта, хорошие практики на рынке и усилил свою подготовку в области работы с данными. В настоящее время Максим работает над проектом Hero Wars Mobile в студии NX, где отвечает за процесс A/B-тестирования и следит за правильностью целеполагания и прозрачностью процесса подготовки/тестирования.
Евгений Матвеев выполняет роль главного внутреннего аналитика системы devtodev, и знает, как работает игровая аналитика и как лучше понять и предсказать поведение пользователя.
Какие вопросы спикеры обсудят во время вебинара:
1. Что такое подглядывание, где оно возможно и для кого это важно
-
Классическое A/B тестирование, история
-
В чём заключается соблазн подглядывания и почему мы это делаем
-
Пример с подглядыванием в классическом тесте
2. Как работает подглядывание и почему подглядывать плохо
-
Multiple Comparison Problem и эффект Look-Elsewhere
-
Как сильно увеличивается рост ошибки первого рода
3. Как исправить эту проблему
-
Закладываться на поправки
-
Байесовский анализ
-
Последовательное тестирование
-
Отказаться от подглядывания
Вебинар будет полезен аналитикам, инди-разработчикам, маркетологам, продюсерам и всем, кому небезразличны A/B-тесты и проверка гипотез.
Вебинар пройдёт 20 октября в 18:00 по Москве.
Регистрируйтесь по ссылке
Подписывайтесь на YouTube-канал devtodev, добавляйтесь в нашу группу в Facebook и ВКонтакте, чтобы всегда оставаться в курсе наших последних новостей.
