Изучайте материалы в удобное время на нашей платформе
Выполняйте задания, чтобы освоить навык и пополнить портфолио
Присоединяйтесь к сообществу аналитиков, чтобы продолжать учиться
Сможете возвращаться к курсу в любой момент, доступ к материалам останется навсегда
АБ-тестирование — ключевой инструмент для проверки гипотез и принятия обоснованных решений в бизнесе. На курсе вы изучите методы АБ-тестирования, научитесь применять их на практике и интерпретировать результаты.
Вы научитесь
Формулировать гипотезы на языке A/B-тестирования
Применять адекватные статистические критерии и валидировать их
Правильно проводить дизайн A/B-теста, рассчитывать необходимые статистики
Интерпретировать полученные результаты, объяснять их простым языком
Применять современные методы ускорения проведения тестов
Учитывать практические особенности проведения A/B-тестов
Важно: Для прохождения курса нужны базовые знания языка программирования Python
Темы курса
АБ-тесты: что такое, как появились и чем так хороши?
Условия для проведения АБ-тестов и основные этапы.
Метрики: примеры, свойства, классификации и алгоритм выбора.
Выбор метрик для эксперимента.
Фреймворки выбора метрик: HEART и AARRR
Иерархия и дерево метрик компании
Как сформулировать «хорошую» гипотезу?
Формулировка гипотез
Роль гипотез и их приоритизация
Статистические критерии в практике АБ-тестирования
Бутстрап. Алгоритм работы метода
Бутстрап. Реализация на Python. Плюсы и минусы
Особенности использования критерия Манна-Уитни
Особенности использования теста Стьюдента. Какой критерий лучше?
Методы Монте-Карло – случайные числа для решения математических задач
Валидация статистических критериев при помощи синтетических АА-тестов
Минимальный детектируемый эффект и расчет количества наблюдений
Как выбрать параметры для расчета количества наблюдений?
Дизайн эксперимента (АБ-теста)
Запуск эксперимента: разбиение тест-контроль, рампинг и здоровье теста
Практика: Разбиение на тест-контроль и рампинг
Проблема подглядывания
Как понимание прикладной статистики позволяет смягчить проблему подглядывания?
Практика: Валидация процедур подглядывания.
Роль p-value при оценке результатов АБ-теста
Как получить максимум от p-value?
Факторы принятия решений по результатам АБ-теста.
Относительный тест Стьюдента и синтетические АБ-тесты.
Анализ результатов и представление их бизнесу
Преподаватели курса
Андрей Романов
Продуктовый аналитик, Авито
>120 000 ₽
95 000 ₽
60 000 ₽
50 000 ₽
3+ лет стажа
1+ год стажа
зарплата начинающего
после 6 лет стажа
Средняя зарплата специалистов со знанием навыка A/B-тестирования в России