Студент, освоивший программу дисциплины, должен знать: основные термины в области A/B-тестирования; статистические тесты и их виды; методы проверки распределения на нормальность; различные подходы в области A/B-тестирования; различие типов метрик и контекст их использования; способы уменьшения ошибок 1 и 2 рода; различные подходы для уменьшения дисперсии; пайплайн проведения эксперимента, включающий в себя планирование, подготовку групп, запуск и анализ результатов; подходы для множественного тестирования гипотез, а также различия с параллельным тестированием.