🅰️🅱️Увеличение чувствительности в A/B с помощью CUPED
Замечательный доклад от Валеры Бабушкина про технику А/Б экспериментов CUPED (Controlled-experiment Using Pre-Experiment Data), которая позволяет увеличить чувствительность метрик за счёт использования данных, полученных ранее. Чем больше чувствительность, тем более слабые изменения можно замечать и учитывать в эксперименте.
В своем выступлении Валерий Бабушкин объяснил, в чём заключается смысл CUPED и каких результатов можно достичь с помощью него, перед этим разобрав метод стратификации, который тоже помогает улучшить чувствительность.
Запись доклада можно посмотреть здесь, а текстовую версию со слайдами тут.
Ставь 🔥, если скучал по постам с Валерой)
Замечательный доклад от Валеры Бабушкина про технику А/Б экспериментов CUPED (Controlled-experiment Using Pre-Experiment Data), которая позволяет увеличить чувствительность метрик за счёт использования данных, полученных ранее. Чем больше чувствительность, тем более слабые изменения можно замечать и учитывать в эксперименте.
В своем выступлении Валерий Бабушкин объяснил, в чём заключается смысл CUPED и каких результатов можно достичь с помощью него, перед этим разобрав метод стратификации, который тоже помогает улучшить чувствительность.
Запись доклада можно посмотреть здесь, а текстовую версию со слайдами тут.
Ставь 🔥, если скучал по постам с Валерой)