A/B тестирование для начинающих. Полный гайд как начать и как делать правильно



Написали с командой Skillsetter полную пользы статью с провакационным названием "10 стыдных вопросов об A/B-тестировании". На самом деле, вопросы совсеим не стыдные! Большую часть из них я задавал себе, гуглу или более опытным коллегам в начале работы с этим важным инструментом продуктовой разработки.



Я впервые столкнулся с A/B тестами в Авито. Мы тестировали как небольшие изменения, так и запуск новых больших разделов. Например, профиль продавца на Авито появился в результате успешного A/B теста моей команды с оценкой долгосрочного влияния на метрики взаимодействия между продавцами и покупателями. Но я не могу сказать, что тогда (2016 год) это было регулярной практикой. Сейчас, в OLX Motors, практически все изменения проходят через тестирование. Заглянул в нашу систему сегодня, мы используем in-house решение, которое объединяет инструменты A/B тестирования, сбор и аналитику данных, а также содержит базу результатов проведенных тестов. В прошлом месяце было проведено 38 экспериментов, сейчас в активной стадии находится 13.



Первая часть статьи будет полезна продактам и другим членам продуктовых команд, которые начинают работать с A/B тестированием. А более опытные читатели, возможно, найдут для себя полезным шаблон для кросс-ревью тестов, советы по формулировке гипотез и мои рекомендации по обязательным шагам при проведении A/B тестирования.



В статье вы найдете:



✔️Что такое A/B-тесты и как их проводить?



✔️Кому нужно разбираться в A/B-тестировании?



✔️Когда не стоит использовать A/B-тестирование?



✔️Подборку инструментов для настройки A/B-тестов и ресурсов для самостоятельного изучения темы



▶️ https://skillsetter.io/blog/AB-test-questions



#lifehacks #olx #abtesting