Почему A/B-тест не подходит для оценки ранжирования и что с этим делать

Всем привет! Меня зовут Вардан Манучарян , я аналитик в команде Монетизации Авито , и мы отвечаем за механику алгоритмов продвижения, то есть управляем порядком, в котором пользователи видят объявления. Для этого нам нужно отслеживать, как изменения в ранжировании влияют на бизнес и покупателей. В этой статье расскажу про интерливинг , — метод, который помогает корректно проводить A/B-тесты с изменением ранжирования. Статья будет интересна аналитикам, которые проводят много A/B-тестов.

https://habr.com/ru/companies/avito/articles/1043880/

#абтесты #ранжирование #сетевые_эффекты #counterfactual_interleaving #интерливинг #сплиттестирование #mde