← Все новости
Гайд по switchback‑экспериментам: длина окна, кластеризация ошибок и мощность

Гайд по switchback‑экспериментам: длина окна, кластеризация ошибок и мощность

Новый алгоритм может уверенно выигрывать A/B‑тест и не показывать ожидаемого эффекта после запуска, если эксперимент учитывает только пользователей, но игнорирует общий ресурс. В статье разбираемся, как работают switchback‑эксперименты, почему стандартный анализ даёт ложные выводы и как корректно оценивать результаты. Разобрать подход