Перевод статьи компании Doordash — сервис по доставке продуктов - про альтернативную A/B-тестам методику проведения экспериментов Switchback. Эта техника тестирования может быть использована в условиях сильного влияния наблюдений (например, таксистов, курьеров или потребителей) друг на друга — эту проблему еще называют как “социальный эффект” или Network Effect.

Свитчбэк-тесты рандомизируют корзины по географическому региону и «единицам» времени ("unit's")
Проведение свитчбэка схоже с A/B-тестами, но у них есть особенности, которые добавляют сложности в их анализе:
- вложенная структура данных
- малая выборка на основе более независимых «unit’ов», доступных для анализа.

Подробная математика и логика проведения экспериментов по ссылке.

= = =
На днях сделаю подборку про метод CUPED

@internetanalytics