Как учитывать сетевые эффекты и взаимное влияние групп в эксперименте?
СтатистикаУровень: ПрактикаA/B testing and experimentation
Как учитывать сетевые эффекты и взаимное влияние групп в эксперименте?
Подсказки
- Определите случайную величину, выборку и оцениваемый параметр.
- Укажите необходимые допущения; чем оценка отличается от её неопределённости?
Ответ
Обычный пользовательский A/B-тест предполагает, что назначение варианта одному участнику не меняет результат другого. В соцсетях и маркетплейсах это часто неверно: друзья влияют друг на друга, а продавцы конкурируют за общий спрос. Можно рандомизировать связанные кластеры или регионы; для рынков иногда подходят switchback-тесты с чередованием вариантов по времени. Дизайн и анализ должны учитывать оставшееся взаимное влияние и перенос эффекта между периодами.
Источник и лицензия: Ishan Dutta — Awesome Data Science Interview Q&A · MIT · перевод: Quantoros