Open in app
Sign inGet started
Когда останавливать A/B-тест? Часть 2: Monte Carlo

Когда останавливать A/B-тест? Часть 2: Monte Carlo

В статье разбирается применение метода Monte Carlo, позволяющий прогнозировать время на эксперимент с симуляцией разного контекста
Go to the profile of Iskander Mirmakhmadov
Iskander Mirmakhmadov
Когда останавливать A/B-тест? Часть 1: MDE

Когда останавливать A/B-тест? Часть 1: MDE

Как оценить время на проведение эксперимента? Что необходимо учесть, чтобы точнее проанализировать его результаты? Теория и python
Go to the profile of Iskander Mirmakhmadov
Iskander Mirmakhmadov
Случайность над случайностью или в поисках “Социального эффекта”

Случайность над случайностью или в поисках “Социального эффекта”

Как измерить влияние социального эффекта в A/B-тесте?
Go to the profile of Kseniia Menzorova
Kseniia Menzorova
Switchback-тестирование. Как бороться с социальными эффектами в A/B-тестах

Switchback-тестирование. Как бороться с социальными эффектами в A/B-тестах

Дисклеймер
Go to the profile of Iskander Mirmakhmadov
Iskander Mirmakhmadov
Дисбаланс в A/B-тестах. Есть ли разница между 99%/1% и 50%/50% в экспериментах?

Дисбаланс в A/B-тестах. Есть ли разница между 99%/1% и 50%/50% в экспериментах?

Итак, по какой-то причине вы или ваша команда решили запустить A/B-тестирование с несбалансированными выборками (например, 65/45, 90/10…
Go to the profile of Iskander Mirmakhmadov
Iskander Mirmakhmadov
Увеличиваем чувствительность экспериментов при помощи ранговой трансформации

Увеличиваем чувствительность экспериментов при помощи ранговой трансформации

Это перевод статьи booking.ai про увеличение чувствительности метрик в экспериментах с маленькими эффектами.
Go to the profile of Iskander Mirmakhmadov
Iskander Mirmakhmadov
Материалы по математической статистике и экспериментам 1.0

Материалы по математической статистике и экспериментам 1.0

Нас часто спрашивают, что мы советуем почитать, посмотреть и изучить для большего погружения в тему математической статистики и…
Go to the profile of Vit Cheremisinov
Vit Cheremisinov
Latest
CUPED или увеличение чувствительности метрики

CUPED или увеличение чувствительности метрики

С темпами развития культуры экспериментов в компаниях вопрос о методах анализа результатов перестает быть самым актуальным.
Go to the profile of Vit Cheremisinov
Vit Cheremisinov
Децильный метод или сокращение дисперсии

Децильный метод или сокращение дисперсии

Качественный эксперимент — это не только достаточное кол-во наблюдений, но и нешумные данные. Но иногда бывает так, что метрика изначально…
Go to the profile of Vit Cheremisinov
Vit Cheremisinov
About statistics experimentsLatest StoriesArchiveAbout MediumTermsPrivacy