Материалы на изучение

- Доклад Романа Поборчий про Teamdraft Interleaving (https://www.youtube.com/watch?v=voY7waRb_D0)

- Как сокращает дисперсию Яндекс https://www.youtube.com/watch?v=inGuisuMjpw

- Как устроено АБ в Убере https://eng.uber.com/xp/

- Как устроено АБ в Нетфликсе https://medium.com/netflix-techblog

- Как устроено АБ в Airbnb https://medium.com/airbnb-engineering/https-medium-com-jonathan-parks-scaling-erf-23fd17c91166

- Как устроено АБ в Авито https://habr.com/ru/company/avito/blog/454164/

- Степени свободы понятным языком https://habr.com/ru/company/stepic/blog/311354/

- Процедуры множественной проверки гипотез https://r-analytics.blogspot.com/2013/11/blog-post.html

- Проблема подглядываний (после прочтения проверки множественных гипотез) http://varianceexplained.org/r/bayesian-ab-testing/

- Про бутстрап https://ocw.mit.edu/courses/mathematics/18-05-introduction-to-probability-and-statistics-spring-2014/readings/MIT18_05S14_Reading24.pdf

Ссылка на видео 1-го дня
28 сентября
Cсылка - http://facecast.net/v/qwelw8
Пароль - Hdjwurufbdb

Материалы к лекции второго дня

Bootstrap. Хорошее объяснение в этой лекции https://www.coursera.org/learn/inferential-statistics-intro/lecture/u3k1n/bootstrapping

либо это видео https://www.youtube.com/watch?v=gcPIyeqymOU

Перцентильный bootstrap https://garstats.wordpress.com/2016/05/27/the-percentile-bootstrap/

Пакет R для квантильного сравнения с помощью бутстрэпа (тут включена коррекция на множ. сравнения и коррекция bias’а для квантилей) https://github.com/GRousselet/rogme

Проверка АА-теста с помощью бутстрэпа https://habr.com/ru/company/hh/blog/321386/

Статья про последовательный анализ от optimizely http://pages.optimizely.com/rs/optimizely/images/stats_engine_technical_paper.pdf

Последовательный анализ на Random Walk https://www.evanmiller.org/sequential-ab-testing.html

Последовательный анализ в Uber https://www.youtube.com/watch?v=4rWOx5fOJbg

Uber тоже использует mSPRT. Частично описано в https://eng.uber.com/xp/

Материалы exp-platform (Microsoft) https://exp-platform.com