Отличная статья от ребят из X5. Всем ребятам с рынка рекомендую ознакомиться, дабы расширить свой кругозор и иметь представление, как могут проводиться АБ-тесты в оффлайн ритейле.

https://habr.com/ru/company/X5RetailGroup/blog/466349/

A/B тесты в Яндекс, сокращаем дисперсию:
https://youtu.be/inGuisuMjpw?t=89

via @ABtesting

Обучение статистике с помощью интерактивных визуализаций от Daniel Kunin

https://seeing-theory.brown.edu

via @ABtesting

О степенях свободы в статистике:
https://habr.com/ru/company/stepic/blog/311354/

via @ABtesting

Как провести A/B-тест и не наделать ошибок. Влад Прищепов и Леонид Енов:
https://www.youtube.com/watch?v=sVKzq0xQ5vU

via @ABtesting

The Power of Bayesian A/B Testing:
https://medium.com/convoy-tech/the-power-of-bayesian-a-b-testing-f859d2219d5

via @ABtesting

Две фундаментальные проблемы с A/B тестированием в продукте: https://mobiledevmemo.com/two-fundamental-problems-with-product-a-b-testing/

via @ABtesting

Очень хороший и практичный материал о развитии продуктов. О том как планировать A/B тесты и соблюдать баланс между оптимизационными и иновационными изменениями.

via @ProductAnalytics

Сегодня в Киеве Jonas Alves (был у истоков experimentation platform в легендарном booking.com) сделает небольшой доклад: "Tracking mistakes in A/B testing and what we did to fix them".

https://www.facebook.com/paul.levchuk.1/posts/3203203959751678

via @ABtesting

Отличный канал Сергея Гудкова об экспериментах с конверсией и прибылью. Масса полезных практических советов.

@conversion_and_analytics

via @ABtesting

A/B test калькулятор в Google Sheets:
https://docs.google.com/spreadsheets/d/18w387uonW8zF1_6NtAuBKnQgDNp0qKSlCYu2IAdQ5Ks/edit#gid=1997184298

И как им пользоваться:
https://medium.com/@aleksandrosiyuk/автоматизация-результатов-a-b-тестирования-cf3b1f99a218

via @ABtesting

Отдельная секция по А/Б-тестированию: 6 докладов от ребят из Яндекса, Авито, AIC, X5 Retail Group. Темы затрагивают весь цикл проведения сплит-тестов. От теории планирования эксперимента и управления чувствительностью метрик, до построения аналитической инфраструктуры.

+ лекции и мастер-классы Адриана Грегори из Amplitude, от Максима Годзи из Retentoneering и актуальные кейсы от Ильи Красинского.

Подробная программа: http://bit.ly/33SYfe0 (на второй вкладке - детальное описание всех тем)

Купить билет: https://matemarketing.timepad.ru/event/992934/

via @ABtesting

​​В Google Data Studio (пока что) нет встроенных статистических функций, например, которые позволяют убедиться, что анализируемые данные получены не случайно. Нашел статью, где с помощью Community visualizations эту проблему решили и выложили в открытый доступ визуализацию с расчетом статистической значимости метрик по методу хи-квадрат. Как этим пользоваться и как добавить в свой дашборд такое решение — по ссылке: http://bit.ly/2MJzNW4.

via @WebAnalyst

Небольшой гайд как подходить к А/В-тестированию:
https://towardsdatascience.com/how-to-a-b-test-without-spending-a-dime-60c4112f8f4e

via @ABtesting

Краткий видео-курс по байесовскому тестированию:
https://www.youtube.com/playlist?list=PLAKBwakacHbRRw278HMXpCsOOIIcLYGX5

via @ABtesting

Как растили retention и искали retention-драйвер в продукте iFunny, какие A/B-тесты делали и какие результаты получали, Михаил Табунов

https://www.youtube.com/watch?v=UJkXIqSzlAo

via @ABtesting

Методы автоматизации А/B-тестов и какие тесты автоматизировать нельзя (видео митапа):
https://www.youtube.com/watch?v=r1OXJ4qWXg4

via @ABtesting

Множественные эксперименты: теория и практика: https://habr.com/ru/company/yandex/blog/476826/

via @ABtesting

Как устроено A/B-тестирование в разных компаниях:

• Stackoverflow - https://stackoverflow.blog/2017/10/17/power-calculations-p-values-ab-testing-stack-overflow/

• Netflix - https://medium.com/netflix-techblog

• Airbnb - https://medium.com/airbnb-engineering/https-medium-com-jonathan-parks-scaling-erf-23fd17c91166

• Uber - https://eng.uber.com/xp/

• Microsoft - https://exp-platform.com/experiments-at-microsoft/

• Avito - https://habr.com/ru/company/avito/blog/454164/

• Yandex - https://habr.com/company/yandex/blog/342704/

via @ProductAnalytics

​​Wix в очередной раз делает в Киеве бесплатный митап для аналитиков. 12 декабря Инна из Wix поделится кейсами неожиданных результатов A/B тестов, а Саша из MacPaw расскажет про проведение A/B тестов в стартапах. Кстати, у Саши есть свой канал про аналитику на базе Google BigQuery, подписывайтесь: @BigQuery.

Регистрируйтесь, ждите подтверждения вашего участия и приходите на ивент: http://bit.ly/37XhhlF

via @WebAnalyst

​​«A/B-тестирование в стартапах или Как делать тесты быстрее»

Сжатое содержание моего доклада с митапа для аналитиков от Wix.

via @BigQuery