Forwarded from A/B testing
A/B-тесты - не единственный инструмент для понимания причинно-следственной связи: квазиэксперименты и контрфакты - альтернативные инструменты для причинного вывода:
https://medium.com/data-shopify/how-to-use-quasi-experiments-and-counterfactuals-to-build-great-products-487193794da
via @ABtesting
https://medium.com/data-shopify/how-to-use-quasi-experiments-and-counterfactuals-to-build-great-products-487193794da
via @ABtesting
Medium
How to Use Quasi-experiments and Counterfactuals to Build Great Products
A/B tests aren’t the only tool to understand causality: quasi-experiments and counterfactuals are powerful tools for causal inference.
Forwarded from BigQuery Insights
Интересная заметка о том, как находить аномалии в данных, используя закон Бенфорда. Применяется для контроля качества данных, определения мошенничества и даже фальсификаций на выборах.
@BigQuery
@BigQuery
Forwarded from WebAnalytics (Осиюк Дмитрий)
Вчера был тот день, когда Google официально объявил Universal Analytics устаревшей версией Google Analytics и представил новый Google Analytics 4 (ранее он назывался Google Analytics App+Web). Вот краткая выжимка из того, что известно на данный момент по новым возможностям:
- #GA4 сможет работать вообще без cookie;
- В GA4 можно будет проводить cross-platform анализ (например, мерять конверсии после просмотра видео на YouTube);
- Новая настройка интеграции с Google BigQuery, в которой можно выбрать из каких data streams экспортировать сырые данные и как часто (ежедневно и почти real-time streaming), а также можно выбрать локацию для данных (это важно, потому что данные из разных локаций запрашивать в одном запросе нельзя);
- В GA4 будет фокус на автоматизации, прогнозировании на базе ML алгоритмов Google и cross-device аналитике;
- В GA4 появится новый Measurement Protocol, импорт данных, междоменное отслеживание и абсолютно новая фича — редактирование событий.
Google обещает постепенно выкатывать новый функционал в ближайшее время, потому следите за апдейтами.
via @WebAnalyst
- #GA4 сможет работать вообще без cookie;
- В GA4 можно будет проводить cross-platform анализ (например, мерять конверсии после просмотра видео на YouTube);
- Новая настройка интеграции с Google BigQuery, в которой можно выбрать из каких data streams экспортировать сырые данные и как часто (ежедневно и почти real-time streaming), а также можно выбрать локацию для данных (это важно, потому что данные из разных локаций запрашивать в одном запросе нельзя);
- В GA4 будет фокус на автоматизации, прогнозировании на базе ML алгоритмов Google и cross-device аналитике;
- В GA4 появится новый Measurement Protocol, импорт данных, междоменное отслеживание и абсолютно новая фича — редактирование событий.
Google обещает постепенно выкатывать новый функционал в ближайшее время, потому следите за апдейтами.
via @WebAnalyst
Искать инсайты и ответы в данных аналитики — ключевой навык в работе с продуктом. Часто именно в этом — потенциал роста для многих продактов.
Чтобы апгрейдить этот навык, полезно не только анализировать данные в своем продукте, но и изучать кейсы других.
Команда @epicgrowth запускают образовательный IT-сериал — Epic Growth SEASONS. Сериал для всех, кто занимается развитием и ростом продуктов.
Каждую неделю — новые кейсы роста от экспертов из быстрорастущих компаний, таких как Netflix, Miro, HubSpot, Яндекс GO, SoundCloud, Flo, Revolut и других.
💥 В программе — кейсы по продуктовой аналитике, A/B-тестам, метрикам экспериментов и многое другое. Мощная программа докладов уже опубликована.
Старт — 28 октября.
Новые серии SEASONS будут доступны в подписке. Узнать больше и оформить подписку http://bit.ly/seasons-analytics
Чтобы апгрейдить этот навык, полезно не только анализировать данные в своем продукте, но и изучать кейсы других.
Команда @epicgrowth запускают образовательный IT-сериал — Epic Growth SEASONS. Сериал для всех, кто занимается развитием и ростом продуктов.
Каждую неделю — новые кейсы роста от экспертов из быстрорастущих компаний, таких как Netflix, Miro, HubSpot, Яндекс GO, SoundCloud, Flo, Revolut и других.
💥 В программе — кейсы по продуктовой аналитике, A/B-тестам, метрикам экспериментов и многое другое. Мощная программа докладов уже опубликована.
Старт — 28 октября.
Новые серии SEASONS будут доступны в подписке. Узнать больше и оформить подписку http://bit.ly/seasons-analytics
Forwarded from A/B testing
Интересный опыт выбора структуры команды аналитиков:
https://medium.com/snaptravel/how-should-our-company-structure-our-data-team-e71f6846024d
via @ProductAnalytics
https://medium.com/snaptravel/how-should-our-company-structure-our-data-team-e71f6846024d
via @ProductAnalytics
Основные выводы об удержании и ускорении роста Saas-компаний из Reforge Growth Series от Продуктового Аналитика Xero:
https://annailtiakov.medium.com/how-retention-separates-the-top-1-9b54373d090d
via @ProductAnalytics
https://annailtiakov.medium.com/how-retention-separates-the-top-1-9b54373d090d
via @ProductAnalytics
Forwarded from BigQuery Insights
Подборка способов, как можно ускорить анализ данных на Python:
https://towardsdatascience.com/five-ways-for-faster-data-analysis-801a043bfea9
via @ProductAnalytics
https://towardsdatascience.com/five-ways-for-faster-data-analysis-801a043bfea9
via @ProductAnalytics
Как поддерживать рост через монетизацию старых пользователей
Проблема многих команд — нужно поддерживать постоянный рост выручки. Команда Flo решила протестировать гипотезу: если старые пользователи любят продукт и готовы платить деньги за долгосрочную ценность, они будут возвращаться.
Результат — работает! Команда Flo получила >50% от общего роста выручки за 2020 год за счет конверсий за пределами онбординга (то есть старых пользователей).
Что сделали:
Показатели DAU, WAU, MAU разложили на компоненты. Использовали методику, которая помогает оценить потенциал роста аудитории. Показатели MAU разбили на категории:
— новые пользователи (new users);
— пользователи, которые возвращаются из месяца в месяц (retained users);
— пользователи, которые пользовались продуктом, потом перестали, и через какое-то время снова вернулись к пользованию (resurrected users);
— пользователи, которые перестали пользоваться продуктом (churned users).
Когда вы построите такой график, можно сделать следующие выводы:
— насколько высокий MAU Retention Rate;
— каков объем потенциальной аудитории, с которой можно работать.
В своем докладе для @epicgrowth Дима Золотухин, Head of Analytics во Flo поделился, как эта стратегия работает на конкретных кейсах.
Как монетизировать старых пользователей: https://bit.ly/analytics-flo
Проблема многих команд — нужно поддерживать постоянный рост выручки. Команда Flo решила протестировать гипотезу: если старые пользователи любят продукт и готовы платить деньги за долгосрочную ценность, они будут возвращаться.
Результат — работает! Команда Flo получила >50% от общего роста выручки за 2020 год за счет конверсий за пределами онбординга (то есть старых пользователей).
Что сделали:
Показатели DAU, WAU, MAU разложили на компоненты. Использовали методику, которая помогает оценить потенциал роста аудитории. Показатели MAU разбили на категории:
— новые пользователи (new users);
— пользователи, которые возвращаются из месяца в месяц (retained users);
— пользователи, которые пользовались продуктом, потом перестали, и через какое-то время снова вернулись к пользованию (resurrected users);
— пользователи, которые перестали пользоваться продуктом (churned users).
Когда вы построите такой график, можно сделать следующие выводы:
— насколько высокий MAU Retention Rate;
— каков объем потенциальной аудитории, с которой можно работать.
В своем докладе для @epicgrowth Дима Золотухин, Head of Analytics во Flo поделился, как эта стратегия работает на конкретных кейсах.
Как монетизировать старых пользователей: https://bit.ly/analytics-flo
Forwarded from BigQuery Insights
В сети появился отличный пример рассчета уровня значимости результатов A/B-тестирования в BigQuery с применением user-defined functions.
@BigQuery
@BigQuery
Forwarded from MarkeTech
Денис Соловьев (@ds_im) поделился опытом построения системы маркетинговой аналитики на базе Google Cloud.
https://www.youtube.com/watch?v=mqE6Q3WmoCU
via @MarkeTech
https://www.youtube.com/watch?v=mqE6Q3WmoCU
via @MarkeTech
YouTube
КАК ПОСТРОИТЬ СИСТЕМУ МАРКЕТИНГОВОЙ АНАЛИТИКИ НА GOOGLE CLOUD / ДЕНИС СОЛОВЬЕВ
План вебинара:
- Архитектура решения и её ключевые элементы;
- На что обратить внимание перед построением решения;
- Преимущества Google BigQuery при построении маркетинговой аналитики;
- Как построить простой ETL с помощью Cloud Functions + Cloud Pub/Sub…
- Архитектура решения и её ключевые элементы;
- На что обратить внимание перед построением решения;
- Преимущества Google BigQuery при построении маркетинговой аналитики;
- Как построить простой ETL с помощью Cloud Functions + Cloud Pub/Sub…
О Кривой развлекательной ценности и об успехах TikTok:
https://www.reforge.com/blog/entertainment-value-curve
via @ProductAnalytics
https://www.reforge.com/blog/entertainment-value-curve
via @ProductAnalytics
Forwarded from WebAnalytics (Осиюк Дмитрий)
Google представил базовый вводный онлайн-курс по #GA4. Он короткий, бесплатный, на русском языке и в виде интерактивной инфографики. Подойдет для всех, кто хочет начать изучение возможностей системы и отличий от предыдущих версий.
https://bit.ly/37uVUc6
via @WebAnalyst
https://bit.ly/37uVUc6
via @WebAnalyst
О метриках, сегментации и монетизации в играх, и применении игровых механик в продуктах:
https://apptractor.ru/measure/user-analytics/make-sense-117.html
via @ProductAnalytics
https://apptractor.ru/measure/user-analytics/make-sense-117.html
via @ProductAnalytics
AppTractor
make sense: О метриках, сегментации и монетизации в играх, и применении игровых механик в продуктах
Для каждого продукта или почти для каждого продукта можно найти такую игровую механику, которая хорошо сработает для этого продукта.
Один из способов оценки нового функционала продукта:
https://rama-moyano.medium.com/measuring-feature-success-kpi-definition-for-product-managers-c9fc9cf569da
via @ProductAnalytics
https://rama-moyano.medium.com/measuring-feature-success-kpi-definition-for-product-managers-c9fc9cf569da
via @ProductAnalytics
Forwarded from BigQuery Insights
Forwarded from BigQuery Insights
Хорошее руководство по работе с данными Google Analytics 4 или Firebase с примерами SQL-запросов.
@BigQuery
@BigQuery
Как замерять производительность продукта:
https://blog.amplitude.com/getting-your-product-team-to-a-growth-mindset-requires-kdis-not-kpis
"If you empower your team to learn as opposed to always hitting numbers, you are well on your way to a growth mindset."
via @ProductAnalytics
https://blog.amplitude.com/getting-your-product-team-to-a-growth-mindset-requires-kdis-not-kpis
"If you empower your team to learn as opposed to always hitting numbers, you are well on your way to a growth mindset."
via @ProductAnalytics
Forwarded from BigQuery Insights
Как объединить общедоступные глобальные данные о погоде и данные Google Analytics в BigQuery, примеры SQL-запросов для Firebase (GA4) и Universal Analytics (GA 360).
@BigQuery
@BigQuery