Как с помощью SQL можно майнить Bitcoin?
BigQuery на столько сильный инструмент, что позволяет делать и это. Вчера об этом написал инженер Google Uri Shaked: https://bit.ly/2IxMUoe
BigQuery на столько сильный инструмент, что позволяет делать и это. Вчера об этом написал инженер Google Uri Shaked: https://bit.ly/2IxMUoe
Medium
Thank You Google: How to mine Bitcoin on Google’s BigQuery
Harnessing the power of SQL to mine cryptocurrency in the cloud
Готовый шаблон калькулятора А/В тестов в Google таблицах (можно использовать для автоматизации результатов тестирования): https://bit.ly/2JswQWc
Google Docs
A/B test calculator
Calculator
<a href="https://news.1rj.ru/str/bigquery">BigQuery Insights</a>,Control,Test
A(0),B(1)
Количество испытаний,28850540,28805735
Количество успешных исходов,635657,634611
Конверсия,2.2%,2.2%
Границы доверительного интервала конверсии (95%),от
2.2%,2.2%
до…
<a href="https://news.1rj.ru/str/bigquery">BigQuery Insights</a>,Control,Test
A(0),B(1)
Количество испытаний,28850540,28805735
Количество успешных исходов,635657,634611
Конверсия,2.2%,2.2%
Границы доверительного интервала конверсии (95%),от
2.2%,2.2%
до…
Forwarded from Интернет-аналитика // Алексей Никушин (Alexey Nikushin)
Kaggle выложил мини-курсы "Hands-On Data Science Education": Pandas, ML, SQL, R, Data Visualization.
Вроде бы это не видеокурсы, а текстовые с примерами.
https://www.kaggle.com/learn/overview
Вроде бы это не видеокурсы, а текстовые с примерами.
https://www.kaggle.com/learn/overview
Forwarded from WebAnalytics (Осиюк Дмитрий)
На канале @thisisdata появился новый очень хороший материал о том, как работать с вычисляемыми полями в Google Data Studio + кейсы. Обязательно стоит почитать всем, кто работал и планирует работать с Google Data Studio, как с основной системой для визуализации данных.
https://goo.gl/oeVfKq
https://goo.gl/oeVfKq
Как в BigQuery сделать рекомендательную систему? Пример SQL-запроса с комментариями от Александра Марченко: https://bit.ly/2JFBf8v
YouTube
bigquery используем corr для coloborative filtering
В демке показана возможность прямо в BigQuery строить recommendation engine, основаный на рейтингах, для этого не нужны никакие graph базы, dataproc с расчетами, import'ы/export'ы по сути все что необходимо уже есть из коробки
пример запроса: https://gi…
пример запроса: https://gi…
Оперативный способ выгрузки данных по брендовым запросам из Search Console по дням: https://bit.ly/2IV9O9t
Medium
Как из Search Console выгрузить статистику брендовых запросов по дням
Выгрузить статистику запросов из Google Search Console можно только за последние 90 дней. Поэтому желательно сохранять исторические данные…
Как определить влияние оффлайн-рекламы на посещения сайта при помощи R и алгоритма Causal Impact от Google: https://bit.ly/2Hsy31q
thisisdata.ru
Влияют ли на трафик события из прошлого? Определяем при помощи R – This is Data
Как повлияло на трафик подключение платной рекламы (или любое другое событие в прошлом)? Определяем с помощью пакета CausalImpact для R.
BigQuery для SEO вместо excel. Как и зачем использовать рассказал Геннадий Сивашов (SEO Club): https://bit.ly/2H9r8Lu
YouTube
Google BigQuery для SEO (или когда excel умирает) - Геннадий Сивашов (SEO Club Ukraine)
В этом видео автор рассказал что это за зверь Google Big Query, его роль в природе аналитики и как его приручить, а еще и поделился скриптом (и рассказал как легко скрипты пишутся в целом), который значительно упрощает процесс сопоставления данных и помогает…
Как оптимизировать работу с Google Data Studio и BigQuery, отличный материал от Алексея Данилина: https://bit.ly/2vpzTM2
Forwarded from WebAnalytics (Осиюк Дмитрий)
Как собирать сырые данные Google Analytics в собственное хранилище данных — готовое решение от Дмитрия Комаровского
Для тех, кто работает с BigQuery в R, Хедли Викхем полностью переписал пакет bigrquery и просит принять участие в тестировании версии: https://bit.ly/2qOCiKJ
GitHub
bigrquery/NEWS.md at main · r-dbi/bigrquery
An interface to Google's BigQuery from R. Contribute to r-dbi/bigrquery development by creating an account on GitHub.
Не так давно Google предоставил датасет с сырыми данными своего магазина в BigQuery. Роман Романчук подготовил несколько SQL-запросов для примера.
Сева Миронович написал инструкцию как передавать и работать с сырыми данными Яндекс Метрики в ClickHouse
Рекомендуемые для отслеживания действия пользователей в зависимости от типа бизнеса #шпаргалка #взакладки
10 советов по использованию BigQuery помогут новичку сэкономить время и быстрее освоить инструмент
Многие уже слышали о том, что Google предоставил публичный набор данных Google Analytics 360. Но мало кто знает, что аналогичные данные есть и от Firebase.
Как с ними работать в BigQuery с большой сцены рассказал Todd Kerpelman. Кстати, стриминг данных Firebase в BigQuery настраивается в несколько кликов, и пока бесплатный, если вы не используете других платных инструментов от Firebase. Примеры SQL-запросов по ссылке.
Как с ними работать в BigQuery с большой сцены рассказал Todd Kerpelman. Кстати, стриминг данных Firebase в BigQuery настраивается в несколько кликов, и пока бесплатный, если вы не используете других платных инструментов от Firebase. Примеры SQL-запросов по ссылке.
Оказывается, в BigQuery есть набор данных по улучшению юзабилити сайтов Chrome UX Report. А именно метрики, основанные на данных реальных пользователей Chrome, некоторые из них доступны на PageSpeed Insights.
В отчете есть возможность сравнивать сайты между собой и с макротрендами UX по странам. Можно увидеть сильные и слабые стороны сайта, а также отслеживать изменения с течением времени. В сети есть готовые шаблоны SQL-запросов.
В отчете есть возможность сравнивать сайты между собой и с макротрендами UX по странам. Можно увидеть сильные и слабые стороны сайта, а также отслеживать изменения с течением времени. В сети есть готовые шаблоны SQL-запросов.
Почему количество пользователей в BigQuery и GA могут отличаться?
Дело в том, что в интерфейсе GA данные подтягиваются из предварительно сегрегированных таблиц, используя функции приблизительного подсчета уникальных значений (алгоритм HyperLogLog ++). Это позволяет значительно увеличить скорость отображения результатов, но немного уменьшает их точность. Обращаясь к данным в BigQuery можно намеренно использовать приблизительные функции, когда скорость отображения важнее точности результатов.
Дело в том, что в интерфейсе GA данные подтягиваются из предварительно сегрегированных таблиц, используя функции приблизительного подсчета уникальных значений (алгоритм HyperLogLog ++). Это позволяет значительно увеличить скорость отображения результатов, но немного уменьшает их точность. Обращаясь к данным в BigQuery можно намеренно использовать приблизительные функции, когда скорость отображения важнее точности результатов.
Майская подборка курсов по работе с BigQuery на Coursera:
-- Exploring and Preparing your Data with BigQuery старт 6 мая;
-- Creating New BigQuery Datasets and Visualizing Insights старт 7 мая;
-- Achieving Advanced Insights with BigQuery старт 7 мая;
-- Applying Machine Learning to your Data with GCP старт 7 мая;
-- Serverless Data Analysis with Google BigQuery and Cloud Dataflow старт 14 мая;
-- Developing Applications with Google Cloud Platform старт 14 мая;
-- Architecting with Google Cloud Platform старт 14 мая;
-- Building Resilient Streaming Systems on Google Cloud Platform старт 14 мая.
-- Exploring and Preparing your Data with BigQuery старт 6 мая;
-- Creating New BigQuery Datasets and Visualizing Insights старт 7 мая;
-- Achieving Advanced Insights with BigQuery старт 7 мая;
-- Applying Machine Learning to your Data with GCP старт 7 мая;
-- Serverless Data Analysis with Google BigQuery and Cloud Dataflow старт 14 мая;
-- Developing Applications with Google Cloud Platform старт 14 мая;
-- Architecting with Google Cloud Platform старт 14 мая;
-- Building Resilient Streaming Systems on Google Cloud Platform старт 14 мая.
BigQuery позволяет создавать пользовательские функции UDF (User Defined Functions) - это кастомные функции JavaScript, которые добавляют функциональности SQL. Вот несколько ссылок на примеры использования:
- UDF при работе с вложенными полями на примере Custom Dimensions в Google Analytics
- UDF при работе с вложенными полями на примере Properties и Parameters в Firebase (SQL-запрос)
- Видео об использовании UDF
- Небольшой туториал по UDF на Kaggle
- Примеры из документации
- UDF при работе с вложенными полями на примере Custom Dimensions в Google Analytics
- UDF при работе с вложенными полями на примере Properties и Parameters в Firebase (SQL-запрос)
- Видео об использовании UDF
- Небольшой туториал по UDF на Kaggle
- Примеры из документации
Forwarded from WebAnalytics (Осиюк Дмитрий)
В Google Data Studio появилась функция Custom Bookmark Links, которая позволяет прописать фильтры отчета в его URL. Например, вы хотите создать отчет, который будут использовать региональные менеджеры Москвы и Питера. Для это вы используете Custom Bookmarks Links, прописываете в URL нужные фильтры и отправляете первому менеджеру отчет по Московской области, а второму по Питерской. Менеджеры сохранят отчеты в закладки браузера, и впоследствии будут получать информацию по своему региону, не выбирая его каждый раз в фильтрах. Фичу уже можно юзать. Спасибо OWOX за инфо.