Аналитика. Это просто – Telegram
Аналитика. Это просто
969 subscribers
120 photos
3 videos
4 files
517 links
Канал об аналитике. Web, мобильная, продуктовая. По любым вопросам можно писать - @ealexandr
Download Telegram
Мне очень нравится, как платных подписчиков считают сервисы Яндекса. Кинопоиск вот только отчитался об этом и стал лидером. Яндекс Музыка тоже считает своих подписчиков, Янедкс Диск и другие. Все смотрится круто, если сравнивать с конкурентами по сегменту. Пока, собственно, не выйдешь из этого сегмента. Ведь у всех подписчиков Яндекса одна подписка, в которой есть Кинопоиск, Музыка, Диск, Драйв, Такси, Маркет. И, если мы это все распилим и вычленим каждый продукт, получится не так ярко и красиво.
Например, IVI, Spotify, Apple Music - фактически монопродукты (с небольшими нюансами). А Яндекс продает целый пакет продуктов. Поэтому прямое сравнение совершенно некорректно, ведь мы сравниваем продукт с букетом продуктов. Если бы у Яндекса все это были отдельные продукты с отдельными подписками, тогда можно сравнивать. А так - конечно, нет.
Все это не реклама, а Яндекс, конечно, мы все любим. Но вот не нужно манипулировать цифрами.
Вчера на Youtube канале Карпов Курсы прошел вебинар на тему Зачем бизнесу аналитики?
https://www.youtube.com/watch?v=nDOj9HH9IZw&t.
Сделал небольшой конспект содержимого. Возможно, кому-то это сэкономит время.

Основная часть.

Зачем аналитик нужен бизнесу:
1. Аналитик приносит ценность, помогая на основе данных принимать правильные решения. Эти данные должны давать возможность принимать более качественные решения. Практика показывает, что так и есть, иначе бы аналитиков не держали в компании.
Соответственно, эти решения должны быть верными.
2. Не менее важно их правильно доносить до бизнеса, иначе ценность аналитика близка к 0 и он не нужен.
3. Аналитик нужен только тогда, когда необходимо повысить качество решений.
4. Аналитик обязательно должен понимать цели бизнеса.
5. Все вот эти питоны, sql и прочие статистики - всего лишь инструменты, помогающие воплотить логику решения задачи аналитика. Инструменты могут меняться, но приносимая ценность должна оставаться главным в его работе.
6. Зарплата аналитика отражает ценность его помощи в принятии решений. Соответственно, чем выше ценность, тем больше зарплата. Но это работает не универсально.

Как не нужно делать аналитику:
1. Просто исполнять то, что сказали сделать. Не нужно от заказчика ожидать полностью разжеванной задачи. Нужно быть подозрительным, критичным, думать.
2. Не нужно быть категоричным, например, тест проводить нельзя - пользователей мало. Если нельзя, значит, нужно искать другое решение.
3. Не нужно вываливать 100500 столбцов в отчете. Заказчику нужны не цифры, а результаты, подкрепленными цифрами. Он не должен сам выискивать ответ на вопросы в табличках.
4. Не нужно закапываться с задачу слишком глубоко в ущерб срокам. Скорость донесения ценности - тоже деньги.
5. Не нужно усложнять, объясняя все детали. Но и твердить, что "это слишком сложно, вы ничего не поймете", категорически неприемлемо.
Если аналитик делает такие вещи, он не нужен бизнесу.

И был большой блок вопросов из чата.

- Требования знания алгоритмов избыточны? Они нужны разработчику, но аналитику почти никогда.
- KPI в числах? KPI для аналитика скорее не нужно.
- Как выйти из состояние оператора ЭВМ для джуна? Не быть пассивным, смотреть вокруг.
- Как научиться делать выводы из данных. Думать, интерпретировать, искать ответы. Концентрироваться на вопросе "Что мы хотим достичь".
- Как работодатель понимает, что аналитик хороший? Совсем по-разному, часто от чисто технических навыков отталкиваются.
- Как работодатель понимает, что аналитик может принести пользу для бизнеса? Часто на собеседовании дается некая проблема, которую нужно решить.
- Как до бизнеса донести ценность аналитика? Демонстрировать ответственность, профессионализм.
- Где взять практические задачи для аналитика? Технические - тестовые задания после собеседования.
- Какие решения могут быть при невозможности провести АБ тест? Могут быть разные варианты, главное - придумывать некоторые решения.
- Как ответить на вопрос "Почему продажи падают"? Аналитик должен научить менеджеров задавать правильные вопросы.
- Верх развития аналитика - стать менеджером, принимающим решения? Нет. Может быть много путей.
- Как использовать аналитиков в оффлайн-бизнесе? У многих аналитиков достаточно опыта, чтобы применить его и в оффлайн, в том числе в АБ тестах.
- Чем аналитик отличается от DS? DS - это технический специалист, он не разрабатывает логику решения, он работает по ТЗ. DS все же ближе к разработчику. Аналитик же не технический специалист, но пользующийся техническими инструментами.
- Переход из отдела продаж в аналитики вполне себе перспективен.
- Как быть компаниям, в которых пока нет аналитиков данных? Не факт, что это плохо, может он и не нужен.
- Какова ситуация по аналитикам за границей? Также перегрето. Есть разница в инструментах (R и Питон в соотношении 40/60).
- Аналитик стартапа или VK - это разное? В стартапе часто делает примерно все, близкое к данным, в том числе дата инжиниринг. В VK, выше специализация и глубже работа.
- Можно ли просто прийти с вопросами к опытным коллегам? Это хорошо, приходите в чат.
- Что лучше - глубже изучить инструменты и трудоустроиться джуном или идти стажером? Нет однозначно правильного ответа. Всегда зависит от самого человека, удобных ему методов получения опыта.
- Где более сильные аналитики, в России, Европе, США? Трудно сказать.
- Как понять, что DS ближе? Нужно смотреть на любовь к техническим штукам. Если есть прямо тяга, нужно пробовать DS.
Forwarded from TechSparks
Про специализированные гаджеты для профессиональных футболистов я ещё не писал — а они есть.
Спорт все больше становится data driven; и любительский, и профессиональный. Ноги часто важнее рук — так что привычные браслеты не годятся, да и данные про биомеханику надо собирать и анализировать специфические. Вот и появляется гаджет, который можно одеть поверх бутсы, причём признанный в программе инноваций FIFA.
И, как нынче принято, подсобила пандемия со своими изоляциями: когда нельзя собраться на групповую тренировку, необходимо срочно поднять информационную насыщенность тренировки индивидуальной. В итоге ниша стала конкурентной и теперь можно наблюдать за ростом профессиональных трекеров для спортсменов и средствами обработки данных с них.

https://jewishnews.timesofisrael.com/meet-the-brains-behind-footwear-tech-thats-transforming-football/
Все по-разному говорят, как считать метрики — кому верить?

Всем салют! Всегда рад читать комментарии к прошлому посту и вопросы чате канала 🔥

Особое спасибо тем, кто открыто пишет о своих сомнениях и признается, что делает ошибки в расчетах метрик — это круто, мы все так учимся друг у друга.

В этот раз несколько раз написали комментарий на тему разной веры в аналитику: все говорят разное, как считать метрики — кто-то топит за сессии и визиты, кто-то за аналитику по пользователям, кто-то верит одной системе, кто-то другой — кому верить и как отстоять свою позицию?

Еще раз продублирую мысль. Это не вопрос чьей-то веры — это вопрос верных математических расчетов, чтобы принять верные управленческие решения:

1.

Сессионная аналитика не стыкуется с юнит-экономикой, планом продаж, потому что здесь конверсия по сессиям математически неверна и при подстановке значений в 1ю, 2ю, 3ю покупку вы получаете цифры, не стыкующиеся в реальности. В разборах я показываю, что эти ошибки — это несколько миллионов рублей прибыли или убытков.

2.

User-based аналитика — это стандарт уже 10+ лет во всей мобильной аналитике. Расчет по сессиям — это атавизм бесплатных движков  аналитики, который опытные ребята — Amplitude, Firebase (бывший fabric), Mixpanel, Kissmetrics — уже давно избегают и считают только user-based. Это стандарт комьюнити аналитиков, меня этому обучали еще 12 лет назад.


3.

Для прокаченных аналитиков то, что я рассказываю — это очевидные и давно известные вещи. Но как мы видим по рынку, по комментариям — таких прокаченных ребят лишь небольшая доля, потому что об этих ошибках мало рассказывали в публичном пространстве.

Поэтому мы до костей разбираем метрики, как они считаются, как их считают системы аналитики и где можно ошибиться в интерпретации этих метрик. Чтобы директорам по маркетингу, собственникам — тем, кто не погружался глубоко в вопросы аналитики — было понятно, как на самом деле системы аналитики считают метрики и что на самом деле можно использовать для управленческих решений.

——

В прошлом кейсе обещал, что соберем материал, как можно самим проверить ошибки в расчете конверсии расширенной электронной коммерции, и как построить воронку с честной конверсий по пользователям в Google Analytics Universal. Читайте статью с разбором:

🔗 Расширенная электронная коммерция Google Analytics скрывает ваши проблемы и точки роста. Рассказываем, как себя проверить

Сохраняйте в закладки — перепроверяйте себя, показывайте вашим аналитикам, подрядчикам и не совершайте этих ошибок 🙏

Помните, что конверсия — ваш шанс выигрывать на аукционах и привлекать больше целевых пользователей 🙌
Forwarded from Laptop Coach
В предверии нового сезона АПЛ нашел пресс-релиз лиги о контракте с Oracle - теперь и в Англии во время матча будут считаться статистики для увеличения интереса зрителей. Это схожее сотрудничество, что и у нас в Бундеслиге с AWS, причем похожи даже названия:

АПЛ - Match Insights Powered by Oracle Cloud
Бундеслига - Match Facts Powered by AWS

Начиная с первого тура будут доступны 3 статистики:

Average Formation - средние позиции команды с / без мяча.

Live Win Probability - вероятность команды выиграть в матче. Строится модель, симулирующая остаток матча, затем симуляция повторяется 100000 раз, и на основе получившихся исходов считается вероятность исхода матча. Модель учитывает текущий счет игры, дома или на выезде играет команда, а также количества пенальти, красных карточек, игроков на поле и оставшегося времени матча.

Momentum Tracker - вероятность команды, владеющей мячом, забить гол в следующие 10 секунд. Непонятно, строится ли модель на event или tracking-данных (Opta - официальный поставщик обоих типов данных для АПЛ, Чемпионшипа и Шотландской Лиги), но учитывает последние 5 событий на поле.

Учитывая недавнюю статью Тома Ворвилля об xT на The Athletic, вдвойне круто, что продвинутая статистика становится более популярной и понятной для обычного зрителя.
Только что на мой все еще живой аккаунт на FL.ru пришел заказ под заголовком Статист-аналитик. Что там делают статисты, неважно, я о другом.
Небольшая история. Несколько лет назад компания, в которой а работал, немного сотрудничала с данным сервисом. Цель была - увеличение прибыли. Подробности не расскажу, но в итоге они наше предложение не приняли и пути разошлись.
Есть подозрение, что тамошние руководители все еще считают, что лучший способ увеличить прибыль - это больше брать с фрилансеров. Сравнивать с другими биржами здесь не будем, ни к чему это. Ну так вот, на тот момент они просто постепенно поднимали стоимость аккаунта PRO, не очень быстро, не очень резко, но все же.
Сейчас взгляд упал на их комиссию за безопасную сделку.
На данный момент при стоимости заказа менее 35 000 комиссия 20% (отчего-то кажется, что не менее 80% сделок такие). Подробно можно почитать здесь: https://feedback.fl.ru/ru/knowledge-bases/2/articles/17196-skolko-stoit-bezopasnaya-sdelka-komissii-tarifyi-i-nalogi.
Показалось, что это больше, чем было раньше. Немного погуглил, нашел вот такую страничку: http://www.xn--80akhmlofgv.com/fl-ru-%D0%BA%D0%BE%D0%B5-%D1%87%D1%82%D0%BE-%D0%BE-%D0%B1%D0%B5%D0%B7%D0%BE%D0%BF%D0%B0%D1%81%D0%BD%D1%8B%D1%85-%D1%81%D0%B4%D0%B5%D0%BB%D0%BA%D0%B0%D1%85/.
Тут, при сумме заказа до 5000 комиссия была 14,9%, дальше на понижение. Если учесть инфляцию за 5 лет, можно получить, что комиссия выросла если не в 1,5 раза, то около того.
К сожалению, у меня нет полных данных о структуре и динамике прибыли и количестве сделок, фрилансеров данного сервиса. Было бы очень интересно взглянуть.
А вот заказ со статистами
Интересно сейчас разные специалисты рассуждают о будущем аналитики, аналитика.
В частности Алексей Свирин написал интересный пост в fb. В мимолетный миг досуга также надумал сформировать свое мнение.
Не вижу проблемы в том, что дата-аналитика как есть сейчас сдохнет. Ну и ладно, такова жизнь.
У себя в голове не могу толком разделить продуктового и дата-аналитиков. Так как продуктовый, конечно, должен уметь работать с данными, а аналитик данных должен обладать продуктовым мышлением, иначе толка от него не будет.
К вариантам, которые предложил Алексей (системный аналитик, продуктолог, программист, дата-инженер) уверенно добавлю обычного продуктового аналитика.
Предыдущий мой руководитель прекрасно понимал, как нужно работать с аналитиком: даешь аналитику проблему и он идет ее решать. И таких проблем может быть 100500. Ведь жизнь не ограничивается АБ тестами и дашбордами - любой живой развивающийся продукт требует постоянного решения многих вопросов, типа ответов на вопросы как нам сделать?, почему?, когда?, а что, если? и тд. И, слабо понимаю, как изучение прекрасных красивых дашбордов все это сможет сделать.
Аналитик сам решит, какие инструменты применить, в каком формате презентовать и обосновать результат. Наверное, поэтому, при знании только GA, экселя и совсем плохого SQL я никогда не был джуном. И благодарен ему за это.
Менеджеры продукта сами все это не сделают - у них другие обязанности. А аналитик, как его не называй, продуктовый, данных, еще как-то, просто быть самостоятельнее, и, наверное, шире владеть хард и софт-скилами, хорошо понимать, как работает компания. И, конечно, уметь проводить полный цикл решения проблемы, от "пойду в бд" по защиты отчета и рекомендаций.
И все это отлично.
Тоже посмотрел-послушал Анатолия Карпова: https://youtu.be/2Obawm2vzDo
Получилось сильно созвучно моему восприятию роли аналитика в компании. Не доставать и джоинить данные, а помогать бизнесу принимать правильные решения.

Недавно один знакомый попросил помочь найти ему аналитика. Согласился составить вакансию, поучаствововать в собеседовании, составить тестовое задание. Мы пока только начали.
Посмотрев на найм со стороны, открыл для себя много интересного. Об этом расскажу с ближайшее время. А также о проблемах, с которыми сталкивается мой знакомый и столкнется его будущий коллега.
Какая ирония - когда "идешь" на собеседование соискателем, думаешь, что, вот теорию вероятностей как-то начал забывать, а что там с питоном, а что такое мощность в статистике.
А когда "идешь" на собеседование нанимающим, думаешь, как понять, что у него с головой в порядке, что он понимает, как работают деньги, чтобы был ответственным, критичным, а пандас этот за 3 месяца отлично учится, и оконки в sql не главное, и сквозная аналитика только звучит эффектно...
Прежде всего понимание, как решить задачу-проблему. А в качестве инструмента и эксель ничего так. А, может, и нет проблемы, и решать ничего не надо.
Помню, как я впервые услышала на Школе Менеджеров Яндекса фразу:

Продукт — это то, что решает проблему пользователей или клиентов. Всё остальное — галлюцинации.

Я потеряла сон. Будто заблудший человек, которому великий мудрец раскрыл, в чем смысл жизни. Да только человек (я) ничего не понял.

Эта фраза напоминала мне неравенство Гейзенберга и уравнение Бернулли. Прекрасная в своей контр интуитивности и простоте.

Эта фраза будила меня по ночам все мои годы в аналитике. Я понимала, что помимо случайной череды событий, обычного Казино, коим является жизнь, есть ещё простое разделение людей. Люди делятся на 2 типа. На тех, кто понимает что-то особенное про проблему пользователей и тех, «кто копает». Но что?

Я была тем, кто копает. И таких большинство. Я редко встречала тех, кто понимал что-то особенное про проблему клиентов. За их плечами росли экспоненты аудитории и дохода. А они плавно шли к окну, чтобы утонуть в созерцании калифорнийского заката.

Когда мне показалось, что что-то такое про проблему — это научиться её измерять, я изобрела метрики ценности PV и придумала формулу их связи с качеством — PQ. Мои соцсети читают родители. Поэтому я напишу далее без обсценной лексики:

— Подавляющему большинству продуктовых людей и топам глубоко наплевать на ценность и качество. И уж тем более измерение этих далёких для них вещей.

Вы думаете, я не показывала им, как математические ценность драйвит экономику продукта? Им было наплевать.

Я думаю, что человек с амбициями сделать крутой продукт и человек с амбициями заработать достаточно, чтобы не работать, очень легко читаются по их равнодушию или неравнодушию к ценности.

Люди с амбициями сделать крутое, творцы, создатели — это те, кем я восхищаюсь. И их интересует ценность прежде всего. И им часто наплевать на аналитику. Потому что в культуре данных нет развитого мускула -- считать ценность.

В какой-то момент, я увидела, что крутые продукты всегда монетизируют ценность, которую они дают клиентам. Они всегда именно за неё берут деньги или именно в момент получения основной ценности включают рекламу. Так себе продукты берут деньги за материю (вроде какого-нибудь ненужного китайского девайса, который либо сгорит через неделю, либо будет скучать среди сотен тысяч ему подобных в разделе Авито «Продаю своё»).Либо (что еще хуже) так себе продукты продают время работы своей команды. Это диджитал, детка. Диджитал и два конца.

Обратите внимание, что Фейсбук (PV=Time Per session), Тиндер (PV = matches per session), Spotify (PV=Time Per session), Фитнес-платформы с понедельной подпиской (PV=Weekly Retention), некоторые частные клиники на самом деле продают вам в чистом виде ценность. Даже Amazon продает ценность (PV = Orders Per session), а точнее её первообразную по пользователям.

Но таких продуктов очень мало.

Мало людей с амбициями не лежать, а творить. Поэтому я уже месяц открываю LMS и закрываю снова. Надо залить туда своей курс про метрики ценности. Но кому это надо? Думаю я. И ухожу в рутину, где всем надо закрывать KPI и медитировать на графики аудитории.

А как дела в вашей компании? Знают ли там ключевую метрику ценности продукта?
Навеяло некоторые воспоминания.
Когда-то работал в небольшом прайс-агрегаторе - отвечал за разработку и трафик закупаемый и продаваемый, ну и за многие другие вопросы - компания была небольшая. Название приводить не буду - это не является важным.
Долгое время я полагал что наш продукт - прайс-агрегатор, что он дает ценность посетителю (может выбрать товар по лучшей цене) и интернет-магазину (даем целевой трафик). И на всем вот этом мы будем зарабатывать.
Впоследствии выяснилось, что все не так. Фактически было два продукта с очень разными ценностями:
- сайт (прайс-агрегатор) - интерфейс для получения чека от интернет-магазина - менеджеры по продажам звонили в интернет-магазин и предлагали разместить на нем свой прайс-лист. Часть из них соглашались.
- инструмент открутки трафика - нужно было потратить бюджет клиента трафиком фактически любого качества, главное было списать бюджет и попросить еще платеж. Пользователи, приходящие в интернет-магазин, даже и не видели наш прайс-агрегатор - они редиректились с попутным прикреплением наших utm меток.
Итого: ценность все это несло только для владельца бизнеса, 95% платежей были менее 10 000 р., и минимум повторных платежей. Этот бизнес жив и сейчас - в России полно интернет-магазинов, да и аналитика не у всех нормально настроена, чтобы увидеть проблему. Меня давно там нет, и к лучшему, но это был очень полезный опыт.

Вот такой бывает продукт, с такой вот ценностью, пусть и для ну очень узкой аудитории.
Слушаю крайний выпуск подкаста Айтишниками не рождаются.
Прекрасно сформулирована основная задача аналитика - ответить на какой-то бизнесовый вопрос. А все остальное - всего лишь инструменты, помогающие на него ответить.
Рабочая доска аналитика. Решил сохранить на память. Тут есть:
- задача про вагонетку
- решение задачи про вагонетку с помощью линейной регрессии, назначив жертвам веса
- проблема выбора жертвы автономного автомобиля
- правильная схема дерева решений при принятии мужем решения шпионить за женой
- портреты двух политиков
- нахождение одной проблемы на сайте в момент поиска решения другой
- схема триангуляции Делоне
- немного питона
- схема сборки отчета в БД
- проблема принятия решения человеком во взаимодействии вычислительного центра (наша нейросеть) и входящих факторов
- проблема принятия решений у очень богатых людей

Не ожидал, насколько насыщенный у меня сегодня день
Кстати, если кто-то интересуется спортивной аналитикой данных, в частности футбольной, можно начать отсюда:
- https://github.com/metrica-sports/sample-data
- https://github.com/Friends-of-Tracking-Data-FoTD/LaurieOnTracking

По первой ссылке можно найти трекинговые данные и события по нескольким играм. По второй уроки по анализу этих данных.

Можно также написать мне в личку, расскажу про группы и каналы по футбольной аналитике.
Forwarded from Laptop Coach
Use case, о котором мечтает, наверное, каждый футбольный Data Scientist. Остаётся Бэнему собрать такой же клуб в Про лиге, и помимо Analytics Derby в АПЛ будет Automated Decisions Derby в Бельгии.

https://www.sports.ru/tribuna/blogs/urbanhymns/2982901.html?sl=1