Факапы BI-проектов. "Что просят, то и делаю".

👩🏻‍💻Ева делает финансовый дашборд для небольшой компании. Заказчик уже подготовил исходные данные, настроил выгрузку из 1С. Ему нужна внешняя экспертиза по визуализации. (Уже был неудачный опыт с подрядчиком, который наворотил диаграмм "чтобы были").

👀Смотрю на дашборд и вижу в буквальном смысле визуализацию оборотов по 51 счету. Расходы и поступления по статьям, группам, в динамике. Диаграммы построены правильно, к этому претензий нет. Спрашиваю:

- А какой вывод заказчик сделает из этой визуализации?
- Не знаю... меня просили просто визуализацию сделать..
- А вы хотите быть для заказчика оформителем-исполнителем или аналитиком-консультантом? Кому он больше станет платить?

Сами понимаете, вопрос риторический. Да и на самом деле, я так не прессую студентов, просто привожу резюме диалога.

Пара вопросов, которые не надо стесняться задавать заказчику:

❓Какие решения вы будете принимать, опираясь на дашборд?

Тут мы выяснили, что на эти данные они смотрели при расчете дивидендов. И надо нескольким собственникам прозрачно донести эту схему (а также последствия повышенного извлечения денег из бизнеса).

❓Что будет индикатором отклонения, светофором "хорошо-плохо"?

Обычно это сравнение с планом, но в этой небольшой компании планы только на год, а дальше по ситуации. Но при этом сравнение месяц к месяцу им важно. И эти индикаторы уже можно выводить на дашборд, не дожидаясь, когда они упорядочат ежемесячные планы.

В итоге, дашборд обещает существенно изменить свой облик и смысл: из визуализации первички он должен показать «где деньги, и как мы их поделим»

Ставьте 🤓 если хотите следующую историю.

Итак, продолжаем разговор про основные качества, которые делают сеньоров сеньорами. В прошлый раз мы поговорили про ответственность, сегодня обсудим стратегию.

Что такое стратегия? Если упростить, то это умение
- декомпозировать цель
- в гипотезу
- о последовательности шагов для достижения этой цели.

Очень часто про стратегию говорят исключительно в ключе планирования работы команды/ департамента/ компании - и это, безусловно, важная составляющая работы любого сеньора. Но помимо этого стратегическое мышление проявляется и просто в ежедневной работе.

Например [если что, примеры очень упрощенные и используются исключительно для иллюстрации]:

1. Дизайнер взялся за новую задачку.

Не стратегический подход: начать делать задачу.
Стратегический подход: прежде чем делать, подумать, все ли вводные есть на руках; какие риски и блокеры могут возникнуть; и кого нужно вовлечь в дискуссию.

2. Менеджер получает негативный, но не критический фидбэк на подчиненного незадолго до важного дедлайна.

Не стратегический подход: дать фидбэк сразу.
Стратегический подход: дать фидбэк, когда потенциальная демотивация сотрудника не создаст риск для запуска проекта.

3. Продакт-менеджеру надо подготовить стратегию на следующие полгода к 5 декабря.

Не стратегический подход: начать работать над стратегией 5 ноября.
Стратегический подход: определить, на какие вопросы команде надо ответить, чтобы получить сильную стратегию; внедрить эксперименты в работу команды при планировании текущего полугодия (в июне).

Не нужно быть сеньором, чтобы начать более стратегически подходить к своей работе. Но с ростом уровня стоит ожидать и роста:

- количества информации на входе, которую надо обработать (джуны чаще работают только с внутренними данными и с ограниченным числом стейкхолдеров, сеньоры подключают еще и внешние источники типа трендов или конкурентного анализа + работают с более широким кругом стейкхолдеров);
- уровня неопределенности, с которым надо работать (включаю сюда и горизонт планирования тоже).


Возьмем продакта, которому надо составить роадмап для команды.

У джуниора все вводные известны: уже есть данные от аналитиков и исследователей; есть понятные цели от руководства; осталось только поговорить со стейкхолдерами в команде и сделать выводы.

У сеньора, скорее всего, будут расплывчатые пожелания от топ менеджмента, типа "вырастить ретеншн" или, еще лучше, "увеличить счастье пользователей". Хороший сеньор сможет:

- артикулировать и формализовать конкретную цель - или аргументированно возразить, почему цель не имеет смысла
- определить необходимые источники данных для валидации или формулировки гипотез
- определить стейхолдеров и вовлечь их в релевантные этапы процесса
- разграничить проекты, которые приведут к быстрому росту метрик vs которые заложат основание для более долгосрочных инициатив.

И так далее.

Чтобы прокачивать стратегическое мышление, не надо быть продакт директором в гугле. Вот вам самая простая (и в тоже время важная) точка роста:

не делать ничего, пока вы не выяснили и не обсудили со стейкхолдерами 1) цель и метрики успеха, и 2) шаги, чтобы достичь цели.

Кажется просто? Вам и карты в руки: гарантирую, что большинство ваших коллег об этом забывает. Есть классный шанс выделиться на их фоне 😉

Как все устроено

Два года назад я бы хотел, чтобы кто-то мне объяснил простым языком схему работы с данными.

Проблема в том, что в интернете много инфы, но она часто сложная для новичков.

Поэтому я это упущение постараюсь компенсировать для тех, кто только начинает в это погружаться.

И так, в общем смысле схема передачи данных выглядит так:

API сервиса -> База данных -> BI система

API позволяет у сторонних сервисов получать статистику или менять что-то внутри сервиса.

Например, из этого раздела справки я могу узнать как выгрузить логи Яндекс.Метрики.

Базы данных если простым языком — это Excel файлы собранные в облаке, между которыми мы можем объединять данные.

Есть такой термин СУБД, он расшифровывается как система управления базами данных.

Так вот среди этих СУБД есть те, которые читают данные по строчкам — называются "реляционные".

К ним относятся MySql, PostrgreSQL, Oracle.

И есть СУБД, которые читают данные по столбцам - "аналитические".

Самые популярные ClickHouse, Google BigQuery.

Если мы работаем с данными, которые очень быстро множатся в количестве, например каждый день по 1 МЛН строк — мы используем аналитические БД.

BI системы - это системы визуализации в которых мы строим дашборды.

Для рынка РФ и РБ сейчас самая актуальная система - DataLens.


Теперь когда введение я дал, давайте попробую рассказать про взаимодействие.

Первый шаг при построении системы — это знакомство с данными из API.

Здесь я выгружаю тестовую партию данных и пытаюсь понять в каком столбце какие типы данных содержатся.

Второй шаг - на основании типов данных создать таблицу в СУБД, которая эти типы максимально эффективно обработает с точки зрения скорости чтения и объема памяти для хранения.

Таблица создается с помощью SQL, данные передаются с помощью Python.

Эти два шага на сленге называются ETL (Extract, Transform, Load).

Далее в BI мы можем передать таблицу целиком (что я обычно и делаю), частично (нужные столбцы), так и с помощью SQL связать данные из разных таблиц по пути (когда нужно привязать к каждому заказу имена клиентов, например).

Вот и все, что нужно понимать для начала.

передаем данные в табличку -> табличку передаем в BI -> строим дашборды.

——-

Если вы хотите получить готовое решение для построения дашбордов для Директа и, в скором времени, Метрики, то ознакомьтесь с постом.

Это пять:
Наволочка с дизайном Excel: Идеальный подарок для тех, кто даже во сне наводит порядок в данных

Это смешно

По фиг, что внизу реклама: мысли топовые!

Новогодние обещания

Я весь год старался, вел этот телеграм канал для тебя. Настал час расплаты. Я возьму с тебя несколько обещаний на 2024 год.

Пообещай не тратить свою жизнь на нелюбимую работу, токсичного и истеричного начальника и продукт, который тебя не вдохновляет. В этой игре у тебя осталась только одна жизнь, поэтому зачем ее жить не так, как тебе хочется?

Пообещай сделать идеальный дашборд. Не такой, где черт ногу сломит и понятен только тебе, а в который с удовольствием будет заходить вся команда.

Пообещай начать решать проблемы своего руководителя. Не подсвечивать их, а прийти и сказать «слушай, я вижу, что у нас этот участок плохо работает, а тебе некогда. Давай я возьму это на себя и решу проблему?». Даже если ты сразу не увидишь слезы на его глазах, ты станешь его напарником и первым кандидатом на повышение.

Пообещай, что расстанешься со всеми подчиненными, которые не тянут. Ты уже давал им кучу шансов исправиться, но ничего не меняется. Отпусти их и увидишь через некоторое время, что всем от этого стало легче.

Пообещай перестать дергаться из-за бабла и сфокусироваться на создании долгосрочной ценности. Ну пришел тебе офер на 30 тыщ больше. Не надо срываться только из-за того, что где-то тебе насыпали на пару монет больше. Создавай ценность в компании, улучшай продукт, решай проблемы руководителя и в результате получишь гораздо больше.

Пообещай пройти 1 обущающий курс. Неважно, что это будет: аналитика, ML, менеджмент, софтскиллы, дизайн. Даже курсы вокала пойдут. Никогда не знаешь, когда нужно будет впечатить клиента в караоке. Силы и время, потраченные на образование, всегда имеют максимальный ROI.

Пообещай не ныть и не токсичить. Это никому не в кайф, включая тебя.

Пообещай найти себе наставника. Того, с кем можно будет созваниваться раз в пару месяцев, обсудить свои проблемы и получить компетентный взгляд со стороны. Я сам рос во многом благодаря тому, что у меня были фантастические менторы.

Пообещай запустить 1 пет проект. Это один из лучших способов для продакта развиваться, плюс с высокой вероятностью ты на нем заработаешь столько же денег, сколько получаешь в найме. Нашел 1000 человек, которые заплатили тебе по 10 баксов и вуаля, можно вообще не работать в найме и жить где захочешь.

Выполнишь хотя бы часть обещаний - это будет лучший год. А если захочешь поговорить об этом - выбирай время тут: t.me/mindshare_egor_bot/mindshare_egor_app (если вылетает на Андроиде, открой с компа). Это последние слоты на январь.

Я давно ничего не писал.
Я мог бы сказать, что это связано с тем, что я записывал это видео, но нет.
Тем не менее, ролик вышел смешным, буду рад вашему хорошему настроению 😄

Одна из моих любимых цитат в Civilization 6

«Я не верю в астрологию, потому что я – Стрелец, а Стрельцы – большие скептики»
– Артур Кларк

#excel_tips

Делаю финмодель. 📊
Попросили добавить 2027 год.

Добавил - теперь нужно во всех формулах поменять диапазон столбцов. 🤦‍♂️

Заменить столбец cd на cp.

И так мне стало лень. 🥱
Стал гуглить.

Оказывается можно делать замену не только значений в ячейках, но можно установить специальный чекбокс и менять ссылки в формулах! 🤩

Кайф. 🔥

#excel_tips

Нет времени объяснять.

✅ По существу:
- Нужно сделать модель финансовую.
- Сочетать фактические данные с 2022 и план до 2027.
- Видеть годовые и месячные значения.

✅ Мой подход:
1. Годовые Данные в Первых Столбцах: чтобы было видно все за 6 лет сразу.
2. Периоды разбил на 2 строки год / месяц: так удобнее читать.
3. В некоторых годовых столбцах нужно указывать значение на начало или на конец периода.
В формулу "СуммЕслиМн" добавил значение месяца.
То есть в одном диапазоне искать нужный год, а в другом диапазоне - нужный месяц (декабрь).
4. Отступы Между Блоками: это всегда важно, снова облегчает чтение.

Вот что получилось.