Как тут устроена система сбора и хранения данных
Именно так, а не система аналитики. Потому что изначально весь этот процесс сбора и хранения не был подстроен под аналитику. Так бывает часто, но все равно за аналитику обидно.
Аналитика тут надстраивалась где-то сверху и без всякой системы под ежеминутные нужды.
До меня в ТР работали два аналитика: один, продуктовый, стремительно слился не проработав, кажется и года, и вторая дата аналитик (выдам приз, если придумаете хороший феминитив), которая мало занималась продуктом, в основном ее задачи вертелись вокруг ad-hoc отчётов под нужды отделов биздева и маркетинга. На это место и пришла я.
Биздев так и привык обращаться к аналитику как к sql-обезьяне (как сказал тут Head of analytics). Почти все их запросы могли бы снять грамотно построенные отчеты и дашборды. Парадокс состоит в том, что отчётов и дашбордов тут примерно миллион. Но вопросов меньше не становится.
Под аналитику в авиасэйлс выделена БД Impala, куда стекаются данные бэкэнда (и фронтэнда, но с этим я пока не взаимодействовала). Данные бэкэнда - это куча табличек, которые нужны для работы бэкэнда, а для него чем более денормализированы данные, тем лучше. Отсюда - чтобы выгрузить любые данные, кроме select * from, нужно заджойнить несколько таблиц. Даже если тебе нужно просто получить информацию о компании, а не специфические данные о том, как в течение определенной промо-акции вели себя пользователи ios, подключённые к определённой компании, где сам бох велел джойнить. Например, у меня есть табличка с базовой информацией по компании, есть табличка с ‘id компании’ и ‘id категории компании’ и есть словарик ‘id категории’ - ‘название категории’. То есть, чтобы узнать категорию компании, надо сджойнить три таблички. И так любой другой запрос. Это удобно бэкэнду, для его работы, и бесит аналитиков. Плюс, название одного и того же по сути столбца в разных таблицах может быть разным, табличек много, разбираться долго и больно. Плюс, часть инфы в Импалу иногда просто не доходит. Потому что что-то сломалось на этапе CDC. Потому что CDC специфический процесс, под капотом у него что-то нестабильное, лучше вообще этим не пользоваться, а лить данные из Кафки, но в Кафку бэкэнд не всё пишет.
Последний кусок текста для меня не до конца понятен, сформулировала я его по памяти, объединив комментарии дата инженера и хэда аналитики авиасэйлс, поэтому в нем могут быть семантические ошибки. Но смысл в том, что все можно сделать хорошо! Это процесс не быстрый, надо как минимум сначала сформулировать запрос с четким ТЗ, какие данные и в какой форме нужны мне и продуктовому аналитику, описать данные и бизнес-логику. Потом дата инженеры сами попросят бэкэндеров писать в Кафку то, что нужно, и перетащат все это в красивые таблички для аналитики в Импалу. Данные перестанут теряться, джойнить станет удобно, аналитики будут довольны.
И это даже круче, чем если бы аналитика тут уже была настроена от и до. Потому что при каких ещё обстоятельствах джуну доверят настраивать систему аналитики? 😈
А поверх всего этого нужно будет настроить систему отчётов, которые смогут покрывать 90% запросов биздева и маркетинга. И заживём!
P.S. это как все устроено в travelpayouts, в авиасэйлс всё иначе, там настроены таблички и с десяток аналитиков

Рассказ о собеседовании в Амазон. Тут много специфики именно Амазона, но есть и универсальные ситуации и рекомендации, советую ознакомиться.

В авиасэйлс глобальные изменения в организации работы сотрудников. Теперь официально любой желающий может работать на удалёнке. А может ходить в офис, если так больше нравится. А может и ходить и не ходить. В любой из трёх офисов - Мск, СПб и Пхукет.
Видимо, скоро отойдут в прошлое закреплённые рабочие места и офис будет таким бесплатным коворкингом. Пока, конечно, те, кто привыкли ходить в офис, так просто свои стулья не обобществят. И вообще сейчас к такому нововведению много вопросов.
Но это говорит о том, что вынужденная удалёнка показала свою эффективность, что компания более чем способна существовать в таком режиме.

Вчерашнее сообщение звучит очень по-корпоратски. Но я не об этом думала. Просто нам с вами скоро жить в новой реальности.
Первое - специалисты в регионах смогут работать в компаниях по всей стране. Это может привести к тому, что зп в регионах подтянется к столичным цифрам. При этом не исключено, что столичные цифры тоже подтянутся к региональным.
Второе - большая мобильность и возможность путешествовать не только тогда, когда отпуск, но в любой момент.
Я уже сейчас вижу, как мои знакомые уезжают на пмж или просто на долгий срок в другие страны, при этом продолжают работать на российском рынке. Это не новое веяние, но такого станет больше.

Вообще современный мир - очень интересная среда. Из-за быстрых изменений в нем привычные системы перестают работать, потому что в их основе лежит долгий цикл. Такой системой, например, является система образования. Она не поспевает за изменениями и не может выпускать специалистов только что появившихся профессий настолько быстро, насколько того требует рынок.Отсюда - всевозможные курсы, которые справляются с задачей гораздо лучше, быстро реагируют на потребности рынка и позволяют осваивать новое за гораздо более короткий срок, чем классические институты образования.
То, что ещё пару десятилетий назад являлось практически неизменяемым - профессия и место жительства - благодаря новой реальности перестают быть тем фундаментом, на котом выстраивается жизнь человека. Фундаментом может стать что-то более личное, а профессия и дом будут надстраиваться над этим.

Когда искала работу, поняла, что одно из основных требований в вакансиях - знание какой-либо BI-системы. Я решила прокачивать Tableau, потому что именно его спрашивали большинство симпатичных мне компаний, и потому что у Табло классный интерфейс, гораздо приятнее, чем у PowerBI, который мне слишком напоминает Excel.
Вот отличный курс по Табло:
https://tableau.pro/m00
Лайфхак - если не хотите последовательно идти шаг за шагом, можно поменять цифру в ссылке и попасть на следующий день марафона.
Очень визуально приятный курс, я даже больше восхищалась оформлением, чем контентом, хотя контент на высоте 😁

Но Табло я так и не успела как следует познать, потому что меня взяли в авиасэйлс, а у них Табло нет.
А нет, потому что дорого. И это боль многих компаний. Skyeng, например, тоже купил всего одну лицензию и все ходят в табло по очереди (во всяком случае так было некоторое время назад).
В общем, это дорогая штука и не все могут ее себе позволить.
Поэтому полезно знать про более бюджетные сервисы. В авиасэйлс, например, как BI используют два системы - redash и superset.
Redash - это сервис, который можно подключить к источнику данных, писать в нем же запросы, делать отчеты и делать дашборды. Это не будет также просто, как в Tableau, где действует принцип drag&drop. В redash для того, чтобы сделать дашборд, надо будет сначала сформулировать запрос на sql, в нем настроить систему фильтров, накрутить на это графики, пивоты или ничего не накручивать, а просто таблицей добавить на дашборд. Довольно удобно, если разобраться, а разобраться не так уж долго. Все ad-hoc'и стараюсь сейчас делать в редаше и превращать их в отчеты, чтобы похожие запросы снимать уже готовыми отчетами. В целом, в редаше хорошо все - всевозможные фильтры, достаточное кол-во графиков и их настроек, сносное оформление.
Superset - это опенсорс-решение, по нему практически нет документации, в нем сложно настраиваются фильтры, но! дашборды выходят красивые. Подходит для отчетов для руководителей, на которые просто смотришь, а не фильтры крутишь туда-сюда и сравниваешь. Сама я пока даже не начала осваивать его, хз зачем он мне, но вещь хорошая и бесплатная. Думаю, со временем появятся хорошие туториалы и будет не так больно разбираться.
Была еще одна BI - mode, но ее не продлили. В ней можно было также подрубаться к базе, но писать не только запросы, но и загружать данные в ноутбуки, там их преобразовывать и с них делать отчеты и дашборды. Но они просили много денег, причем повышали ставки , меняли условия оплаты (за каждого юзера, за объемы), у них за эти деньги была плохая поддержка, которая не фиксила откровенные баги, а тут еще ковид и оптимизация бюджетов. В общем, мода больше нет, но мне и в редаше неплохо. Все равно не Табло.

Ещё успеваем!

Все привет, Роман организовал новый вебинар для #datalearn. Не пропустите:

Друзья, приветствую вас всех!
Вам известно, что мы закончили 3-й модуль и Дима сказал, что в принципе с этими знаниями вы можете искать работу.
Так вот у вас наверняка вопрос, а что а как?

Специально, для вас любимых, мы пригласили эксперта Анастасию Дробышеву - консультант по рынку труда и карьерному развитию.

Да-да родные, можете отблагодарить лайками и подписками :slightly_smiling_face:

Если по делу, то движуха 27.10.2020 в 20:00 по МСК
Тема вебинара: «Поиск работы для аналитических специальностей»
1. Стратегии поиска
2. Инструменты и каналы поиска. Россия VS международный рынок труда
3. Резюме, профиль LinkedIn и GitHub
4. Отклики и сопроводительные письма
5. Интервью, обсуждение оффера
6. Что там у FAANGов?
7. Эмоциональный интеллект: кому он нужен?!?

О спикере:
Анастасия Дробышева – консультант по рынку труда и карьерному развитию, за 10 лет провела более 2000 консультаций в рамках своего проекта Job2Joy. Специализируется на отраслях IT/ digital, internet & e-commerce. Международно сертифицированный резюме райтер (Certified Professional Résumé Writer, CPRW). В данный момент является приглашенным консультантом в американской компании RiseSmart, лидере корпоративного карьерного консалтинга и аутплейсмента персонала, резиденте Кремниевой Долины.

Как всегда мои рекомендации будут: заварить чаек, включить наш ютубчик и смотреть прямой эфир, а ну и конечно подписывайтесь и ставьте колокольчик.

Ссылка вот:
https://youtu.be/hp7i3TuJCyo

Выпросила для себя регистрацию на Матемаркетинг 2020 у компании.
Два предыдущих года выложили в открытый доступ - это ура, там есть много интересного и полезного
Для доступа нужно зарегистрироваться.

https://news.1rj.ru/str/internetanalytics/3349

50 для стажировки неплохо, даже учитывая gross

Вас внезапно 162 человека (из них примерно пять - мои друзья не имеющие к аналитике никакого отношения)
И мне бы хотелось примерно понять аудиторию. Будет серия опросов (вообще, планирую только два, но это же уже серия?), которые должны мне с этим помочь.

Я без малого 2 месяца работаю в Travelpayouts - это партнерская сетка авиасэйлс. Попытаюсь быстро объяснить, что это.
Меня всегда интересовало - на что живут вандруки? Если кто не знает - это сервис (вк группа, инста, телеграмм, сайт), который публикует варианты дешевых путешествий - билеты, отели, иногда туры. Благодаря своей работе я это узнала - комиссия в партнёрских программах. Когда вы переходите по ссылке, опубликованной на сайте вандрук, вам присваивается некая метка, и если вы что-то купите, то они получат копеечку за это действие (т.н. CPA или cost per action). Собственно, партнёрский маркетинг - это когда компания продвигает свои услуги через партнеров, зашивая в их инструменты (ссылки, баннеры, виджеты, вайтлэйблы) свои метки, чтобы потом поделиться прибылью.
Так вот Travelpayouts - это не просто партнерская программа авиасэйлс, а сетка, где можно стать партнером не только авиасэйлс, но и многих других трэвел-ресурсов (тэзтур, хотел-дот-ком, ренталкарс, сравни и тд)
Так примерно работают все программы с кэшбэком: купи - получишь часть уплаченного обратно. Например, Трэвел-кэшбэк Мегафона - это Travelpayouts (интересно, об этом можно говорить?)
Более того, вы сами можете зарегистрироваться на TP и получать кэшбэк со своих покупок. Комиссия там скромная, как и кэшбэк вашего банка (😞)

Пользуясь случаем (как говорится, если хотите поддержать мой канал) публикую свои партнёрские ссылки:
(вдруг кто-то как раз думал о путешествии в эти неспокойные времена)

Travelpayout (если вы сами хотите зарегистрироваться и получать кэшбек, то инчтрукция такая: открывайте нужные сервисы через партнерскую ссылку программы, которая доступна в Инструментах)
Aviasales
Aviasales отели
Tutu.ru - жд билеты, электрички, автобусы
Flixbus - автобусы, в т.ч. по миру
Суточно.ру - краткосрочная аренда жилья

Туры на любой вкус (в Турции еще тепло и все включено, а в Занзибаре вообще жара):
TEZ tour
Мультитур
Level.Travel

Внимание – санатории! То, что надо, после того как отучились на аналитиков!

Страхование путешественников Cherehapa.ru
Экскурсии от местных жителей Tripster

Аренда авто:
myrentacar.com
discovercars.com
economybookings.com

Сейчас не актуально, но очень советую на будущее drimsim
с ними не нужно покупать местные симки в путешествиях, интернет за очень приемлемые деньги, возможность звонить заграницей. Сама пользуюсь уже несколько лет. Даже в путешествии на Белое море пригодилось – когда не ловил мой билайн, а дримсим подключалась к любой доступной сети

И, кажется, что-то полезное:
Sravni.ru - страховки, в т.ч. авто

Не столько ради профита, но ради науки - смотреть свою стату потом очень полезно, чтобы понимать, что вообще означают данные в БД.

Даже если вы никуда не собираетесь, но у вас есть пять минут времени, вы можете пощелкать по ссылкам, м.б. даже что-то поискать, это тоже потом отобразится у меня в статистике.

Может кто знает и поделится информацией со мной?
Мне нужен инструмент типа Гугл формы, но чтобы собирал результаты иначе.
Задача такая - отправить эту форму людям из разных отделов, люди заполняют пару полей (отвечают на пару вопросов) в свободной форме, при этом отмечая из какого они отдела. Потом эта форма автоматом генерирует отчёт - отдел и весь список ответов без обработки одним полем по одному вопросы, и то же самое по второму вопросу, потом следующий отдел и все ответы.
В гугл форме что-то не нашла нужного.

Доброго пятничного вечера, аналитики!
Сегодняшний вечер я потратила в попытках узнать, как же можно помочь нашим маркетологам понять, насколько эффективна их деятельность. Да, они до сих пор этого не знают. И данных для этого нет.
Окей, есть, но они не связаны.
В общем, обычная проблема всех маркетологов - как привязать затраты на маркетинг к прибыли компании.
Пока задача базовая - идентифицировать юзера и простроить нормальную воронку конверсий из сессии в дальнейшие шаги с разбивкой по источникам трафика.
А, легко! - скажете вы - нас же этому как раз учили. Да, и юнит-экономику мы умеем. Всё так.
Но на практике у меня данные по активности и бабкам с пользователя в одном месте, данные по источникам и сессиям в другом. И как их поженить - мне только предстоит узнать.

Тем временем 61% активной аудитории этого канала желает знать, как джуну из sql-обезьяны переродиться в исследователя и незаменимого помощника бизнесу.
И у меня есть совет, с чего начать - с правильных вопросов. А скайинг поделился своими знаниями на этот счет в своей вики - очень советую. В запаре и ежедневной рутине часто на такое не хватает ни сил ни времени. Начинать стоит с малого. Если в вашей компании нет подобной культуры постановки задач, то вас могут не воспринять всерьез, а в худшем случае - пошлют. Поэтому начинать можно с простых вопросов.

Хорошая вакансия!

#вакансия #product #analyst #аналитик
Всем привет!

Я лид команды аналитиков в Тинькофф.
Ищу себе в команду (и не только себе) продуктовых аналитиков. Сервисов много, интересных задач еще больше 😊 Сейчас открыты вакансии по направлениям: Тинькофф.Тревел, сервисы кэшбэков и лайфстайла, мобильный банк, Тинькофф.Мобайл, Тинькофф.Инвестиции и многие другие 👍

👶 Уровень: джун+/миддл

💻📈📊 Чем предстоит заниматься (Зависит от направления. Но самое главное - "помогать бизнесу принимать решения на основе данных"):
- взаимодействовать с продуктовыми командами и помогать в выявлении точек роста
- построение системы метрик, нахождение взаимосвязей, построение дашбордов
- анализ поведения и сегментация пользователей, прогнозирование оттока, LTV и прочего
- генерация гипотез, проведение АВ тестов

💪 Что ждем от кандидата:
- Опыт решения аналитических задач (на реальных проектах, либо окончил крутые курсы и есть портфолио)
- Умение делать выводы из данных и переводить бизнес-цели в метрики
- SQL, Python, матстат, разведочный анализ данных - это все важно, но не обязательно на 100% и везде

💛 Мы предлагаем:
- После окончания изоляции - работу в офисе у метро "Водный стадион" с подземной парковкой и фитнес-залом (но сейчас мы все работаем удаленно)
- ДМС со стоматологией и страховку от несчастных случаев

Жду ваши резюме и вопросы: @Yarygin_Alexey