Внедрили аналитику на старте и увеличили прибыль до 1,2M$
Недавно в комментариях попросили «что-нибудь посложнее». Окей, есть и посложнее.

💬 Как с нуля построить аналитику для быстро растущего стартапа?
💬 Как на практике выглядит «data-driven подход», и как данные помогают принимать решения в бизнесе?
💬 Какие знакомые любому предпринимателю проблемы решает аналитика?

Разбираемся на реальном примере кейса Valiotti Analytics — кастомной системе аналитики, которую сделали для EdTeh-стартапа Refocus. Мы присоединились к проекту прямо на старте и построили инфраструктуру по работе с данными, которая росла вместе с компанией. От двух отчетов с данными из AmoCRM она выросла в полноценную систему из 40+ дашбордов по продажам, маркетингу и продуктовому направлению.

🔜 Что мы такого сделали с данными, что компания выросла в 25 раз — в новой статье фаундера Valiotti Analytics на vc.ru. Если интересно заглянуть прямо внутрь системы аналитики и узнать, как и что в ней работает, это отличный шанс!

Postgres против всех
Чем сложнее проект, тем длиннее и запутаннее стек — это не всегда удобно, но неизбежно.

Или нет.

Часто стек растет, потому что под каждую задачу или проблему стараются подобрать наиболее подходящий инструмент. Но как выбрать этот «подходящий инструмент»? На что смотреть — на цену, скорость работы, простоту использования?

Или просто выбрать PostgreSQL? 👀

Нашли для вас короткую статью, почему вместо раздувания списка инструментов иногда можно просто выбрать проверенный временем, универсальный и понятный PostgreSQL.

Хотя по сути дело даже не в конкретной БД — на месте PostgreSQL может оказаться любой другой вариант. Дело в самом подходе — не усложнять себе жизнь, внедряя множество инструментов под разные задачи. И вместо этого стремиться к тому, чтобы ИТ-инфраструктура была понятной и не перегруженной. Так проще с ней работать и поддерживать работоспособность.

🔜 А что вы думаете — как найти баланс между перегруженностью и простотой, которая уже не тянет стоящие перед командой проекта задачи?

Box plots: датавиз не для всех
Смысл визуализации данных — в том, чтобы представить сложную информацию наглядно и понятно. Так, чтобы человек мог быстро в ней разобраться и извлечь что-то полезное для себя.

Но иногда что-то идет не так.

Вот давайте честно, вам нравятся box plots — они же «ящики с усами» или диаграммы размаха?

💬 Если не знаете, что это, то вот объяснение на русском, а вот — видео на английском.

В теории это прекрасный способ визуализации, в который очень плотно упакован большой объем информации:
🔵 максимальное, минимальное и медианное значения;
🔵 квартили и асимметрия данных — если в каком-то квартиле сильный разброс значений, это будет видно по длине «уса» или «ящика»;
🔵 сравнение сразу нескольких сущностей по всем этим показателям.

Проблема в том, что эта информация изображена контринтуитивно. Про это есть длинный материал, но если кратко, то вот главные тезисы.

🔵 Чтобы разобраться в box plots, надо, как минимум, знать, что такое квартиль. Из-за этого возникают сложности с восприятием. Например, если один «ус» очень длинный, подсознательно воспринимается, будто в нем больше всего значений, но на самом деле — в нем просто большая разница между максимумом и минимумом. Число значений во всех частях графика одинаковое.
🔵 Дизайн заставляет думать, что крупная часть в центре, сам «ящик» — самая значимая, а «усы» как бы приложение. Хотя с чего бы?
🔵 К тому же, кажется, будто на графике три элемента: «ящик» и два «уса». На самом деле их 4: два «ящика» разделены медианой.

С одной стороны, все эти недопонимания — проблема зрителя. Box plots существуют давно, инструкций, как их читать — достаточно. Кто захочет, тот вникнет. Но всю ту же информацию, которую содержат «ящики» можно показать более наглядно и доступно. А не в этом ли цель всего датавиза?

По ссылке выше есть примеры — распределение значений показывают «тепловыми картами» и точками. Чем ярче участок на графике или чем плотнее на нем расположены точки, тем больше там значений.

А вы пользуетесь ли box plots в работе? Вам легко в них разбираться?

Data Heroes: интервью с Марией Бородецкой
«Синхронизация» — онлайн-школа, где рассказывают про культуру, искусство, психологию и софт-скиллы. Соосновательница Мария Бородецкая говорит, что это уже не совсем эдтех, а скорее проект по саморазвитию, и его главный конкурент — не другие школы, а Netflix.

Про что еще поговорили?
🔵 Как проект прошел путь от лекций «для себя и для друзей» до успешного стартапа и пережил ковид.
🔵 Почему оффлайн — это лакшери, а за онлайном и искусственным интеллектом будущее.
🔵 Какую роль играет культурный код при выходе на международные рынки.
🔵 Почему маркетинг — это здорово, но учиться лучше на философа, математика или искусствоведа.
🔵 Какие метрики бизнеса самые важные для предпринимателя в онлайн-образовании.
🔵 И причем здесь Юрий Дудь*?..

🔜 Где посмотреть: YouTube

Где послушать: Apple Podcasts, Яндекс Музыка, Spotify

#dataheroes
*Юрий Дудь признан в России иноагентом.

В российских вузах начнут готовить специалистов по ИИ
Роль ИИ постоянно растет, и он постепенно проникает во все сферы деятельности — от науки до повседневной жизни. Так что неудивительно, что в разных странах уже появляются целые программы в вузах, посвященные искусственному интеллекту.  

И в России тоже. 

🔜 В новом учебном году Яндекс и Сбер запускают вместе с НИУ ВШЭ, ИТМО, МФТИ и Университетом Иннополис программу AI360 или ИИ360. Там будут готовить специалистов по ИИ, которые будут двигать вперед науку и технологии. А если конкретнее — ML-исследователей и AI-архитекторов.

Что ждет студентов?  
🔵 Фундаментальная подготовка с углубленным изучением математики.
🔵 Доступ к технологиям от Яндекса и Сбера и изучение лучших мировых практик в сфере ИИ.
🔵 Научная деятельность со второго курса. Студенты смогут присоединиться к исследованиям и посетить международные конференции.

Легко не будет, но чтобы дополнительно поддержать студентов во время учебы, им обещают повышенную стипендию на протяжении всех 4 лет обучения. Подать документы можно до 25 июля.

ИИ-поисковик по мемам и не только
У предпринимателя Харпера Рида было 12 000 картинок с мемами, желание разобраться, что такое «векторные представления», и некоторое количество свободного времени.  Все это привело к тому, что он создал простое приложение на основе мультимодальных моделей CLIP и siglip, которое умеет искать по картинкам.

Оно принимает как текстовые запросы, так и изображения. В первом случае оно подберет картинки, соответствующие запросу, во втором — найдет похожие в своей базе.

🔜 Работает с любыми изображениями. То есть его можно использовать не только поиска мемов для важных переговоров в интернете, но и, например, чтобы искать по фотографиям в галерее. Вдруг вам нужно оперативно собрать в кучу все фотки любимого кота.

🔜 Проверьте сами — приложение бесплатное и лежит на GitHub.

🔜 Заодно рекомендуем почитать пост про разработку. Он доказывает, что в любой теме можно разобраться — было бы желание. Харпер признался, что никогда не делал ничего похожего и вообще до сих пор плохо понимает, что такое «вектор». Но ему захотелось разработать приложение, и он это сделал вполне успешно.

И главное — показал, как это делал по этапам. Так что если тоже хотите попробовать сделать что-то подобное, вот отличный повод погрузиться в тему.

Карьера в Data — новый проект LEFT JOIN
Поиск работы — занятие утомительное. Надо обновить резюме, перерыть гору вакансий, потратить время на сопроводительные, тестовые и собеседования... Не то, чем хочется заниматься без необходимости.

С обратной стороны тоже не все гладко: из огромного числа откликов предстоит отобрать подходящие, провести серию собеседований и заинтересовать кандидата.

💙 Мы LEFT JOIN решили, что в наших силах сделать этот процесс приятнее для всех участников — так уж получилось, что у нас большая аудитория, где есть и работодатели, и потенциальные сотрудники. Так что почему бы не создать для них специальный канал, где они смогут найти друг друга.

Канал так и назвали — Карьера в Data. Что будем постить?
🔵 Вакансии для аналитиков, дата-инженеров, дата-саентистов, продакт-менеджеров разных уровней — от джунов до тим лидов.
🔵 Советы от HR, как составить резюме, написать сопроводительное и не запороть собеседование.
🔵 Инсайты про рынок труда, количество вакансий и динамику зарплат.
🔵 Разборы тестовых заданий и советы, как построить карьеру в данных, от тех, кто уже это сделал.

Даже если не ищете работу прямо сейчас, будет много полезной информации, чтобы оставаться в курсе последних тенденций в нашей сфере. Убедитесь сами!

@leftjoin_career 🔥

Microsoft выложила GraphRAG на GitHub
GraphRAG — это технология от Microsoft, которая строит графы с помощью LLM на основе данных, с которыми раньше не работала. То есть тех, которые не использовались для обучения модели.

Она обрабатывает весь набор данных, выявляет упоминающиеся в нем сущности и находит связи между ними. А затем создает сложный граф, где каждый кружок — это отдельная сущность. Размер зависит от количества связей с кружками, а одинаковыми цветами раскрашиваются близкие по смыслу объекты.

🔜 Таким образом можно обработать большие массивы текстовых данных — например, архивы переписок, документы или исследования. А затем искать среди них нужную информацию.

Особенность технологи в том, что когда она ищет ответ на запрос пользователя, она ищет по всему датасету с учетом контекста. Это помогает ей отвечать на вопросы, где требуется полное понимание смысла материала, чтобы объединить разрозненные куски информации или ответить на общие вопросы в духе «Опиши 5 главных тем этого документа».

🔜 И вот недавно эта технология стала доступна общественности: ее выложили на GitHub и даже сопроводили FAQ’ом и инструкцией по написанию промптов.

Как построить сквозную аналитику в компании?
Отвечает… нет, не Александр Друзь.

🔜 25 июля в 19:00 по Москве Николай Валиотти расскажет про создание системы аналитики на бесплатном вебинаре. Это будет эфир про данные, но не для аналитиков, а для предпринимателей, руководителей отделов, маркетологов, продакт-менеджеров. Так что будет много практики и решения проблем бизнеса и мало — технических тонкостей и терминов.

💙 Николай не просто создал этот канал, но и основал успешный дата-консалтинг Valiotti Analytics. С 2019 года в портфолио команды собралось уже больше 40 успешных кейсов, 2 из которых разберут на вебинаре.

На их примере слушатели узнают:
🔵Как понять, что уже пора строить серьезную аналитику, и с чего начать это делать?
🔵Из чего состоит система аналитики, и зачем нужен каждый ее компонент?
🔵 Какие топ-5 отчетов нужны каждому бизнесу, и какие рабочие инсайты можно извлекать из данных?

🔜 Если вы захотите погрузиться в эту тему глубже, на вебинаре откроется запись на онлайн-экскурсии. Николай проведет ее лично и покажет, как строится работа над системой аналитики на примерах готовых проектов. Количество мест ограничено.

Больше информации о вебинаре и новости постим на канале @system_of_analytics. Там же выложим ссылку для подключения в день эфира, так что подпишитесь, чтобы не пропустить.

26 must-read статей про AI
Хотите начать разбираться в теме искусственного интеллекта, как профессионал?

Тогда у нас для вас есть прекрасная подборка статей на эту тему. То есть, не совсем у нас.

🔜 Авторство подборки приписывают Илье Суцкеверу (сооснователю OpenAI, из которой он ушел в прошлом месяце). Он составил ее для Джона Кармака — того самого, который в 90-х подарил нам Doom и Quake, а потом ушел развивать мета-вселенные и искусственный интеллект.

Кармак попросил Суцкевера посоветовать, что почитать на тему ИИ. Суцкевер выдал ему этот список и сказал:

«Если ты действительно выучишь это все, то будешь знать 90% того, что важно сегодня».

🔜 Правда, в том документе было аж 40 научных статей, а у нас всего 26. Но внимания список все равно заслуживает, несмотря на то что некоторым материалам из него уже много лет. Это основы, на которых стоят почти все современные инновации в теме ИИ.

А у вас есть must-read материалы про AI и ML? Делитесь в комментариях!

За что мы любим маркетинг
Так уж получилось, что где маркетинг — там и аналитика, потому что как еще посчитать, окупилась ли реклама?

А где аналитика, там где-то рядом и маркетинг как один из главных заказчиков.

🔜 Поэтому хоть мы тут и про данные, но маркетологов любим и за новостями из сферы рекламы следим. Например, на канале «Двухметровый маркетинг» про небанальные способы продвижения в разных сферах. Про наши любимые темы про ИИ и технологии посты тоже бывают.

Это, кстати, не просто канал. @marketing2meters — это человек и пароход еще и digital-агентство, которое помогает брендам разрабатывать приложения, продвигаться и находить клиентов — в том числе, в Telegram. Сам канал ведет основатель агентства.

Мы такое любим — когда люди разбираются не только в креативе, но и в цифрах. ❤️

BI-онбординг от Романа Бунина
Датавиз находится на стыке сфер, которые редко соприкасаются: аналитики и дизайна. Из-за этого с ним бывают сложности — дизайнеры не понимают, как работать с данными, а аналитики не разбираются в дизайне.

Найти крутых спецов по датавизу непросто, поэтому мы в Valiotti Analytics решили сами ковать для себя ценные кадры и запустили BI-онбординг. Его разработал специально для VA Рома Бунин @revealthedata.

🔜 Получилось круто — 10+ часов погружения в Tableau, дизайн и работу с заказчиками. Да, это тоже очень важная часть процесса — умение провести интервью и понять запрос.

Что есть в онбординге?
🔵Основы дизайна, как сделать дашборд понятным и удобным для восприятия.
🔵Разные виды графиков и зачем они нужны.
🔵Структурный подход к созданию системы дашбордов.
🔵Огромное количество полезных материалов, книг и видео.
🔵Практические задания — например, проект по переверстке уже существующего дашборда.

🔥 А еще мы сделали отдельный чат в Slack, где Рома будет давать ребятам фидбек.

Онбординг получился объемный, и большая часть команды пока что в процессе прохождения. Но один отзыв мы вам принесли:

Отличный курс, по большей части освежила свои знания и сохранила лайфхаки на будущее. Буду применять на практике. Насчет сложности: он дает и базу, и более сложные вещи.

Для прохождения курса будет достаточно иметь какие-то общие знания в Tableau — как открыть дашборд и как называются элементы интерфейса.

Регина, Analytics Team Lead

Зачем мы это рассказываем?
🔵Во-первых — публично поблагодарить Рому за его работу. Рома, спасибо!
🔵Во-вторых — поделиться опытом решения сразу двух задач: предоставить заказчикам качественный сервис, а своим сотрудникам — возможность прокачать важные скиллы.

Кстати, если вы тоже хотите прокачаться и просто работать в классной компании — у нас сейчас открыто несколько вакансий.

🔜 А вам важно, чтобы работодатель проводил подобные онбординги? Или это не влияет на ваш выбор места работы?

@leftjoin_career

Data Heroes: интервью с Кариной Павловской
Онлайн-школа английского Skyeng вряд ли нуждается в представлении — о ней знают почти все. Кто-то учился, кто-то преподавал, кто-то рекламу видел. Сегодня познакомимся с ней еще ближе, потому что гостьей нового выпуска Data Heroes стала Карина Павловская, Head of Brand & Product Marketing в Skyeng.

О чем будет подкаст?
🔵Какие люди становятся руководителями, и что надо, чтобы построить успешную карьеру?
🔵Как (и зачем) кардинально сменить сферу работы и перейти из фешн в эдтех?
🔵Как работает маркетинг в Skyeng, и как огромная компания, которая уже у всех на слуху, борется с «баннерной слепотой»?

Ну, а где маркетинг, там и аналитика. Узнали, как выстроено взаимодействие маркетинга и дата-команд в компании и на какие метрики смотрят те, кто отвечает за продвижение бренда Skyeng. А еще поговорили про плюсы self-service подхода в аналитике.

👀 Смотрите: YouTube.

Слушайте: Яндекс Музыка, Apple Podcasts, Spotify.

#dataheroes

Перипетии ИИ-разработки
Рост популярности ИИ привел к появлению множества инструментов и фреймворков на его основе под самые разные задачи. Их плюс в том, что они могут сильно ускорить и упростить работу: какое-нибудь ПО или приложение, которое раньше пришлось бы долго и сложно разрабатывать своими руками, они соберут в разы быстрее.

Но не всегда успешнее.

🔜 Любопытный пример — опыт команды octomind, ИИ-сервиса для e2e-тестирования.

В 2023 разработчики внедрили фреймворк LangChain, предназначенный для разработки приложений на основе LLM. И сначала он действительно помог облегчить работу и сконцентрироваться на создании приложения. Но по прошествии времени стало понятно, что у него есть серьезные недостатки.

💬 Ему не хватало гибкости, и в какой-то момент это начало тормозить работу.
💬 Его задача — объединять несколько LLM в единую систему, чтобы пользователь на этой основе создал свое приложение. LangChain с этой задачей справляется, но при этом внутри этой системы пишет такой запутанный код, что легче самим переписать, чем в нем разбираться.

На первых порах плюсы перекрывали минусы. Но чем сложнее становились задачи, тем больше команда приходила к выводу, что их работа станет проще без LangChain и вообще без специальных LLM-фреймворков. Экономия времени на старте не стоит проблем в будущем. К тому же, они не делают ничего, с чем не могли бы более успешно справиться люди.

Конечно, это не значит, что LangChain и подобные ему продукты плохи — просто они не всем подходят.

Но это интересный взгляд на то, как меняется зародившаяся у нас на глазах экосистема ИИ-приложений: от взрывного роста она переходит к более спокойному и вдумчивому развитию.

Как думаете, что ждет нас дальше? Какие еще ИИ-инструменты появятся в скором будущем — а какие наоборот, уйдут в прошлое, когда окончательно пройдет хайп? 👀

«SQL База» для всех кто мечтает стать аналитиком
Новый курс от команды LEFT JOIN уже доступен на Stepik!

«SQL База» — идейное продолжение нашего первого обучающего проекта «Марафон данных». Он тоже объединяет изучение основ SQL со знакомством с самой профессией аналитика. С одной стороны — много теории и практики, задачи, принципы написания запросов, с другой — разъяснение основных терминов и особенностей работы в дата-команде.

Он построен как стажировка в онлайн-магазине True Coffee. То есть предстоит не просто решать задачки из учебника, а помогать коллегами из разных отделов делать выгрузки данных и выполнять разные запросы, максимально похожие на реальные.

🔜 Для кого мы создавали этот курс?
В первую очередь он будет интересен тем, кто хочет построить карьеру в аналитике или только-только начал это делать — студентам, джунам и людям, планирующим сменить профессию.

Что в результате?
🔵Научитесь писать SQL-запросы и разбираться в логике работы разных функций и операторов.
🔵Узнаете основные принципы работы баз данных, понимание, как они устроены и как хранят информацию.
🔵Разберете особенности разных типов данных и главные операции с ними: выборка, группировка, сортировка, соединение таблиц.
🔵Познакомитесь с разными способами визуализации данных и расчета продуктовых метрик: числа уникальных пользователей, конверсии.

Также мы погрузимся в:
🔵Особенности работы аналитика: термины, рабочие процессы, взаимодействие с коллегами из разных отделов.
🔵Применение SQL для решения рабочих задач: анализа динамики продаж, маркетинговых показателей, сегментации клиентов.

Если пока все это выглядит очень уж сложно и непонятно — ничего страшного. «SQL База» знакомит со всеми нужными терминами и понятиями.

Курс платный: 1330 рублей. Для наших подписчиков нам ничего не жалко, поэтому мы предлагаем промокод — LEFTJOIN. Он действует с 30 июля по 4 августа и позволяет купить курс со скидкой 35% за 865 рублей.

🔜 Ссылка на курс «SQL База» с примененным промокодом

Надеемся, что вам понравится курс, и ждем ваших отзывов!

3 инструмента для создания графов
Если GraphRAG от Microsoft кажется слишком сложным и тяжеловесным, вот несколько вариантов попроще.

🔜 prettygraph — приложение на Python, которое умеет генерировать графы на основе запросов пользователя. Даете ему текст, а оно вам — разноцветный граф. Автор просит не ждать от prettygraph ничего сверхъестественного — это маленький экспериментальный проект из 200 строчек кода, который он написал для себя. Но посмотреть, как он разбирает тексты, все равно интересно.

🔜 Для тех, кому надо что-то посерьезнее, то у него есть mindgraph— инструмент для создания и расширения графов с помощью ИИ. Это Proof of Concept, который создатель предлагает другим разработчикам использовать как основу для своих инструментов.

Оба бесплатны и выложены на GitHub.

🔜 Если нет настроения самостоятельно возиться с установкой и хочется просто посмотреть, как ИИ рисует красивые схемы из текстов, можно воспользоваться веб-версией instagraph. Он даже с русским языком справляется и может нарисовать, например, граф «Войны и мира».