Как Data Governance помог студентам педагогического вуза опередить конкурентов?

В воскресенье завершился Московский студенческий DATA-хакатон. 15 команд из различных вузов соревновались в решении бизнес-кейсов. Количество инструментов, доступных студентам, не ограничивалось. Применяй все, что хочешь! Были замечены Postgres, ML, MADlib, R, Bert, привычные Excel и Datalens, букет BI и другое.

Команда Analytics Aficionados из МГПУ исходно находилась в невыигрышном положении. Жребий вынес им задачу по оптимизации работы службы технической поддержки (СТП). Ребята признались, что до хакатона они даже не слышали о работе таких служб и не представляли, какие факторы могут влиять на эффективность работы СТП.

Каждый студент в их команде взял на себя определенную роль:

Дата-инженер
Дата-стюард
Дата-сайентсист
BI-аналитик

Используя предоставленные сырые данные, хранимые в разных форматах, дата-инженер переложил их в Postgres. Дата-стюард, используя Arenadata Catalog, отпрофилировал и описал таблицы. Данные получают контекст и становятся информацией, понятной BI аналитику и сайентсисту. Они визуализируют информацию и ищут связи. 💡

Стюард продолжил описывать оставшиеся таблицы. Ландшафт данных становится более обширным, что дает еще больше идей аналитикам.

Команда разработала 5 (пять!) гипотез, обработав все доступные источники информации за предоставленное время. На презентации кейса студенты защитили подход, показав, что их методика прозрачна, достоверна и воспроизводима. 👩‍💻

Соперники увлеклись оверинжинирингом используя Python и даже AI. В итоге они отработали пару красивых гипотез, но не успели представить визуализацию. В отсутствии описания структуры данных экспертам было сложно убедиться в достоверности исследования. Еще две команды застряли на отладке питоновского кода и сошли с дистанции.

Analytics Aficionados заслуженно заняли первое место. Они использовали методологию управления данными и командную работу чтобы превзойти сильных конкурентов. 🚀

Поздравляем всех участников и ждем следующий DATA-хакатон!

Красный Синий Зеленый 🟥 🟦 🟩

Новая продвинутая диаграмма Data Lineage появилась в версии ADC 0.6.3. Цветовая маркировка линии преобразования данных наглядно показывает, каким образом данные преобразуются, каким образом меняется их структура и параметры, а также как информационные потоки разделяются и сходятся. Индивидуальный цвет получает каждый из трех способов построения связи:

автоматический
ручной
импортированный

Цветовая палитра удобно настраивается, на справочной вкладке отображается дата создания связи и ссылка на её создателя, а с создателями Arenadata Catalog можно встретиться на конференции ArenaDay которая пройдет 23 апреля.

👩‍🏫 Мы высаживаемся на конференцию большим составом. Будем рады встретиться, обсудить ваши задачи и поделиться новостями о планах развития ADC.
Регистрируйтесь на очное участие или подключайтесь онлайн.
🔜 Анкета для регистрации по ссылке

Внимание вебинар!

✅ Присоединяйтесь к вебинару, посвященному обзору новых функциональных возможностей Arenadata Catalog

✅ На вебинаре проведем обзор системы и уделим внимание новым функциональным возможностям появившимся в свежих версиях ADC: генерация ER диаграмм, расширение визуализации data lineage, связь объектов глоссария с физической структурой данных.

Вебинар состоится 22 мая при поддержке компании DBI
🔜Регистрируйтесь по ссылке и готовьте вопросы: https://pruffme.com/landing/u2789671/tmp1713257409

✅ Расширяем экосистему коннекторов к источникам метаданных

📊 Эффективное управление метаданными означает возможность построения графа происхождения данных от момента их появления до момента финального использования. Часто такой конечной точкой является дашборд BI-системы.

🔗 Компания DataCatalog разработала коннектор для сканирования метаданных BI платформы Visiology. Настроив оптимальное расписание, можно проводить автоматизированное сканирование системы и получать полную информацию о перечне объектов Visiology, включая дашборды, чарты, типы чартов и их описания. Дата-инженеры наглядно увидят пути трансформации данных, могут выявлять аномалии и отслеживать происходящие изменения. Бизнес-пользователи получают возможность связывать объекты бизнес-глоссария ADC с соответствующими чартами Visiology.

👉 Коннектор включен в дистрибутив ADC начиная с версии v0.6.2.2

Делимся записями выступлений спикеров прошедшего в конце июня митапа Вино и Данные.👇

🔴Алиса Школьникова (ДАР, КОРУС Консалтинг) рассказала, что общего у качественного вина и качественных данных, и как это влияет на результат

🔴Артем Нестерчук (Arenadata Catalog) рассказал, на какой же полке (винного шкафа) хранить тесты качества и какой экономический эффект дает внедрение каталога данных

🔴 Ярослав Золотухин (Luxms) показал, как Luxms BI может помочь выбрать вино. Отличный лайфхак для тех, кто выбирает вино по этикетке - теперь будет шанс найти не только красивое, но и вкусное:)

🔴Владимир Митюшкин (Simple) поделился секретами виноделия, интересными фактами о винной культуре и географии виноградников

Обязательно посмотрите, лучше под бокал вина минералки🍷☺️

🍁Осень — начало бизнес-сезона и традиционное время для проведения конференций и выставок. Не стал исключением и 2024 год.
Делимся планам на ближайший месяц.

📅 17 сентября DataCatalog участвует в первой партнерской конференции Luxms. В докладе расскажем о ценности настроенных процессов Data Governance для эффективного управления бизнес-аналитикой. Конференция пройдет в двух форматах: очное участие и дистанционный формат. Будем рады увидеться лично, регистрация по ссылке

🗓 26 сентября выступаем на большой конференции по управлению данными, проводимой издательским домом "Открытые Системы". За последние годы конференция стала экспертной площадкой для обмена мнениями и отчетами о достигнутых результатах участников российской индустрии Data Governance. На выступлении дадим отчет о двухлетнем опыте работы нашей компании и поделимся результатами выполненных внедрений Arenadata Catalog. Ссылка на регистрацию

🗓 03 октября планируем участвовать в конференции IT Space. Это одно из крупнейших мероприятий, затрагивающее всё многообразие российских IT-продуктов и технологий. Естественно, такое мероприятие не могло обойти вниманием тему управления данными. Вместе с коллегами из Arenadata и Visiology будем работать на стенде и демонстрировать интеграцию продуктов управления данными и аналитики. Программа и регистрация на конференцию по ссылке

Увидимся ⚡

⚡️ Представляем проекты Arenadata - номинанты премии Data Award 2025

Бренд всероссийских государственных лотерей «Национальная лотерея» создает современное хранилище данных и внедряет практики Data Governance используя Arenadata DB и Arenadata Catalog. Основной целью проекта стало объединение разрозненных данных в единую платформу и обеспечение высокой производительности аналитических процессов.

💡Ознакомиться с ходом проекта и достигнутыми результатами можно в публикации Евгения Жилова, руководителя департамента аналитики и управления данными «Национальной лотереи»

🛡 Вопрос доверия к данным начинается с уверенности в надежности инструментов, которые этими данными управляют

Первый отечественный продукт в категории каталогов данных, систем управления качеством данных и корпоративных глоссариев успешно завершил сертификацию ФСТЭК.
Arenadata Catalog (ADC) был включен в Государственный реестр сертифицированных средств защиты информации и получил сертификат соответствия требованиям безопасности информации по 4 уровню доверия ФСТЭК России (сертификат № 4939) 28 мая 2025 года.
⚡️⚡️⚡️⚡️
Информация по ссылке