Arenadata Catalog News – Telegram
Arenadata Catalog News
273 subscribers
32 photos
40 links
Новостной канал компании DataCatalog. Рассказываем о передовых инструментах по управлению данными и контролю их качества
Сайт: https://arenadc.io
Download Telegram
Сквозное управление данными в Arenadata Catalog

Для получения качественной аналитики и достоверной отчетности необходимо тщательно контролировать этапы преобразования данных. Практическую реализацию этого процесса продемонстрируем на примере интеграции платформы аналитики Luxms BI и каталога данных, которую мы выполнили на демо-стенде Arenadata Catalog:

🔍 Поиск показателей, терминов, аналитических отчетов по всем объектам каталога данных,

🔗 Автоматическое построение графа связей данных от исходных таблиц до аналитического отчета, позволяющее наглядно отследить Data lineage,

📁 Профилирование структуры источников данных по расписанию либо вручную,

Контроль качества исходных таблиц как с помощью стандартных, так и настраиваемых проверок,

👩‍💻Определение владельцев ответственных за документирование источников и витрин данных,

🖱 Но самое интересное, обнаружив необходимый показатель можно одним кликом мыши перейти в панель BI-платформы отображающей его визуализацию.

В результате применения каталога данных минимизируются ошибки, ускоряется подготовка новой аналитики, а её достоверность подтверждается проверками качества. Этот и другой функционал сквозного управления данными можно опробовать на демо-стенде Arenadata Catalog.

Чтобы получить доступ к демостенду необходимо заполнить форму обратной связи на сайте ДатаКаталог
👌2👍1
🤝 🤝 🤝
Новости партнёрской сети

Развитие Arenadata Catalog невозможно представить без активного участия бизнес-партнёров по внедрению, консалтингу и продажам. Первой компанией, которая поверила в перспективы сотрудничества, стала компания IBS. Это произошло в январе этого года.

Всего за 11 месяцев своего существования партнёрская сеть ДатаКаталог расширилась за пределы Российской Федерации.

🏆 Приветствуем компанию Compit из Республики Беларусь которая стала двадцатым авторизованным партнёром и первым партнёром в странах СНГ.

Благодаря заключенному партнёрству клиентам из Беларуси стали доступны продукты и сервисы Arenadata Catalog по управлению данными и внедрению процессов Data Governance.

Cтраничкa партнёров
ДатаКаталог
Please open Telegram to view this post
VIEW IN TELEGRAM
4👍1🔥1
Как ускорить работу с данными в любой отрасли при помощи Arenadata Catalog
 
Зарезервируйте 1 час в ближайшую среду — 06 декабря!
 
Приглашаем вас принять участие в совместном вебинаре специалистов компании Норбит и экспертов ДатаКаталог

Вы узнаете, как использование каталога данных позволяет сократить время на поиск и анализ данных

Вы увидите применение системы в реальных кейсах, стоящих перед бизнес-аналитиками и специалистами по работе с данными

 
🖊 начинаем в 11:00, 06.12.2023
👉 Регистрируйтесь по
ссылке
👍2🔥1👌1
📣 Привет всем!

У нас есть потрясающие новости!
🕒 Запись сегодняшнего вебинара уже доступна на youtube канале. Не упустите возможность посмотреть ее в любое время, удобное для вас. 📺
Отдельно благодарим тех, кто подключался онлайн и задавал сложные и интересные вопросы.
👉 Ссылка на запись вебинара

Всем, кто хочет узнать больше и обсудить практические задачи по внедрению каталога данных, мы приглашаем писать напрямую докладчикам-специалистам компании Норбит! 💬📩
🔥4👌2
Исправляемся! 🙌

В суете декабря мы забыли сообщить о последних обновлениях Arenadata Catalog.
Спешим написать о новинках релиза 0.5.2.

Представлен новый коннектор, позволяющий интегрировать Arenadata Catalog с Power BI Report Server.
Сделали первые шаги в self-service кастомизации. Сейчас вы можете легко заменить логотип. В будущих релизах расширим возможности гибкой настройки отображения элементов интерфейса.
Значительно упростили выполнение регулярных задач в глоссарии.
Повысили скорость загрузки метаданных в несколько раз. 🚀

Познакомиться с новыми функциями можно на нашем демостенде.
👉 Подробное описание релиза доступно по
ссылке.
👍3👏2
Дорогие друзья! 🌟

В канун новогоднего праздника команда Arenadata Catalog желает Вам счастья, мира и благополучия. Мы благодарим Вас за доверие и терпение, с вашей помощью, участием и поддержкой мы достигли многого в 2023 году. Пусть следующий год будет наполнен спокойствием, новыми достижениями, радостью и яркими эмоциями!

С наступающим Новым годом! 🎄
Скоро увидимся!
Please open Telegram to view this post
VIEW IN TELEGRAM
4👏2👍1
👁️‍🗨️Новая версия Arenadata Catalog: удобство, производительность и больше контроля

Первая рабочая неделя 2024 года завершилась релизом новой версии Arenadata Catalog.
Версия 0.6 содержит важные улучшения повышающие продуктивность работы пользователей и администраторов системы:

Поддержка импорта и экспорта данных бизнес-глоссария в формате XLSX позволяет многократно ускорить миграцию глоссария с устаревших систем и облегчить массовое редактирование объектов используя привычный инструмент
Продолжаем начатую в версии 0.5.2 кастомизацию интерфейса. Цветовое оформление можно адаптировать под принятую в вашей организации палитру, а если эксперименты не удались, то вернуться к заводским настройкам можно нажатием одной клавиши
Автоклассификация персональных данных соответствует практике 152 ФЗ
Автоматическое построение ER-диаграмм. ER-диаграмма отображает связи между сущностями и наглядно представляет логическую структуру базы данных. Этот функционал облегчит работу администраторам СУБД и дата-инженерам
Преднастроенные дашборды метрик производительности упрощают администрирование Arenadata Catalog

👉 На следующей неделе развернем новую версию на демостенде, а пока можно познакомиться с полным описанием релиза
👍6👏1
Сводка последних событий ДатаКаталог

Облачный демостенд Arenadata Catalog бьет рекорды. В один из январских дней на нем одновременно работало 25 пользователей - это стало для нас приятным сюрпризом. Изначально задуманный как песочница для одного из наших клиентов, проект быстро стал ценным инструментом для тестирования и апробации. Мы продолжаем активно развивать и улучшать демостенд, и недавно успешно интегрировали его с BI платформой Superset. Теперь пользователи могут визуально отслеживать связи данных от источника до дашборда, а также привязывать ключевые термины из бизнес-глоссария к диаграммам в Superset. 📊

Новый минорный релиз 0.6.1 вышедший на прошлой неделе содержит долгожданный функционал импорта S2T-файлов для построения потоков происхождения данных, а также ряд адресных улучшений.
👉 Подробное описание релиза доступно по ссылке

На предстоящей конференции "Качество данных 2024» команда ДатаКаталог представит новые возможности модуля DQ на докладе «Библиотека качества данных. Где хранить тесты?». Смотрите выступление и приходите на наш стенд за подробностями. Уже скоро: 14.02.2024. 🗓
👏5🔥2
Доклад Ивана Новоселова и Артема Нестерчука на конференции "Качество Данных 2024" раскрывает стратегию развития модуля контроля качества данных на платформе Arenadata Catalog.

Проверки качества данных обычно проводятся над физическими объектами, такими как таблицы в базе данных. Несмотря на важность технических проверок, организациям необходим контроль качества комплексных бизнес-объектов, чья логическая структура состоит из множества таблиц, преобразований и связей с дочерними и родительскими объектами.

В Arenadata Catalog вводится понятие "Алгоритм проверки качества данных" — логическая сущность, описывающая смысл проверки, логику ее выполнения, ответственных сотрудников и другие параметры, изложенные простым для понимания языком.
С его помощью можно контролировать качество сложных бизнес-объектов, таких как Цена продажи, Своевременность доставки, Стоимость найма персонала - или любого ключевого показателя, критически важного для организации.

Алгоритмы описываются в бизнес-глоссарии, а результат проверки представлен на карточке объекта.
Эта концепция подчеркивает стратегию Arenadata Catalog: сделать информацию понятной для бизнеса.
Представленный функционал будет доступен в очередных релизах ADC.

👉 Запись выступления скоро опубликуем на канале, а пока можно скачать презентацию
👍711
Качество данных играет решающую роль в достоверной аналитике и принятии обоснованных решений на основе данных. Разработка этого функционала становится ключевым направлением развития Arenadata Catalog в 2024 году.
👉 Узнайте больше посмотрев запись доклада Ивана Новоселова и Артёма Нестерчука.
Please open Telegram to view this post
VIEW IN TELEGRAM
👏31👍1
Каталог данных машинное обучение

Присоединяйтесь к вебинару, посвященному применению каталога данных для увеличения эффективности MLOps.

19 марта эксперты Arenadata Catalog и Иннодата поделятся опытом, как интеграция каталога данных и фабрики MLOps увеличенивает эффективность машинного обучения и снижает нагрузку на команду разработчиков. Вас ждет обзор решения и демонстрация систем на примере практического кейса.

👉 Зарегистрируйтсь по ссылке

Ждем вас!
Please open Telegram to view this post
VIEW IN TELEGRAM
👍3
Эволюция Arenadata Catalog: главные новинки версии 0.6.2

Наиболее эффективным способом наполнения каталога данных является прямое подключение к источнику и считывание метаданных через коннектор.
Если такое подключение невозможно или структура источника находится на стадии проектирования, предлагаем использовать функционал импорта-экспорта метаданных через формат XLSX.
Также этот функционал будет полезен для расширения описаний уже каталогизированных источников и массового обновления объектов, таких как:
1. Базы данных
2. Схемы баз данных
3. Таблицы
4. Столбцы таблиц


Поиск. В новом релизе мы проделали значительную работу над поисковым движком ADC. Теперь он справляется со сложной морфологией русского и английского языков, успешно учитывает разделители и корректно обрабатывает букву «ё».

👉 Остальные улучшения смотрите по ссылке
Please open Telegram to view this post
VIEW IN TELEGRAM
👍62
04 апреля Иван Новосёлов, генеральный директор «ДатаКаталог», участвует в вебинаре «Прогнозная аналитика и AI/ML для крупных корпоративных клиентов»

Эксперты из крупнейших компаний обсудят перспективы прогнозной аналитики, искусственного интеллекта и машинного обучения.
Ждем вас на вебинаре в четверг, 🕔 4 апреля в 17:00  

Для участия необходимо зарегистрироваться
Please open Telegram to view this post
VIEW IN TELEGRAM
👍4🔥1
Как Data Governance помог студентам педагогического вуза опередить конкурентов?

В воскресенье завершился Московский студенческий DATA-хакатон. 15 команд из различных вузов соревновались в решении бизнес-кейсов. Количество инструментов, доступных студентам, не ограничивалось. Применяй все, что хочешь! Были замечены Postgres, ML, MADlib, R, Bert, привычные Excel и Datalens, букет BI и другое.

Команда Analytics Aficionados из МГПУ исходно находилась в невыигрышном положении. Жребий вынес им задачу по оптимизации работы службы технической поддержки (СТП). Ребята признались, что до хакатона они даже не слышали о работе таких служб и не представляли, какие факторы могут влиять на эффективность работы СТП.

Каждый студент в их команде взял на себя определенную роль:
Дата-инженер
Дата-стюард
Дата-сайентсист
BI-аналитик

Используя предоставленные сырые данные, хранимые в разных форматах, дата-инженер переложил их в Postgres. Дата-стюард, используя Arenadata Catalog, отпрофилировал и описал таблицы. Данные получают контекст и становятся информацией, понятной BI аналитику и сайентсисту. Они визуализируют информацию и ищут связи. 💡

Стюард продолжил описывать оставшиеся таблицы. Ландшафт данных становится более обширным, что дает еще больше идей аналитикам.

Команда разработала 5 (пять!) гипотез, обработав все доступные источники информации за предоставленное время. На презентации кейса студенты защитили подход, показав, что их методика прозрачна, достоверна и воспроизводима. 👩‍💻

Соперники увлеклись оверинжинирингом используя Python и даже AI. В итоге они отработали пару красивых гипотез, но не успели представить визуализацию. В отсутствии описания структуры данных экспертам было сложно убедиться в достоверности исследования. Еще две команды застряли на отладке питоновского кода и сошли с дистанции.

Analytics Aficionados заслуженно заняли первое место. Они использовали методологию управления данными и командную работу чтобы превзойти сильных конкурентов. 🚀

Поздравляем всех участников и ждем следующий DATA-хакатон!
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥61👍1🤔1
Красный Синий Зеленый 🟥 🟦 🟩

Новая продвинутая диаграмма Data Lineage появилась в версии ADC 0.6.3. Цветовая маркировка линии преобразования данных наглядно показывает, каким образом данные преобразуются, каким образом меняется их структура и параметры, а также как информационные потоки разделяются и сходятся. Индивидуальный цвет получает каждый из трех способов построения связи:
автоматический
ручной
импортированный


Цветовая палитра удобно настраивается, на справочной вкладке отображается дата создания связи и ссылка на её создателя, а с создателями Arenadata Catalog можно встретиться на конференции ArenaDay которая пройдет 23 апреля.

👩‍🏫 Мы высаживаемся на конференцию большим составом. Будем рады встретиться, обсудить ваши задачи и поделиться новостями о планах развития ADC.
Регистрируйтесь на очное участие или подключайтесь онлайн.
🔜 Анкета для регистрации по ссылке
Please open Telegram to view this post
VIEW IN TELEGRAM
5👌1💯1
Внимание вебинар!

Присоединяйтесь к вебинару, посвященному обзору новых функциональных возможностей Arenadata Catalog

На вебинаре проведем обзор системы и уделим внимание новым функциональным возможностям появившимся в свежих версиях ADC: генерация ER диаграмм, расширение визуализации data lineage, связь объектов глоссария с физической структурой данных.

Вебинар состоится 22 мая при поддержке компании DBI
🔜Регистрируйтесь по ссылке и готовьте вопросы: https://pruffme.com/landing/u2789671/tmp1713257409
Please open Telegram to view this post
VIEW IN TELEGRAM
👍6🔥3
Расширяем экосистему коннекторов к источникам метаданных

📊 Эффективное управление метаданными означает возможность построения графа происхождения данных от момента их появления до момента финального использования. Часто такой конечной точкой является дашборд BI-системы.

🔗 Компания DataCatalog разработала коннектор для сканирования метаданных BI платформы Visiology. Настроив оптимальное расписание, можно проводить автоматизированное сканирование системы и получать полную информацию о перечне объектов Visiology, включая дашборды, чарты, типы чартов и их описания. Дата-инженеры наглядно увидят пути трансформации данных, могут выявлять аномалии и отслеживать происходящие изменения. Бизнес-пользователи получают возможность связывать объекты бизнес-глоссария ADC с соответствующими чартами Visiology.

👉 Коннектор включен в дистрибутив ADC начиная с версии v0.6.2.2
Please open Telegram to view this post
VIEW IN TELEGRAM
👍8
Делимся записями выступлений спикеров прошедшего в конце июня митапа Вино и Данные.👇

🔴Алиса Школьникова (ДАР, КОРУС Консалтинг) рассказала, что общего у качественного вина и качественных данных, и как это влияет на результат

🔴Артем Нестерчук (Arenadata Catalog) рассказал, на какой же полке (винного шкафа) хранить тесты качества и какой экономический эффект дает внедрение каталога данных

🔴 Ярослав Золотухин (Luxms) показал, как Luxms BI может помочь выбрать вино. Отличный лайфхак для тех, кто выбирает вино по этикетке - теперь будет шанс найти не только красивое, но и вкусное:)

🔴Владимир Митюшкин (Simple) поделился секретами виноделия, интересными фактами о винной культуре и географии виноградников

Обязательно посмотрите, лучше под бокал вина минералки🍷☺️
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥4👏2
🔐 Аутентификация в Arenadata Catalog

🔴 Обеспечение безопасного доступа к метаданным становится актуальной задачей для российских организаций внедряющих процессы Data Governance.
Интеграция Arenadata Catalog с сервером аутентификации Blitz Identity Provider позволяет использовать надежную идентификацию и аутентификацию.
Совместная работа продуктов была проверена в рамках испытаний, проведенных на специально развернутом стенде. Интеграция обеспечит пользователей передовыми функциями безопасности для защиты данных и управления доступом, что особенно важно в условиях повышенных требований к информационной безопасности.

👉 Более подробно здесь
🔥5
🍁Осень — начало бизнес-сезона и традиционное время для проведения конференций и выставок. Не стал исключением и 2024 год.
Делимся планам на ближайший месяц.


📅 17 сентября DataCatalog участвует в первой партнерской конференции Luxms. В докладе расскажем о ценности настроенных процессов Data Governance для эффективного управления бизнес-аналитикой. Конференция пройдет в двух форматах: очное участие и дистанционный формат. Будем рады увидеться лично, регистрация по ссылке

🗓 26 сентября выступаем на большой конференции по управлению данными, проводимой издательским домом "Открытые Системы". За последние годы конференция стала экспертной площадкой для обмена мнениями и отчетами о достигнутых результатах участников российской индустрии Data Governance. На выступлении дадим отчет о двухлетнем опыте работы нашей компании и поделимся результатами выполненных внедрений Arenadata Catalog. Ссылка на регистрацию

🗓 03 октября планируем участвовать в конференции IT Space. Это одно из крупнейших мероприятий, затрагивающее всё многообразие российских IT-продуктов и технологий. Естественно, такое мероприятие не могло обойти вниманием тему управления данными. Вместе с коллегами из Arenadata и Visiology будем работать на стенде и демонстрировать интеграцию продуктов управления данными и аналитики. Программа и регистрация на конференцию по ссылке

Увидимся
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6👏2
🔴 Дайджест новостей ДатаКаталог

Крупнейшие предприятия управляют данными с помощью Arenadata Catalog:

ПАО Банк ВТБ
объявил о переходе на решение
Arenadata Catalog


Сеть гипермаркетов Hoff
управляет данными
с помощью Arenadata Catalog


IT-холдинг Fplus
трансформирует культуру работы с данными
с помощью Arenadata Catalog


👉 Обновления ADC, вышедшие в последние месяцы, облегчают переход к композитному ИТ-ландшафту, ставшему актуальным для многих российских организаций.
Благодаря возможностям по сканированию метаданных новых источников, таких как Picodata, SAP BW и Форсайт у пользователей формируется репозиторий метаданных, объектов, процессов управления качеством связывающий все информационные системы и облегчающий миграцию на российское программное обеспечение.

В версии 0.7.3 представлены расширенные возможности загрузки семплов данных и улучшенный функционал профилировщика.
Пользовательские описания теперь можно добавить ко всем объектам физической модели данных, включая граф трансформации. Описания можно прикрепить непосредственно к графу Data Lineage, что упросит работу разработчиков и архитекторов при работе с потоками, в задачах миграции или проведении импакт анализа.
👉 Описание нового функционала по ссылке
🔥6👏4