Друзья, привет! 🌖

Слышал ли кто-нибудь из вас про Apache Pulsar?

Это такая менее известная Kafka на стероидах их недр Yahoo, которая из коробки и абсолютно бесплатно умеет следующее:

• Поддержку geo-репликации
• Более низкое время отклика по сравнению с Kafka
• Семантику поддержки классических очередей (в отличие от Kafka)
• Масштабирование до 1M топиков
• Multitenancy
• Tiered Storage с офлоадом старых данных в S3
• SQL поверх данных, лежащих в Pulsar через Trino и многое другое

📣 23 мая 2023 пройдет бесплатный виртуальный Pulsar Summit 2023.

Мероприятие может быть интересным, всем, кто интересуется распределенными брокерами сообщений, такими как Apache Kafka, Redpanda, Pravega и др.

📋 Агенда:

- Welcome to Pulsar Virtual Summit Europe 2023!
- Pulsar: The State of the Wave
- Challenges of Hosting a Pulsar-as-a-Service Platform Under a Shared Responsibility Model
- How We Simplified a Highly Complex and Sensitive Data Stream using Apache Pulsar
- Pulsar in Finance - A Tale of a Migration
- Error Handling Patterns in Pulsar
- Pulsar Observability in High-Topic Cardinality Deployments for Telco
- Build Low-code Stream Data Pipelines with Pulsar Transformations
- How to Choose the Right Streaming Database for Pulsar
- Using Apache Nifi with Apache Pulsar for Fast Data On-Ramp
- Scalable Distributed Messaging & Streaming with Apache Pulsar
- Introducing Spring for Apache Pulsar
- The Future of Metrics in Apache Pulsar
- Building Cost-Effective Stream Processing Applications with RisingWave and Apache Pulsar
- System-level Testing of a Pulsar-based Microservice Application
- Building a Real-time Analytics Application with Apache Pulsar and Apache Pinot
- Documentation as Configuration for Management of Apache Pulsar
- From an AsyncAPI Definition to a Deployed Pulsar Topology Via GitOps
- Oxia: Scaling Pulsar’s Metadata to 100x


С уважением,
команда DWH/BigData 💚

Дорогие коллеги!  ☂️

Приглашаем вас посетить митап SberProfi DWH/BigData, который состоится 31 мая 2023 года. 
Начало в 14:00.

👉 Подключиться 👈

Повестка:
SDP Analytics. Сервис анализа и визуализации данных

Спикеры:
Рогдева Н., Мурадымов Р.

Ознакомиться с рекламной страницей Sber Data Platform можно здесь.


Вопросы докладчикам можно задать в онлайн-режиме в чате СберМитапа.

Обращаем ваше внимание, что мероприятие проводится только на сотрудников Банка, просьба не пересылать информацию внешним участникам.

До встречи!

С уважением,
команда DWH/BigData 💚

Дорогие коллеги!  🌱

Приглашаем вас посетить митап SberProfi DWH/BigData, который состоится  13 июня 2023 года.
Начало в 15:30.

👉 Подключиться 👈

Повестка:
1. Бащенко А. (SberData): ЕСС – metadata-driven Data Mesh в единой модели
2. Селиванов Ю. (SberData): Миграция «мастадонтов» и их инвестирование в направление R'n'D
3. Корнеев Д. (Среднерусский банк): Решение ad-hoc задач в КАП 


🚀🚀🚀



До встречи!

С уважением,
команда DWH/BigData 💚

Друзья, еще раз привет!

По многочисленным просьбам пользователей СМД 1 июня коллеги проведут вебинар "СМД – разнообразие сценариев распространения данных. ТОП вопросов про ЕСПД и не только". Ответят на самые популярные вопросы и покажут демо в системах.

План мероприятия:

🔻Часть 1 «Подписки СМД+ЕСПД Краткая инструкция для «новичка» – 30 минут
🔻Часть 2 «Разнообразие сценариев поставки данных по подпискам СМД+ЕСПД. Новый функционал и планы» – 60 минут
🔻Часть 3 «Про SberETL и Trino» – 30 минут

Встречаемся 1 июня в 10.00:
https://meetup.sberbank.ru/w/w/700c0bfe-4c21-43bb-a178-871007db8413

До встречи!

С уважением,
команда DWH/BigData 💚

Коллеги, через 10 минут начинаем!

Друзья!
 
Ввиду важности искусственного интеллекта для Сбера, а также необходимости научиться быстро внедрять модели в ПРОМ, команда нашего сообщества выделила MLE в отдельный трек.
ML-инженер – это специалист по опромышливанию моделей.

⚠️ Трек предназначен для обладателей профиля MLE, а также DevOps-инженеров, DS и DE Банка, занимающихся, в том числе, опромышливанием моделей и внедрением их в ПРОМ. 
 
Миссия стрима заключается в следующем:
Дать инженерам Банка пространство для обмена информацией и опытом, а также необходимый набор знаний, умений для эффективного опромышливания моделей
Обеспечить распространение best-практик и удачных наработок
 
Трек так же будет полезен всем, кто движется в данном направлении, лидировать его будет Никаноров Валерий (@valeriy_nikanorov, Nikanorov.V.Va@sberbank.ru), по запросам на проведение экспертных площадок, пожалуйста, обращайтесь к коллеге.
 
📣 Встречаться на митапах надеемся регулярно, первый запланирован уже на июль.
 
❗️Друзья, пожалуйста, не стесняйтесь прокачивать свои ораторские скиллы и приходите на наши встречи в качестве спикеров.
 
Предложить себя как докладчика можно, написав нашему КМ Габискирия Бэлле (@gbella15, BVGabiskiriya@sberbank.ru) или на наш e-mail: SberProfi_DWH_BigData@sberbank.ru.
Да-да! Ждем именно вас!
 
Добавляйтесь в наш MLE-чат, приводите коллег (за это никаких плюшек нет, но есть плюсики в карму, что тоже неплохо).
Добавляйте страничку трека на Confluence в Избранное (здесь вы найдете важную информацию по обучающим курсам, записи митапов, а также сможете добавлять комментарии по работе нового направления).
 
Спасибо, что дочитали до конца и до встречи!


С уважением,
команда DWH/BigData 💚

Коллеги, привет!

Поделитесь, пожалуйста, обратной связью о сервисах и продуктах SberData!🔥

Просим вас уделить всего лишь 2 минуты и пройти опрос по ссылке ниже:

https://public.oprosso.sberbank.ru/p/DWHBigData_csi_q2_23

Напоминаем, что положительная оценка начинается с 7 баллов ✅

💌 Для вас мы создали страницу, где разместили ответы на ваши вопросы, которые вы задаете в период кампаний CSI.

Подробнее по ссылке 🎊

Заранее спасибо!

Друзья!
10 минут остается до нашего классного (конечно же) митапа!
Скорее подключайтесь 🏃🏻‍♂️🏃🏻‍♀️👩🏻‍💻👨🏻‍💻

Друзья, ловите ссылку на новость по митапу (чур с вас лайки и реакции!).
Спасибо 🙏

Всем привет! ☀️😎

Подписывайтесь на новостной канал Инструментов DataOps в Telegram, Сберчате и ДРУГе!

Там коллеги рассказывают про приложение и новые фичи в продукте.

Для кого это приложение?
Для администраторов реплик, витрин и менеджеров ИТ-услуг, связанных с поставкой и расчетом данных в КАП.
 
Продукт позволяет:
🔻 Настроить авторегистрацию инцидентов в Service Manager по падению потоков и по правилам TLA (Актуальность/своевременность)
🔻 Закрывать массово инциденты в Service manager из интерфейса при сбоях в инфраструктуре
🔻 Настраивать авторегистрацию ЗНО для установки релиза в ПРОМ по утвержденному РоВ из Jira Delta
🔻 Подписываться на email-оповещения по инцидентам реплик и витрин
🔻 Подписываться на Отчет Т-1 по репликам КАП и ITSM отчетность - подразделений УСКАП (подписаться на отчеты можно по ссылке в ДРУГе или заказать по email)
🔻 Увидеть актуальную информацию по паспортам реплик и витринам на сопровождении у 2ЛС
🔻 Настроить автоисполнение ЗнД для Greenplum и автозакрытие ЗнР в Service Manager
🔻 Получать через API информацию из Service Manager об объектах КАП по КЭ
 
✅ В ДРУГе: https://sberfriend.sbrf.ru/sberfriend/#/media/community/25322216

✅ В Сберчате: https://sberchat.sberbank.ru/@DataOpsTools

✈️ Телеграм: https://news.1rj.ru/str/+C34d_d3Z6TA2N2Ey


✍️ По вопросам и предложениям пишите @iskandersu


С уважением,
команда DWH/BigData 💚

Друзья, привет! ☂️

Мы решили сделать наш чат закрытым.

Вступить в него можно по ссылке-приглашению, для этого пишите админу @gbella1505 с указанием рабочей почты и ФИО.

Также просим вас не забывать о правилах безопасности – обсуждение решения проблемного кейса лучше не вести в общем ТГ-чате. Переходите в ЛС, почту или СберЧат.

❗️В случае выявления публикации К1 и К2 ответственность будут нести и автор сообщения, и администратор пространства.

С надеждой на бдительность и понимание.


С уважением,
команда DWH/BigData 💚