SberProfi DWH/BigData – Telegram
SberProfi DWH/BigData
1.07K subscribers
311 photos
9 videos
360 links
Telegram-канал SberProfi DWH/BigData 💚
Наш чат: https://news.1rj.ru/str/+6Vc_rNMJl8MzYzcy
Наша миссия: развивать компетенции по технологиям работы с данными, например, такими, как экосистема Hadoop, Teradata, Oracle DB, GreenPlum и др.
Download Telegram
Друзья! ☔️

Приглашаем вас на очередной онлайн-митап SberProfi DWH/BigData, который состоится 9 ноября 2022 года.
Начало в 14:00.

👉 Подключиться 👈


Повестка:
FaaS/Serverless на основе Сервисных Сообщений Корпоративной аналитической платформы

Спикер:
Васильев Павел (SberData)


Вопросы можно будет задать в чате во время выступления докладчика.

До встречи на митапе!


С уважением,
DWH/BigData 💚
Друзья!
Что мы все о работе и о работе! 🤔
Ловите первый #пятничный_мем_dwhbigdata
Дорогие коллеги! ☀️

Приглашаем вас на очередной онлайн-митап SberProfi DWH/BigData, который состоится 16 ноября 2022 года.
Начало в 14:00.

👉 Подключиться 👈


Повестка:

• Ермекбаев З., Орлов С.: «SDP Ozone – новое хранилище данных в экосистеме Hadoop»
• Загребельный А.: «Об опыте миграции кластеров на Лабораторию Данных 3.0 SDP Hadoop»
• Носенко Н.: «Как искать сотрудников через data-хакатоны. Опыт МИФИ Opportunity Cup»



Вопросы можно будет задать в чате во время выступления докладчиков.

До встречи на митапе!


С уважением,
DWH/BigData 💚
А у вас такое было? 👆
Anonymous Poll
27%
Да 😞
9%
Нет 😏
64%
Просто хочу нажать 🟢
#втренде #Выпуск14

▪️ Amazon Neptune Serverless - тренд в серверлесс базы данных продолжается и начинает охватывать графовую базу Амазона. Преимущества: авто-масштабирование, авто-восстановление, pay as you go. Другими словами - никакой возни с КТС и сайзингом.

▫️ Xata - безсерверная платформа данных, по сути как BaaS (backend-as-a-service), но живет в облаках и наследует все преимущества. Тут интересно почитать. Возможно, интересно как вектор развития для нашего Platform V DataSpace.

▪️ Онлайн SQL редакторы Decile и slashbase - красивые UI для работы с базами данных. Интересно для пользователей ПКАПов на базе GP, PG, а также для дополнительной ценности наших продуктов, например, ЛД, Трино и будущих их версий.

▫️ VulcanSQL - фреймворк для генерации REST API над базами с параметризуемым SQL. Ускоряет разработку дата-приложений и повышает удобство поддержки.

▪️ ClickHouse Obfuscator - новая функция читает входной датасет и возвращает вместо настоящих данных “очень похожие” по характеристикам. Интересный подход для снятия тестовых данных с промышленного контура. У SberData и SberWorks есть похожее решение .
Что вам может пригодиться в работе, о чем хотелось бы узнать в деталях?
Anonymous Poll
18%
Amazon Neptune Serverless
7%
Xata
51%
Онлайн-SQL редакторы
28%
VulcanSQL
40%
ClickHouse Obfuscator
#втренде #Выпуск15

🔹 Twingate - новый вид безопасных соединений по модели Zero Trust Networking, альтернатива VPN и другим устаревающим походам к секьюрности соединений.

🔸 🔥 WASM workers server - уже невозможно игнорировать сигналы о том, что технология WebAssembly - на пороге перехода от тренда к стандарту. VMWare сделал опен сорс-версию простого HTTP-сервера для запуска приложений в WASM sandbox. Ну, и он написан на Rust).

🔹 🔥 Einblick - платформа для совместного анализа данных и машинного обучения. Выглядит как Miro с летающими пойнтерами, но вместо заметок - данные, графики и код.

🔸 Noloco - low-code-приложения с воркфлоу поверх PostgreSQL, Google Sheets или Airtable. Интересная идея для нас - заменить эксель-макросы и даже прототипировать такие бизнес-приложения бизнес-пользователями с более-менее защищенными данными.

🔹 Mimesis - Python-генератор фейковых данных и анонимизатор пром-данных. Уникально: помимо приземления данных в RDBMS может создавать фейковую API, отдающую данные в т.ч. форматах JSON и XML заданной структуры.

🔸 🔥 Great Expectations - Python-фреймворк для тестирования качества данных, по сути уже много где принят как стандарт: создаем проверки в упрощенном формате и получаем авто-документацию на человеческом языке, отчеты о качестве и фреймворк управления проектом. С помощью профилирования данных может автоматически генерить проверки. детальнее
Что Вам может пригодиться в работе, о чем хотелось бы узнать в деталях? (скоро будет аналитика на основе на основе ваших голосований)
Anonymous Poll
15%
Twingate
10%
WASM workers server
10%
Einblick
18%
Noloco
31%
Mimesis
56%
Great Expectations
Дорогие коллеги!

Приглашаем вас на очередной онлайн-митап SberProfi DWH/BigData, который состоится 24 ноября 2022 года.
Начало в 15:00.

👉 Подключиться 👈


Повестка:

1. Вальц А., Васильев П. (SberData): «Опыт использования инструмента учета задач, не попадающих в backlog, – IStick»
(подробнее – в Confluence)

2. Будымко Я., Негго Н. (SberData): «Работа со Spark on Kubernetes в Datalab»
(подробнее – в Confluence)


Вопросы можно будет задать в чате во время выступления докладчиков.

До встречи на митапе!


С уважением,
DWH/BigData 💚
👍3
#пятничный_мем_dwhbigdata

ML Модель пришла на собеседование 🤓.

🔸 Модель: Я эксперт по машинному обучению.
🔹 Интервьюер: ОК. Сколько будет 10+6?
🔸 Модель: Ноль!
🔹 Интервьюер: Нет! Даже не близко! 10+6 будет 16.
🔸 Модель: Окей, шестнадцать.
🔹 Интервьюер: Ладно, сколько будет 10+20?
🔸Модель: Шестнадцать!
👍1
👍2
Дорогие коллеги!

В 2022 году наша команда ввела новый формат активностей – подкасты.
Мы успели записать 4 выпуска, заключительный в этом году из которых посвящен продукту SberData, который никого не оставляет равнодушным – Супермаркету данных 🚀🛸.

В гостях: Юшанова Мария, лидер Кластера продуктов распространения и интеграции данных, Светоч Светлана, владелец продукта СМД и ... один из многочисленных клиентов сервиса от бизнеса.


👉 СЛУШАТЬ ПОДКАСТ 👈

Приятного просмотра! 💻🍿

P.S. Пожалуйста, не забывайте делиться впечатлениями в комментариях 👇.
👍1
Дорогие коллеги! ❄️☃️

Приглашаем вас на очередной онлайн-митап SberProfi DWH/BigData, который состоится 1 декабря 2022 года.

Начало в 14:00.

👉 Подключиться 👈


Повестка:

Кухарук К., Стерхов К. (SberData) : «SDP-Control: платформа управления сервисами Корпоративной аналитической платформы»
(подробнее – на Confluence)


Вопросы можно будет задать в чате во время выступления докладчиков.

До встречи на митапе!


С уважением,
DWH/BigData 💚