Друзья, привет!

Приглашаем на митап, посвященный SDP Ozone! Поговорим о миграции Hive-таблиц с Hadoop на SDP Ozone, покажем примеры сжатия при работе с SDP Ozone, обсудим возможности использования кластера SDP Ozone при обучении LLM.

🎤 Спикер: Андрей Запольский, Руководитель службы поддержки SDP Ozone (SberData).

📅 15 июля в 15:00-16:00
🔗 Онлайн в SberJazz (ссылка в почте или СберЧате DWH/BigData)

Запись прошлого демо доступна по ссылке.

Перешли приглашалку коллегами получи плюсик в карму!

С уважением, команда DWH/BigData 💚

Друзья, привет!

Комьюнити нужен новый герой! Мы ищем эксперта, который поможет дообучить LLM для автоматического исправления «токсичных» SQL-запросов в корректные.

☀️ Проект реализуется студентами под чутким руководством экспертной команды Сбера в рамках летней практики.

Что предстоит:
🔹 Дообучение LLM для задачи исправления SQL-запросов;
🔹 Подготовка и валидация датасетов с разными типами ошибок;
🔹 Оценка качества модели и интеграция с БД.

Кого мы ищем:
🔹 Понимание технологий дообучения LLM, включая современные фреймворки и best practices;
🔹 Опыт в fine-tuning и оценке LLM;
🔹 Знание метрик оценки генерации и исправления запросов;
🔹 Опыт работы с SQL и понимание специфики различных СУБД;
🔹 Понимание Trino и опыт интеграции LLM с БД будут большим плюсом.

Не упусти свой шанс присоединиться! По вопросам проекта пиши в комментариях к посту.

С уважением,
команда DWH/BigData💚

🚀 Земля в иллюминаторе... А космическая викторина – перед вами! 

Что такое МКС? Сколько планет в Солнечной системе? Как зовут первого человека в космосе? 

Ответили на все вопросы? Поздравляем, разминка успешно пройдена! 

🔥🔥 Переходим к главному: приглашаем на шоу SberData Friday в необычном научно-популярном формате. В гостях – Артём Шавшин, генеральный директор компании-разработчика системы уклонения от космических угроз с помощью ИИ «Чистый космос».

Поговорим о космическом мусоре, узнаем, как ИИ меняет космическую отрасль и можно ли ему доверять планетарную безопасность.

🗓 18 июля
⏰ 11:00 
💻 Онлайн в SberJazz 

👉ЗАРЕГИСТРИРОВАТЬСЯ👈

Перешли приглашалку коллегам
и получи плюсик в карму!

С уважением,
команда DWH/BigData 💚

Как работать с графами: стартовал практический курс
 
Друзья, привет!

 🔔Рады сообщить о запуске нового электронного курса — «FastGraph: быстрый старт для работы с графами».
 
 В программе курса:
 
 ✔️Обзор БД: что такое FastGraph и зачем он нужен;
✔️Возможности и варианты использования FastGraph;
✔️FastGraph - Fast&Easy UI;
✔️Режим быстрого чтения данных;
✔️Режим быстрой записи данных.

▶️ Начните курс и прокачайте навыки работы с графовой базой данных, начиная с изучения архитектуры и заканчивая решением практических задач.
 
С уважением,
команда DWH/BigData💚

Это ваш билет в SDP Ozone:)
 
Друзья, привет!
 
На прошедшем митапе разобрали SDP Ozone - мощное продолжение HDFS (Hadoop) с опциональной поддержкой S3:

✔️80%+ утилизации HDD – больше данных, меньше затрат;
✔️2х скорость по сравнению с HDFS;
✔️Работает с S3 HDFS API – гибкость без переписывания кода.
 
Что обсудили?
🔹Миграцию Hive-таблиц на SDP Ozone;
🔹Эффективное сжатие данных;
🔹Использование для обучения LLM.
 
👉 ВИДЕОЗАПИСЬ👈

Если Вы хотите протестировать SDP Ozone, напишите Ильину Андрею или Андрею Запольскому.

С уважением,
команда DWH/BigData💚

Друзья, привет!

Через 15 минут начинаем наше космическое путешествие!

👉Подключайтесь по ссылке в почте или Сберчате DWH/BigData.

Ждём вас!

С уважением,
команда DWH/BigData💚

Друзья, начнём через 10 минут, не расходитесь🙏

Друзья, выпуск Sberdata Friday начался.

🚀 Космический мусор, ИИ и будущее орбиты: взгляд изнутри

Друзья, привет!

Околоземное пространство все меньше напоминает «чистый космос»: тысячи обломков старых спутников, ступеней ракет и даже потерянных инструментов несутся со скоростью 8 км/с💥

Что будет, если мусора станет слишком много? Как ИИ может спасти ситуацию? Почему GigaChat летит в космос и какие задачи он решит?

Обсудили на шоу SberData Friday с Артëмом Шавшиным, генеральным директором компании-разработчика системы уклонения от космических угроз с помощью ИИ «Чистый космос».

👉СМОТРЕТЬ ЗАПИСЬ👈

Следите за интервью – раскроем детали, о которых молчат агентства! 🌌

С уважением,
команда DWH/BigData 💚

Друзья, привет!
 
Если вы всё ещё ищете путь к развитию, вы открыли тот самый пост 🎯  
 
Запущен новый практический курс Spark Advance для тех, кто:  

✔ Работает с Apache Spark и хочет углубить знания;
✔ Стремится к мастерству в оптимизации, распределении ресурсов и обработке потоковых данных;  
✔ Сталкивается со сложными форматами, вложенными структурами, массивами и мапами.  
 
Что внутри?

📌 Интенсивная практика – задачи и проекты, приближенные к боевым;
📌 Разбор реальных кейсов: устранение перекосов данных, настройка параметров для предотвращения spill;
📌 Готовые решения, которые можно внедрять уже сегодня.  
 
⏩ Регистрируйтесь, и стартуем!
 
С уважением,
команда DWH/BigData💚

Друзья, привет!

Приглашаем на митап DWH/BigData! Расскажем, как найти лучшие решения, опираясь на опыт участников комьюнити.

ПОВЕСТКА:

🔹 Светлана Светоч (SberData, УРД) - Кнопка «Сделать хорошо» и прочие иллюзии: честный отчёт о наших продуктовых практиках;

🔹 Вадим Сурпин (SberData, УРКАП) - Производительность Apache Paimon: как получить максимум и избежать узких мест; практический кейс;

🔹 Иван Кочкожаров (SberData, УРКАП) - Внедрение технологии RDMA в Apache Flink с помощью hadroNIO.

🗓 7 августа
⏰ 15:00
💻 Онлайн в SberJazz, ссылка в почте и Сберчате DWH/BigData

Ждём всех, кто хочет глубже разобраться в технологиях и перенять лучшие практики!

С уважением,
команда DWH/BigData 💚

Друзья, привет!

Начинаем через 10 минут!

Три крутых доклада, полезные инсайты и живое общение — подключайтесь! Ссылка в почте и СберЧате сообщества.

До встречи! 🚀

Друзья, привет!

На прошедшем митапе выступили три крутых эксперта, которые поделились реальным опытом и проверенными решениями.

Мы поговорили о том, как сделать продукты лучше, как выжать максимум из Apache Paimon и зачем внедрять RDMA.

С докладами выступили: Светлана Светоч, Вадим Сурпин, Иван Кочкожаров (SberData).

🔗Не смогли присоединиться? Смотрите запись и вдохновляйтесь лучшими практиками!

А если хотите поделиться своим опытом, напишите @valerie_smk. Ищем спикеров на следующий митап🚀

С уважением,
команда DWH/BigData 💚

Друзья, привет👋

Что будет, если познакомить Гильдию DE CX и комьюнити DWH/BigData? - Конечно, самый полезный митап по Greenplum в 2025 году! Коллеги обратились к нам с просьбой поделиться опытом, и мы с радостью приглашаем вас на совместную встречу.

ПОВЕСТКА:

🔹 Знакомство с Гильдией DE CX (Павел Буриличев, ДИТ Блока "Развитие клиентского опыта B2C");

🔹 Best practice в управлении кластером Greenplum (Леонид Батов, Блок "Технологии", SberData);

🔹 КАП818. Базовые витрины данных. Разработка витрин (Евгений Видман, Евгений Петрашевский, Блок "Финансы").

🗓 20 августа
⏰ 15:30
💻 Онлайн в SberJazz (ссылка в почте и СберЧате)

Приходите, чтобы прокачать свои навыки и заставить код работать быстрее:)

С уважением,
команда DWH/BigData 💚