Друзья, привет!
24 апреля состоялся 65-й митап комьюнити, на котором, по традиции, представили три доклада.
🚀 Запустили Лабораторию Геоанализа – теперь можно проводить геокодирование источников, строить тепловые карты, рассчитывать изохроны и визуализировать данные. Как? Рассказал Дмитрий Кузнецов (SberData, г. Самара).
💾 Хранилище данных на 30+ пб для AI: подходы и перспективы развития. Зачем в Сбере собирать очередное хранилище данных? Какие инструменты пробовали? А главное, как прогружать по 100 Тб в сутки и почти не падать? На эти и другие вопросы ответил Александр Непочатых (Дивизион общих сервисов Салют).
🏆 Лауреаты хакатона рассказали про свой проект SberHound - мультимодальный контентный поиск в группах и каналах SberChat. Смотрите выступление Об опыте участия в хакатоне рассказали Далгата Ибрагимова, Андрея Литвина, Софии Филимоновой (Sberdata).
🔗 Видеозапись доступна в СберВидео.
Спасибо всем, кто был с нами!
С уважением,
команда DWH/BigData💚
24 апреля состоялся 65-й митап комьюнити, на котором, по традиции, представили три доклада.
🚀 Запустили Лабораторию Геоанализа – теперь можно проводить геокодирование источников, строить тепловые карты, рассчитывать изохроны и визуализировать данные. Как? Рассказал Дмитрий Кузнецов (SberData, г. Самара).
💾 Хранилище данных на 30+ пб для AI: подходы и перспективы развития. Зачем в Сбере собирать очередное хранилище данных? Какие инструменты пробовали? А главное, как прогружать по 100 Тб в сутки и почти не падать? На эти и другие вопросы ответил Александр Непочатых (Дивизион общих сервисов Салют).
🏆 Лауреаты хакатона рассказали про свой проект SberHound - мультимодальный контентный поиск в группах и каналах SberChat. Смотрите выступление Об опыте участия в хакатоне рассказали Далгата Ибрагимова, Андрея Литвина, Софии Филимоновой (Sberdata).
🔗 Видеозапись доступна в СберВидео.
Спасибо всем, кто был с нами!
С уважением,
команда DWH/BigData💚
👍4❤3
Эх, вот бы майские праздники провести с пользой...:)
Друзья, привет!
Исполняем ваши желания и делимся подборкой книг от экспертов DWH/BigData, команды RnD и Безопасности BigData.
1. Александр Аузан «Культурные коды экономики»
2. Ричард Фейнман «Вы, конечно, шутите, мистер Фейнман!»
3. Кэти О’Нил «Оружие математического поражения. Как технология Big Data усугубляет неравенство и угрожает демократии»
4. Митио Каку «Физика невозможного»
5. Питер Аттиа «Жить дольше. Наука и искусство долголетия»
6. Буркеман Оливер «Медитации для смертных. Четыре недели, чтобы осознать свои ограничения и уделить время тому, что действительно важно»
7. Бонус! Для тех, кто хочет прокачать английский язык – A. Martin, M. Hausenblas «Hacking Kubernetes: Threat-Driven Analysis and Defense»
Пишите, что выбрали из списка, и делитесь впечатлениями в комментариях:)
Приятного чтения!
С уважением,
Команда DWH/BigData💚
Друзья, привет!
Исполняем ваши желания и делимся подборкой книг от экспертов DWH/BigData, команды RnD и Безопасности BigData.
1. Александр Аузан «Культурные коды экономики»
2. Ричард Фейнман «Вы, конечно, шутите, мистер Фейнман!»
3. Кэти О’Нил «Оружие математического поражения. Как технология Big Data усугубляет неравенство и угрожает демократии»
4. Митио Каку «Физика невозможного»
5. Питер Аттиа «Жить дольше. Наука и искусство долголетия»
6. Буркеман Оливер «Медитации для смертных. Четыре недели, чтобы осознать свои ограничения и уделить время тому, что действительно важно»
7. Бонус! Для тех, кто хочет прокачать английский язык – A. Martin, M. Hausenblas «Hacking Kubernetes: Threat-Driven Analysis and Defense»
Пишите, что выбрали из списка, и делитесь впечатлениями в комментариях:)
Приятного чтения!
С уважением,
Команда DWH/BigData💚
👍6❤2🔥2
Когда на холодильнике не осталось места для магнитиков... Пора подумать об оригинальных путешествиях!
Друзья, привет!
Приглашаем на шоу SberData Friday с Вадимом Мамонтовым, основателем и генеральным директором RussiaDiscovery, руководителем Комитета по приключенческому туризму Российского союза туриндустрии.
Формат - открытый диалог!
Обсудим, куда отправиться в отпуск, как ИИ меняет наш отдых и как планировать путешествия, если ты «сам себе туроператор». А еще проверим, насколько хорошо Вадим знает географию Блока Технологии, и проведем квиз среди слушателей:)
Присылайте в комментариях / комьюнити менеджеру фото и подпись (!) ваших любимых мест в городах присутствия SberData, и Вадим Мамонтов в прямом эфире будет отгадывать, о каком регионе идет речь!
P.S. Авторы наиболее интересных фото получат от нас памятные подарки🔥
🗓 16 мая
⏰ 11:00
💻 Онлайн в SberJazz
💬 Задать вопрос
С уважением,
команда DWH/BigData 💚
Друзья, привет!
Приглашаем на шоу SberData Friday с Вадимом Мамонтовым, основателем и генеральным директором RussiaDiscovery, руководителем Комитета по приключенческому туризму Российского союза туриндустрии.
Формат - открытый диалог!
Обсудим, куда отправиться в отпуск, как ИИ меняет наш отдых и как планировать путешествия, если ты «сам себе туроператор». А еще проверим, насколько хорошо Вадим знает географию Блока Технологии, и проведем квиз среди слушателей:)
Присылайте в комментариях / комьюнити менеджеру фото и подпись (!) ваших любимых мест в городах присутствия SberData, и Вадим Мамонтов в прямом эфире будет отгадывать, о каком регионе идет речь!
P.S. Авторы наиболее интересных фото получат от нас памятные подарки🔥
🗓 16 мая
⏰ 11:00
💻 Онлайн в SberJazz
💬 Задать вопрос
С уважением,
команда DWH/BigData 💚
🔥5👍2🤔1
🚀 Отличные новости! SberData представила новый продукт
💥 SDP Ozone – это следующее поколение хранилища платформы больших данных, совместимое с экосистемой Hadoop, с базовой поддержкой протокола S3.
Для кого: клиенты, у которых есть потребность в использовании протокола S3 и Object Store для работы с данными.
Преимущества:
✅ Более эффективное высокоплотное хранение данных за счет применения Erasure Coding и автоматической компрессии данных;
🗄️ Увеличение производительности по сравнению с Hadoop до 2 раз;
⭐ Максимальная надежность благодаря встроенной поддержке георезерва;
📌 Плотность хранения до 400 ТБ на узел.
👤 Владелец продукта - Андрей Ильин, участник комьюнити DWH/BigData.
👉 Подробности в СберЧате и Медиа:)
С уважением,
команда DWH/BigData 💚
💥 SDP Ozone – это следующее поколение хранилища платформы больших данных, совместимое с экосистемой Hadoop, с базовой поддержкой протокола S3.
Для кого: клиенты, у которых есть потребность в использовании протокола S3 и Object Store для работы с данными.
Преимущества:
✅ Более эффективное высокоплотное хранение данных за счет применения Erasure Coding и автоматической компрессии данных;
🗄️ Увеличение производительности по сравнению с Hadoop до 2 раз;
⭐ Максимальная надежность благодаря встроенной поддержке георезерва;
📌 Плотность хранения до 400 ТБ на узел.
👤 Владелец продукта - Андрей Ильин, участник комьюнити DWH/BigData.
👉 Подробности в СберЧате и Медиа:)
С уважением,
команда DWH/BigData 💚
🔥7👍3👏1
Друзья, привет!
Хотите узнать, что скрывают разработчики AI-агентов? Приглашаем на очный митап сообщества DWH/BigData при поддержке Развивай навыки AI!
🔹Узнаете, как AI-HUB ускоряет внедрение AI-инициатив и обеспечивает безопасность;
🔹Познакомитесь с DataAPI – ключевым решением для доступа агентов к данным;
🔹Увидите лучшие GenAI практики в задачах сопровождения;
🔹Научитесь быстро и эффективно разрабатывать AI-агентов в ML-Space Agent Lab.
Спикеры: Рушан Мубинов (Департамент общих прикладных сервисов Банка), Алина Грибанова (SberData), Юрий Кочетков (SberData), Сергей Рябов (SberData), Иван Литвин (SberData).
🗓 21 мая в 15:00-17:00
Приходите очно или подключайтесь онлайн:)
👉 ЗАРЕГИСТРИРОВАТЬСЯ 👈
Вас ждут практические кейсы, живые дискуссии и, конечно, вкусное угощение🔥
С уважением,
команда DWH/BigData 💚
Хотите узнать, что скрывают разработчики AI-агентов? Приглашаем на очный митап сообщества DWH/BigData при поддержке Развивай навыки AI!
🔹Узнаете, как AI-HUB ускоряет внедрение AI-инициатив и обеспечивает безопасность;
🔹Познакомитесь с DataAPI – ключевым решением для доступа агентов к данным;
🔹Увидите лучшие GenAI практики в задачах сопровождения;
🔹Научитесь быстро и эффективно разрабатывать AI-агентов в ML-Space Agent Lab.
Спикеры: Рушан Мубинов (Департамент общих прикладных сервисов Банка), Алина Грибанова (SberData), Юрий Кочетков (SberData), Сергей Рябов (SberData), Иван Литвин (SberData).
🗓 21 мая в 15:00-17:00
Приходите очно или подключайтесь онлайн:)
👉 ЗАРЕГИСТРИРОВАТЬСЯ 👈
Вас ждут практические кейсы, живые дискуссии и, конечно, вкусное угощение🔥
С уважением,
команда DWH/BigData 💚
👍5❤1🔥1
❗Срочные новости: наши активисты Юлдуз Фаттахова и Сергей Кочетков победили на престижной международной премии Data Award 2025🔥🔥
Их продукт - экосистема генерации и использования синтетических данных SyntData - занял 🥇 место в номинации "За реализацию инновационной идеи". Благодаря SyntData, обучение ИИ моделей становится проще, быстрее и доступнее.
🎉Поздравляем команду с заслуженной победой!
Подробности
С уважением,
команда DWH/BigData💚
Их продукт - экосистема генерации и использования синтетических данных SyntData - занял 🥇 место в номинации "За реализацию инновационной идеи". Благодаря SyntData, обучение ИИ моделей становится проще, быстрее и доступнее.
🎉Поздравляем команду с заслуженной победой!
Подробности
С уважением,
команда DWH/BigData💚
🔥28👍10❤4
Друзья, привет!
У нас новая статья на Хабре:) Николай Абрамов, Исполнительный директор УРД (SberData), рассказал, как LLM могут помочь аналитикам баз данных в работе с SQL-запросами.
📌 Почему это важно?
Работа с корпоративными хранилищами данных требует много времени на написание SQL-запросов, поиск таблиц и проверку их связей. Ошибки ведут к потере времени и неточностям в отчетах.
📌 Что внутри?
Основная гипотеза состоит в том, что если адаптировать модель на специфических для определённого хранилища данных запросах, то можно рекомендовать таблицы, JOIN-условия и даже целые фрагменты запросов, основываясь на предыдущем опыте (журналах) и текущих потребностях.
👉 ЧИТАТЬ СТАТЬЮ 👈
Читайте, обсуждайте и делитесь мнением в комментариях.
С уважением,
команда DWH/BigData 💚
У нас новая статья на Хабре:) Николай Абрамов, Исполнительный директор УРД (SberData), рассказал, как LLM могут помочь аналитикам баз данных в работе с SQL-запросами.
📌 Почему это важно?
Работа с корпоративными хранилищами данных требует много времени на написание SQL-запросов, поиск таблиц и проверку их связей. Ошибки ведут к потере времени и неточностям в отчетах.
📌 Что внутри?
Основная гипотеза состоит в том, что если адаптировать модель на специфических для определённого хранилища данных запросах, то можно рекомендовать таблицы, JOIN-условия и даже целые фрагменты запросов, основываясь на предыдущем опыте (журналах) и текущих потребностях.
👉 ЧИТАТЬ СТАТЬЮ 👈
Читайте, обсуждайте и делитесь мнением в комментариях.
С уважением,
команда DWH/BigData 💚
🔥4👍2
SberProfi DWH/BigData
Друзья, привет! Хотите узнать, что скрывают разработчики AI-агентов? Приглашаем на очный митап сообщества DWH/BigData при поддержке Развивай навыки AI! 🔹Узнаете, как AI-HUB ускоряет внедрение AI-инициатив и обеспечивает безопасность; 🔹Познакомитесь с DataAPI…
Друзья, привет!
Напоминаем, что сегодня в 15:00 состоится очный митап DWH/BigData.
Вас ждет интересная программа, непринужденный нетворкинг и розыгрыш нашего фирменного мерча🌪️🤩🎁
🕒 15.00-17.00
📍 Кутузовский пр-т, 32, корп. Г, 2-й эт.
💻 Онлайн в SberJazz (ссылка в почте)
До встречи!
С уважением,
команда DWH/BigData 💚
Напоминаем, что сегодня в 15:00 состоится очный митап DWH/BigData.
Вас ждет интересная программа, непринужденный нетворкинг и розыгрыш нашего фирменного мерча🌪️🤩🎁
🕒 15.00-17.00
📍 Кутузовский пр-т, 32, корп. Г, 2-й эт.
💻 Онлайн в SberJazz (ссылка в почте)
До встречи!
С уважением,
команда DWH/BigData 💚
Друзья, привет!
Пора перезагрузиться:) Повод – шоу SberData Friday с Вадимом Мамонтовым, основателем и генеральным директором RussiaDiscovery.
В неформальной обстановке поговорили о нашем айтишном: путешествиях, ИИ, бизнесе, отвлеклись от рутинных задач и провели географический квиз. По традиции не обошлось без очных гостей из Блоков B2C, Корпоративно-инвестиционный бизнес, а также Центра отраслевой экспертизы «Туризм».
👉ВИДЕОЗАПИСЬ👈
Смотрите, ставьте лайки и рекомендуйте друзьям!
Есть идея, о чем или с кем сделать следующий выпуск? Пишите в комментариях:)
С уважением,
Команда DWH/BigData💚
Пора перезагрузиться:) Повод – шоу SberData Friday с Вадимом Мамонтовым, основателем и генеральным директором RussiaDiscovery.
В неформальной обстановке поговорили о нашем айтишном: путешествиях, ИИ, бизнесе, отвлеклись от рутинных задач и провели географический квиз. По традиции не обошлось без очных гостей из Блоков B2C, Корпоративно-инвестиционный бизнес, а также Центра отраслевой экспертизы «Туризм».
👉ВИДЕОЗАПИСЬ👈
Смотрите, ставьте лайки и рекомендуйте друзьям!
Есть идея, о чем или с кем сделать следующий выпуск? Пишите в комментариях:)
С уважением,
Команда DWH/BigData💚
👍6❤3
Друзья, привет!
21 мая комьюнити DWH/BigData при поддержке Развивай навыки AI провели очный митап по одной из самых актуальных тем – AI-агентам.
Удалось собрать очень насыщенную программу👇
🔹AI-HUB Блока Т (Илья Михалин, Управление сопровождения Платформы)
🔹DataAPI для предоставления данных AI Агентам (Алина Грибанова, SberData)
🔹Skynet. GenAI в задачах сопровождения SberData (Юрий Кочетков, SberData)
🔹ML-Space Agent Lab (Сергей Рябов, Иван Литвин, SberData)
С нами было 85+ участников очно, 1500+ онлайн-слушателей, которые задали свыше 100 вопросов🔥
🔗 Запись митапа и презентации спикеров доступны на СберВидео.
С уважением,
Команда DWH/BigData💚
21 мая комьюнити DWH/BigData при поддержке Развивай навыки AI провели очный митап по одной из самых актуальных тем – AI-агентам.
Удалось собрать очень насыщенную программу👇
🔹AI-HUB Блока Т (Илья Михалин, Управление сопровождения Платформы)
🔹DataAPI для предоставления данных AI Агентам (Алина Грибанова, SberData)
🔹Skynet. GenAI в задачах сопровождения SberData (Юрий Кочетков, SberData)
🔹ML-Space Agent Lab (Сергей Рябов, Иван Литвин, SberData)
С нами было 85+ участников очно, 1500+ онлайн-слушателей, которые задали свыше 100 вопросов🔥
🔗 Запись митапа и презентации спикеров доступны на СберВидео.
С уважением,
Команда DWH/BigData💚
👍5🔥5
Приглашаем на демо SDP Ozone
Друзья, привет!
Приглашаем на демо SDP Ozone! В программе:
- Работа по Hadoop API;
- Работа по S3 API;
- Интеграция с Hadoop services (Hive, Spark);
- Миграция c Hadoop на Ozone (использование distcp);
- Использование Hive, Spark для создания таблицы;
- Новые возможности сжатия данных, технология multiraft;
- Балансировка для s3.
🎤 Спикер: Андрей Запольский, Руководитель службы поддержки SDP Ozone (SberData).
📅 28 мая в 15:00-16:00
🔗 Ссылка в почте и СберЧате:)
С уважением,
команда DWH/BigData 💚
Друзья, привет!
Приглашаем на демо SDP Ozone! В программе:
- Работа по Hadoop API;
- Работа по S3 API;
- Интеграция с Hadoop services (Hive, Spark);
- Миграция c Hadoop на Ozone (использование distcp);
- Использование Hive, Spark для создания таблицы;
- Новые возможности сжатия данных, технология multiraft;
- Балансировка для s3.
🎤 Спикер: Андрей Запольский, Руководитель службы поддержки SDP Ozone (SberData).
📅 28 мая в 15:00-16:00
🔗 Ссылка в почте и СберЧате:)
С уважением,
команда DWH/BigData 💚
👍3
Друзья, привет! 👋
Приглашаем принять участие в исследовании «500 болей» от команды SberWorks! Исследование проводится ежегодно с целью выявить боли и проблемы, которые есть у участников команд разработки.
Принять участие можно одним из двух способов:
1) Пройти анонимный опрос и поделиться тем, что вас беспокоит (доступен до 30 мая).
2) Принять участие в глубинном интервью, для этого напишите комьюнити-менеджеру @valerie_smk.
- Период интервью: со 2 июня по 31 июля.
- Все данные анонимны, результаты публикуются в обезличенном виде.
Результаты прошлых лет можно посмотреть на Confluence.
С уважением,
команда DWH/BigData 💚
Приглашаем принять участие в исследовании «500 болей» от команды SberWorks! Исследование проводится ежегодно с целью выявить боли и проблемы, которые есть у участников команд разработки.
Принять участие можно одним из двух способов:
1) Пройти анонимный опрос и поделиться тем, что вас беспокоит (доступен до 30 мая).
2) Принять участие в глубинном интервью, для этого напишите комьюнити-менеджеру @valerie_smk.
- Период интервью: со 2 июня по 31 июля.
- Все данные анонимны, результаты публикуются в обезличенном виде.
Результаты прошлых лет можно посмотреть на Confluence.
С уважением,
команда DWH/BigData 💚
Друзья, привет!
Ранее мы уже рассказывали, что научились работать с базами данных на естественном языке. Сегодня наши эксперты из команды RnD запатентовали свое решение, подтвердив наличие в Сбере передовой экспертизы в данной области 🔥🔥
Патент «Способ и система формирования запросов к базе данных на естественном языке» описывает решение, которое упрощает работу с базами данных для аналитиков, менеджеров и разработчиков, экономя время и снижая количество ошибок. Опробовать решение можно в Лаборатории данных.
В чем суть?
🔹Повышение точности преобразования запросов с ЕЯ на язык SQL;
🔹Автоматическая проверка и корректировка запросов;
🔹Использование LLM для анализа и перевода команд.
Авторы патента: Вадим Сурпин, Максим Радионов, Андрей Баллес, Никита Негго (SberData).
👉 Присоединяйтесь – работайте с данными проще и помогайте нам делать продукт лучше!
P.S. В январе мы провели митап по патентованию ИТ-решений. Собирайте ваши идеи и превращайте их в реальное будущее!
С уважением,
команда DWH/BigData 💚
Ранее мы уже рассказывали, что научились работать с базами данных на естественном языке. Сегодня наши эксперты из команды RnD запатентовали свое решение, подтвердив наличие в Сбере передовой экспертизы в данной области 🔥🔥
Патент «Способ и система формирования запросов к базе данных на естественном языке» описывает решение, которое упрощает работу с базами данных для аналитиков, менеджеров и разработчиков, экономя время и снижая количество ошибок. Опробовать решение можно в Лаборатории данных.
В чем суть?
🔹Повышение точности преобразования запросов с ЕЯ на язык SQL;
🔹Автоматическая проверка и корректировка запросов;
🔹Использование LLM для анализа и перевода команд.
Авторы патента: Вадим Сурпин, Максим Радионов, Андрей Баллес, Никита Негго (SberData).
👉 Присоединяйтесь – работайте с данными проще и помогайте нам делать продукт лучше!
P.S. В январе мы провели митап по патентованию ИТ-решений. Собирайте ваши идеи и превращайте их в реальное будущее!
С уважением,
команда DWH/BigData 💚
❤7👍4🔥2👎1
AI vs безопасность: вы еще не знаете, кто победит? Мы расскажем!
Друзья, привет!
Приглашаем на круглый стол в формате livе-подкаста. Узнайте, какие прогнозы в кибербезопасности уже сбылись, куда движется GenAI и как усилить защиту данных.
📅 4 июня в 16:00
🎤 Онлайн в Открытом диалоге
❗️Зарегистрируйтесь, чтобы мероприятие встало в ваш календарь:)
Спикеры: Дмитрий Смирнов (Департамент кибербезопасности), Дмитрий Жиров (SberData), представители МГТУ им. Н.Э. Баумана.
Модератор: Иван Коньков (SberData).
🔥 Специальный гость: Андрей Масалович, «Кибердед», ученый, преподаватель, подполковник спецслужб в отставке, IT-специалист по информационной безопасности, OSINT и конкурентной разведке.
Ждем вас!
С уважением,
команда DWH/BigData 💚
Друзья, привет!
Приглашаем на круглый стол в формате livе-подкаста. Узнайте, какие прогнозы в кибербезопасности уже сбылись, куда движется GenAI и как усилить защиту данных.
📅 4 июня в 16:00
🎤 Онлайн в Открытом диалоге
❗️Зарегистрируйтесь, чтобы мероприятие встало в ваш календарь:)
Спикеры: Дмитрий Смирнов (Департамент кибербезопасности), Дмитрий Жиров (SberData), представители МГТУ им. Н.Э. Баумана.
Модератор: Иван Коньков (SberData).
🔥 Специальный гость: Андрей Масалович, «Кибердед», ученый, преподаватель, подполковник спецслужб в отставке, IT-специалист по информационной безопасности, OSINT и конкурентной разведке.
Ждем вас!
С уважением,
команда DWH/BigData 💚