This media is not supported in your browser
VIEW IN TELEGRAM
Спикер Александр Бергер поделился своими впечатлениями после выступления с докладом «Data Quality как distributed-система: паттерны отказоустойчивости для данных» 🔥
#DataInternalsХ2025
#DataInternalsХ2025
Please open Telegram to view this post
VIEW IN TELEGRAM
❤5🔥5👍3🤔1
❤4🔥2👌2
Приближаемся к финалу нашей деловой программы:
📍Зал Ratusha
17:00 — «Вы строите Lakehouse, а сторадж строит вам проблемы» Дмитрий Листвин (Авито)
18:00 — «Круглый стол – открытый микрофон «Как вырастить специалиста по базам данных?» Константин Ратвин (МФТИ), Руслан Савченко (Яндекс), Николай Ижиков (СберТех), Станислав Моисеев (Т-Банк), Сергей Петренко (VK Tech, Tarantool), Федор Кирдяшов (Arenadata)
📍Зал Grace
17:00 — «Data Governance в финтехе: конкурентное преимущество в эпоху AI» Александр Бояркин (Альфа-Банк)
17:25 — «Python вместо ручек. Как мы автоматизировали проставление атрибутов сущностей в дата-каталоге» Марина Суслова (hh. ru)
17:50 — «Работа над качеством данных — вершина айcберга или дно впадины?» Ирина Шахтарина (Сбер)
📍Зал Wood
17:00 — «Мастер класс: «От события до дашборда в облаках: практика по созданию потоковой платформы на Kubernetes» Сергей Емельянов (VK Tech)
📍Зал Secret
17:00 — «Балансировка данных на кластерах OpenSearch: покоординатный спуск» Дмитрий Потапов (Yandex Cloud)
📍Зал Ratusha
17:00 — «Вы строите Lakehouse, а сторадж строит вам проблемы» Дмитрий Листвин (Авито)
18:00 — «Круглый стол – открытый микрофон «Как вырастить специалиста по базам данных?» Константин Ратвин (МФТИ), Руслан Савченко (Яндекс), Николай Ижиков (СберТех), Станислав Моисеев (Т-Банк), Сергей Петренко (VK Tech, Tarantool), Федор Кирдяшов (Arenadata)
📍Зал Grace
17:00 — «Data Governance в финтехе: конкурентное преимущество в эпоху AI» Александр Бояркин (Альфа-Банк)
17:25 — «Python вместо ручек. Как мы автоматизировали проставление атрибутов сущностей в дата-каталоге» Марина Суслова (hh. ru)
17:50 — «Работа над качеством данных — вершина айcберга или дно впадины?» Ирина Шахтарина (Сбер)
📍Зал Wood
17:00 — «Мастер класс: «От события до дашборда в облаках: практика по созданию потоковой платформы на Kubernetes» Сергей Емельянов (VK Tech)
📍Зал Secret
17:00 — «Балансировка данных на кластерах OpenSearch: покоординатный спуск» Дмитрий Потапов (Yandex Cloud)
❤4👍3🔥3
👍3🔥2🥰2
Вот и завершается деловая часть нашей программы 🤍
Приглашаем вас присоединиться к закрытию конференции в зале Ratusha в 19:00.
А уже в 19:30 мы будем ждать вас на afterparty, где вы сможете расслабиться после насыщенного дня, пообщаться с единомышленниками, обменяться идеями и эмоциями 🔥
Приглашаем вас присоединиться к закрытию конференции в зале Ratusha в 19:00.
А уже в 19:30 мы будем ждать вас на afterparty, где вы сможете расслабиться после насыщенного дня, пообщаться с единомышленниками, обменяться идеями и эмоциями 🔥
❤3👍2🔥2
Media is too big
VIEW IN TELEGRAM
Делимся моментами с круглого стола «Как вырастить специалиста по базам данных?» ⚡️
#DataInternalsX2025
#DataInternalsX2025
❤5👍3🔥3
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
❤5👍4🔥3
Друзья, уже сейчас вы можете найти свои фотографии в нашем паблике ВКонтакте
Смотреть, лайкать и скачивать здесь
Смотреть, лайкать и скачивать здесь
❤5👍3🔥3
Транзакционная работа с топиками: архитектура и сравнение решений в Apache Kafka и YDB Topics
С 2013 года в Яндексе использовали Kafka для потоковой передачи данных, но со временем она перестала справляться с растущими объёмами, и в 2017 году в компании перешли на собственное решение. Брокер сообщений YDB Topics во многом вдохновлялся Kafka: в нём также есть топики, партиции и аналогичные способы работы с данными. Но есть и существенные отличия.
Под катом — статья по мотивам доклада с Highload про архитектуру транзакций в системах и интересные для разработчиков детали и нюансы, которые обсуждались на конференции.
С 2013 года в Яндексе использовали Kafka для потоковой передачи данных, но со временем она перестала справляться с растущими объёмами, и в 2017 году в компании перешли на собственное решение. Брокер сообщений YDB Topics во многом вдохновлялся Kafka: в нём также есть топики, партиции и аналогичные способы работы с данными. Но есть и существенные отличия.
Под катом — статья по мотивам доклада с Highload про архитектуру транзакций в системах и интересные для разработчиков детали и нюансы, которые обсуждались на конференции.
Хабр
Транзакционная работа с топиками: архитектура и сравнение решений в Apache Kafka и YDB Topics
Привет, Хабр! Меня зовут Алексей Николаевский, и мы с командой делаем СУБД Яндекса. С 2013 года в Яндексе использовали Kafka для потоковой передачи данных. Но Kafka со временем перестала справляться с...
🔥6
Чтобы принимать верные решения и создавать прорывные продукты, нужно постоянно быть в потоке: знать последние тренды, иметь доступ к лучшим практикам и уметь быстро применять их в работе.
Но как успевать за всем? Где брать время на поиск и фильтрацию тонн информации?
Представляем вам Поддерживающую базу знаний — ваш персональный пропуск в мир экспертизы для разработчиков, архитекторов и лидеров цифровой индустрии.
Что вы получите уже сегодня:
🚀 Мгновенный доступ к инсайдам. Записи всех конференций — уже через две недели после их проведения, а не через полгода, как для всех остальных. Вы будете первыми знать о ключевых обновлениях и трендах.
📚 Более 4000 единиц эксклюзивного контента с профессиональных конференций. Перестаньте тратить время на поиск — начните эффективно учиться и применять.
🔧 Практические руководства от экспертов. Мы не просто даем теорию. Мы собираем готовые алгоритмы действий из видео, статей и кейсов, которые ваша команда сможет использовать в проектах сразу же.
💡 Эксклюзив: встреча с экспертом. К каждому гайду мы организуем live-сессию с экспертом. Получайте ответы на свои вопросы и ценные инсайты из первых рук для ускорения развития и уверенности в каждом решении.
Переходите по ссылке https://clck.ru/3PWnhE, регистрируйтесь и получите полный доступ к библиотеке на 1 месяц в подарок.
Но как успевать за всем? Где брать время на поиск и фильтрацию тонн информации?
Представляем вам Поддерживающую базу знаний — ваш персональный пропуск в мир экспертизы для разработчиков, архитекторов и лидеров цифровой индустрии.
Что вы получите уже сегодня:
🚀 Мгновенный доступ к инсайдам. Записи всех конференций — уже через две недели после их проведения, а не через полгода, как для всех остальных. Вы будете первыми знать о ключевых обновлениях и трендах.
📚 Более 4000 единиц эксклюзивного контента с профессиональных конференций. Перестаньте тратить время на поиск — начните эффективно учиться и применять.
🔧 Практические руководства от экспертов. Мы не просто даем теорию. Мы собираем готовые алгоритмы действий из видео, статей и кейсов, которые ваша команда сможет использовать в проектах сразу же.
💡 Эксклюзив: встреча с экспертом. К каждому гайду мы организуем live-сессию с экспертом. Получайте ответы на свои вопросы и ценные инсайты из первых рук для ускорения развития и уверенности в каждом решении.
Переходите по ссылке https://clck.ru/3PWnhE, регистрируйтесь и получите полный доступ к библиотеке на 1 месяц в подарок.
❤4
С вас честное мнение, с нас приятный бонус 👀
Помогите нам сделать следующую конференцию Data Internals X еще лучше и полезнее, пройдя небольшой опрос!
В конце опроса — ссылки на ранний доступ к видео с докладами
Помогите нам сделать следующую конференцию Data Internals X еще лучше и полезнее, пройдя небольшой опрос!
В конце опроса — ссылки на ранний доступ к видео с докладами
❤6👍3
В IT и науке в России полно крутых экспертов, которые делают масштабные tech проекты, но редко выходят в публичное пространство.
Мы, Tech Kitchen, делаем так, чтобы это менялось:
🙌 Помогаем экспертам делиться знаниями и получать обратную связь от сообщества
🚀 Создаем точку притяжения для тех, кто любит науку, технологии и хочет прокачивать экспертизу
🧠 Показываем технологии «под другим соусом», чтобы заглянуть на технологическую кухню и удивиться, что даже серьезные вещи могут быть увлекательными!
Подписывайся и залипай на тех, кто двигает tech!
Мы, Tech Kitchen, делаем так, чтобы это менялось:
🙌 Помогаем экспертам делиться знаниями и получать обратную связь от сообщества
🚀 Создаем точку притяжения для тех, кто любит науку, технологии и хочет прокачивать экспертизу
🧠 Показываем технологии «под другим соусом», чтобы заглянуть на технологическую кухню и удивиться, что даже серьезные вещи могут быть увлекательными!
Подписывайся и залипай на тех, кто двигает tech!
❤4👍2🔥2
Media is too big
VIEW IN TELEGRAM
Современный data engineering — это искусство управления потоками данных в реальном времени.
Как построить надежные ETL/ELT пайплайнов, работать с Apache Kafka и Spark в production, организовать data lake и data mesh архитектур?
🖐️ Приглашаем вас на HighLoad++ 2025 — в секции «Data Engineering» вас ждут 9 докладов с ответами на эти вопросы. Вы разберете весь путь данных: от сбора и валидации до обработки и доставки в хранилища. Речь пойдет о системах, обрабатывающих миллиарды событий в день.
Узнайте, как обеспечить качество данных, минимизировать задержки и масштабировать обработку.
Приходите и забирайте готовые решения для своих проектов!
🔴 Форматы участия: онлайн и офлайн
Проходите на сайт, выбирайте доклады на актуальные для вас темы и присоединяйтесь к нам 6 и 7 ноября на HighLoad++ 2025 🙌
Как построить надежные ETL/ELT пайплайнов, работать с Apache Kafka и Spark в production, организовать data lake и data mesh архитектур?
🖐️ Приглашаем вас на HighLoad++ 2025 — в секции «Data Engineering» вас ждут 9 докладов с ответами на эти вопросы. Вы разберете весь путь данных: от сбора и валидации до обработки и доставки в хранилища. Речь пойдет о системах, обрабатывающих миллиарды событий в день.
Узнайте, как обеспечить качество данных, минимизировать задержки и масштабировать обработку.
Приходите и забирайте готовые решения для своих проектов!
Проходите на сайт, выбирайте доклады на актуальные для вас темы и присоединяйтесь к нам 6 и 7 ноября на HighLoad++ 2025 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
❤5👍2🔥2
Система управления базами данных — звучит страшно и очень громоздко. Но мы сегодня остановимся только на ключевом с точки зрения производительности компоненте — системе хранения данных.
Программист Владимир Комаров рассказал, как развивались системы управления базами данных:
✦ С чего все начиналось
✦ Как система хранения данных СУБД эволюционировала
✦ В каком состоянии эта область находится сейчас
✦ Существует ли идеальная СУБД, и если нет, то как приблизиться к идеалу
Читать статью
🔥 — уже читаю
❤️ — сохраню, вернусь позже
👍 — отправлю друллеге
Программист Владимир Комаров рассказал, как развивались системы управления базами данных:
✦ С чего все начиналось
✦ Как система хранения данных СУБД эволюционировала
✦ В каком состоянии эта область находится сейчас
✦ Существует ли идеальная СУБД, и если нет, то как приблизиться к идеалу
Читать статью
🔥 — уже читаю
❤️ — сохраню, вернусь позже
👍 — отправлю друллеге
Хабр
Эволюция архитектуры баз данных
Система управления базами данных — крайне сложный программный продукт, и рассказ о его архитектуре потянет на целый увесистый том. А поскольку заголовок обещает нам не просто «архитектуру», а даже...
❤4🔥4👍3🌚1