Конференция HighLoad++ — это о том, как устроены инструменты, которые мы используем ежедневно. Знание внутрянки инструментов позволяет использовать их с максимальной эффективностью.
🖐️ Принесли вам записи 7 докладов с конференции Saint HighLoad++ 2024, в которых вы погрузитесь во внутрянку баз данных.
1) О распределённых транзакциях. Владимир Комаров
Доклад от автора книги «Путеводитель по базам данных», человека, разбирающегося в предметной области максимально глубоко. На примере конкретных баз данных рассмотрены паттерны распределенных транзакций. Квинтэссенция архитектурного опыта, максимально полезная информация за минимальное время.
VK Видео
RUTUBE
2) YTsaurus SPYT: внедряем Spark SQL в массы. Алексей Шишкин
История от разработчиков YTsaurus о том, как сделать собственный клиент к Spark и на уровне сетевого протокола отправлять к нему запросы из удобного веб-интерфейса.
VK Видео
RUTUBE
3) Как научить MongoDB делать горячие физические бэкапы. Юрий Фролов
История о том, как Яндекс возвращал возможность физических бэкапов в MongoDB. В докладе много подробностей про движок базы, про подход MongoDB к хранению данных и про то, как написать собственную логику бэкапа.
VK Видео
RUTUBE
4) Про UUID v.7. Андрей Бородин
Андрей делает Яндекс.Облако, хорошо разбирается в базах и пишет код, чтобы они работали лучше. В своем докладе он рассказал о патче, который добавляет поддержку UUID в качестве primary key для PostgreSQL. И о том, почему так важно реализовать RFC 7 и 8, а не просто «как-то сгенерировать 16 байт».
VK Видео
RUTUBE
5) Гарантии доставки сообщений в YDB Topics. Александр Зевайкин
Докладчик погрузит вас во внутреннее устройство брокеров сообщений, вы узнаете, как правильно «готовить» exactly-one и какие улучшения для этого типа доставки предлагает YDB Topics относительно Kafka.
VK Видео
RUTUBE
6) Переосмысление Picodata как cluster-first-СУБД. Ярослав Дынников
Ярослав много лет разрабатывал Tarantool, а теперь использует его в создании базы данных Picodata. Он рассказал, зачем бизнесу сейчас нужны распределенные OLTP-решения, как разные продукты реализуют «распределенность» и какими принципами руководствовалась компания, собирая свое решение в 2024 году.
VK Видео
RUTUBE
7) Redis — такой простой и такой сложный! Андрей Комягин
Redis уже давно не является чем-то новым. Каждый использует его немного по-своему и практически каждый думает, что это всё элементарно. Этот доклад покажет, что возможностей и нюансов очень много и, даже если сейчас вам это не понадобится, когда-то пригодится точно.
VK Видео
RUTUBE
Продуктивного просмотра и отличных выходных 🙌
🖐️ Принесли вам записи 7 докладов с конференции Saint HighLoad++ 2024, в которых вы погрузитесь во внутрянку баз данных.
1) О распределённых транзакциях. Владимир Комаров
Доклад от автора книги «Путеводитель по базам данных», человека, разбирающегося в предметной области максимально глубоко. На примере конкретных баз данных рассмотрены паттерны распределенных транзакций. Квинтэссенция архитектурного опыта, максимально полезная информация за минимальное время.
VK Видео
RUTUBE
2) YTsaurus SPYT: внедряем Spark SQL в массы. Алексей Шишкин
История от разработчиков YTsaurus о том, как сделать собственный клиент к Spark и на уровне сетевого протокола отправлять к нему запросы из удобного веб-интерфейса.
VK Видео
RUTUBE
3) Как научить MongoDB делать горячие физические бэкапы. Юрий Фролов
История о том, как Яндекс возвращал возможность физических бэкапов в MongoDB. В докладе много подробностей про движок базы, про подход MongoDB к хранению данных и про то, как написать собственную логику бэкапа.
VK Видео
RUTUBE
4) Про UUID v.7. Андрей Бородин
Андрей делает Яндекс.Облако, хорошо разбирается в базах и пишет код, чтобы они работали лучше. В своем докладе он рассказал о патче, который добавляет поддержку UUID в качестве primary key для PostgreSQL. И о том, почему так важно реализовать RFC 7 и 8, а не просто «как-то сгенерировать 16 байт».
VK Видео
RUTUBE
5) Гарантии доставки сообщений в YDB Topics. Александр Зевайкин
Докладчик погрузит вас во внутреннее устройство брокеров сообщений, вы узнаете, как правильно «готовить» exactly-one и какие улучшения для этого типа доставки предлагает YDB Topics относительно Kafka.
VK Видео
RUTUBE
6) Переосмысление Picodata как cluster-first-СУБД. Ярослав Дынников
Ярослав много лет разрабатывал Tarantool, а теперь использует его в создании базы данных Picodata. Он рассказал, зачем бизнесу сейчас нужны распределенные OLTP-решения, как разные продукты реализуют «распределенность» и какими принципами руководствовалась компания, собирая свое решение в 2024 году.
VK Видео
RUTUBE
7) Redis — такой простой и такой сложный! Андрей Комягин
Redis уже давно не является чем-то новым. Каждый использует его немного по-своему и практически каждый думает, что это всё элементарно. Этот доклад покажет, что возможностей и нюансов очень много и, даже если сейчас вам это не понадобится, когда-то пригодится точно.
VK Видео
RUTUBE
Продуктивного просмотра и отличных выходных 🙌
🔥22❤1👍1🤩1
Дмитрий Синявский, SR-инженер в Ви.Tech, приглашает вас на свой доклад «Как добыть SLO: источники и инструменты гномов SREдней полосы», с которым он выступит на Saint HighLoad++ 2025.
В этом видео он поделился, о чем вы узнаете и что получите, если придете послушать 😉
В этом видео он поделился, о чем вы узнаете и что получите, если придете послушать 😉
🆒20❤3🔥3😁2
На следующие 5 докладов из секции «Базы данных и системы хранения» особое внимание советуем обратить:
- разработчикам информационных систем на основе СУБД;
- инженерам и DBA, которые сталкиваются с задачами миграции больших объемов данных, решардирования и минимизации downtime;
- Backend-инженерам, особенно тем, в стеке которых есть PostgreSQL;
- архитекторам, SRE-специалистам, инженерам;
- системным программистам. ⤵️
1) Пределы масштабирования дисковой СУБД Сокол. Андрей Коротченко (РЕЛЭКС)
Из доклада вы узнаете, как дисковая СУБД Сокол, реализованная на неблокирующих подходах, справляется с высокими нагрузками и масштабированием. А также сравните ее возможности с другими системами.
2) Как мы без downtime шардировали и мигрировали MongoDB на 20 ТБ. Иван Перевощиков (Авито)
Рассказ о типовой ситуации в большом бизнесе, когда команде приходится решать несколько задач одновременно: переезд базы в Kubernetes для запаса по нагрузке, решардирование со сменой ключа и все это без даунтайма. Спикер покажет, какие инструменты выбрали, как доработали и что получилось.
3) Эволюция PostgreSQL-хранилища размещений в Авито. Евгений Константинов (Авито)
Инженеры Авито делятся опытом масштабирования базы для размещений объявлений — фактически гигантского упорядоченного «лога» с метаинформацией и со сложной логикой обновления. Отчасти ретроспективный доклад о том, какие оптимизации использовали и к чему пришли в результате.
4) Собственное файловое хранилище для 350 Пбайт видеоконтента. Эдгар Воскресенский (RUTUBE)
В докладе раскрывается устройство хранилища видеоконтента RUTUBE с глубокими деталями реализации, архитектурными решениями и цифрами реальной нагрузки. Докладчик делится практическим опытом эксплуатации хранилища и адаптации под хранение видео.
5) SPDK под капотом: лезем внутрь дисковой подсистемы в user-space. Василий Иванов (MWS (МТС Web Services))
SPDK используют Alibaba, nVidia и другие компании, разрабатывающие свои облака. Доклад Василия — это история о том, как SPDK на масштабах МТС проседал по производительности, когда клиентов становилось особенно много. И о том, как компания сделала собственный форк, часть наработок которого уже передана в апстрим.
До скорой встречи на Saint HighLoad++ 2025 🖐️
✅ Программа конференции, расписание и билеты на сайте
- разработчикам информационных систем на основе СУБД;
- инженерам и DBA, которые сталкиваются с задачами миграции больших объемов данных, решардирования и минимизации downtime;
- Backend-инженерам, особенно тем, в стеке которых есть PostgreSQL;
- архитекторам, SRE-специалистам, инженерам;
- системным программистам. ⤵️
1) Пределы масштабирования дисковой СУБД Сокол. Андрей Коротченко (РЕЛЭКС)
Из доклада вы узнаете, как дисковая СУБД Сокол, реализованная на неблокирующих подходах, справляется с высокими нагрузками и масштабированием. А также сравните ее возможности с другими системами.
2) Как мы без downtime шардировали и мигрировали MongoDB на 20 ТБ. Иван Перевощиков (Авито)
Рассказ о типовой ситуации в большом бизнесе, когда команде приходится решать несколько задач одновременно: переезд базы в Kubernetes для запаса по нагрузке, решардирование со сменой ключа и все это без даунтайма. Спикер покажет, какие инструменты выбрали, как доработали и что получилось.
3) Эволюция PostgreSQL-хранилища размещений в Авито. Евгений Константинов (Авито)
Инженеры Авито делятся опытом масштабирования базы для размещений объявлений — фактически гигантского упорядоченного «лога» с метаинформацией и со сложной логикой обновления. Отчасти ретроспективный доклад о том, какие оптимизации использовали и к чему пришли в результате.
4) Собственное файловое хранилище для 350 Пбайт видеоконтента. Эдгар Воскресенский (RUTUBE)
В докладе раскрывается устройство хранилища видеоконтента RUTUBE с глубокими деталями реализации, архитектурными решениями и цифрами реальной нагрузки. Докладчик делится практическим опытом эксплуатации хранилища и адаптации под хранение видео.
5) SPDK под капотом: лезем внутрь дисковой подсистемы в user-space. Василий Иванов (MWS (МТС Web Services))
SPDK используют Alibaba, nVidia и другие компании, разрабатывающие свои облака. Доклад Василия — это история о том, как SPDK на масштабах МТС проседал по производительности, когда клиентов становилось особенно много. И о том, как компания сделала собственный форк, часть наработок которого уже передана в апстрим.
До скорой встречи на Saint HighLoad++ 2025 🖐️
✅ Программа конференции, расписание и билеты на сайте
👍1
В этом видео Дмитрий Ларионов приглашает вас на свой доклад «Как мы переписали аутентификацию в микросервисной платформе»
Дмитрий расскажет про перевод платформы партнерских отношений МТС с устаревшего корпоративного SDK и корпоративного агента SSO на OAuth2/ OIDC с рефакторингом всей внутренней архитектуры безопасности. Некоторые подробности узнайте, послушав видео 😉
Ждем вас на Saint HighLoad++ 2025 🙌
✅ Полная программа конференции и расписание на сайте
Дмитрий расскажет про перевод платформы партнерских отношений МТС с устаревшего корпоративного SDK и корпоративного агента SSO на OAuth2/ OIDC с рефакторингом всей внутренней архитектуры безопасности. Некоторые подробности узнайте, послушав видео 😉
Ждем вас на Saint HighLoad++ 2025 🙌
✅ Полная программа конференции и расписание на сайте
👍20🔥2
В этой статье никакой воды, только хардкор: как устроена доставка защищенного видео в современных CDN, почему HTTPS — это не просто галочка, и как выжать максимум из железа и протоколов. Под капотом — KTLS, Zero-copy, оптимизация CPU и настоящие инженерные лайфхаки, проверенные на сотнях тысяч RPS.
🖐️ Кирилл Шваков из Kinescope делится реальным опытом разгона Go TLS
🖐️ Кирилл Шваков из Kinescope делится реальным опытом разгона Go TLS
Хабр
Разгоняем Go TLS до 100 Gbps с сервера: опыт Kinescope
Современные пользователи ожидают, что видео загрузится мгновенно, не зависнет на 47-й секунде и будет защищено от посторонних глаз. При этом большинство из них не догадывается, кто именно доставляет...
👍33⚡1🔥1
Три доклада из секции «Безопасность», которые вам нужно послушать, если:
✔️ вы стремитесь модернизировать подходы к аутентификации, снизить риски утечек данных и соответствовать современным стандартам;
✔️ хотите узнать опыт, как удалось пересобрать SIEM-систему, чтобы обрабатывать больше 2 млн событий в секунду и хранить суммарно больше 10 петабайт данных в сжатом виде;
✔️ хотите разобрать 3 ключевых принципа, которые помогают создавать безопасные, но человечные интерфейсы. ⤵️
1) Passwordless в PAM: миф или реальность? Артём Назаретян (БИЗон)
История о том, как профессиональные безопасники делают надежную аутентификацию в большой компании со множеством различных сервисов и требований.
2) Потоковый коррелятор для обработки более 2 млн EPS. Андрей Борисов, Алексей Киселев (VK)
Доклад описывает создание высокопроизводительного коррелятора событий для SIEM на базе FlinkCEP и собственного DSL, который обходит лимиты готовых решений и достигает 1M EPS уникальных событий при ~100 правилах на 720 vCPU.
3) Темные паттерны безопасности: когда защита мешает пользователю. Артем Бачевский, Наталья Проценко (Солар)
Вы создаете сервис и комплексно подумали о безопасности. И даже со стороны пользователя предусмотрели регулярные разлогинивания, поставили CAPTCHA, написали миллион предупреждений. Увы, вы все могли сделать не так. Возможно, этот доклад поможет вам сделать сервис более безопасным и дружелюбным.
До скорой встречи на Saint HighLoad++ 2025 ⚡
✅ Полная программа конференции и расписание на сайте
✔️ вы стремитесь модернизировать подходы к аутентификации, снизить риски утечек данных и соответствовать современным стандартам;
✔️ хотите узнать опыт, как удалось пересобрать SIEM-систему, чтобы обрабатывать больше 2 млн событий в секунду и хранить суммарно больше 10 петабайт данных в сжатом виде;
✔️ хотите разобрать 3 ключевых принципа, которые помогают создавать безопасные, но человечные интерфейсы. ⤵️
1) Passwordless в PAM: миф или реальность? Артём Назаретян (БИЗон)
История о том, как профессиональные безопасники делают надежную аутентификацию в большой компании со множеством различных сервисов и требований.
2) Потоковый коррелятор для обработки более 2 млн EPS. Андрей Борисов, Алексей Киселев (VK)
Доклад описывает создание высокопроизводительного коррелятора событий для SIEM на базе FlinkCEP и собственного DSL, который обходит лимиты готовых решений и достигает 1M EPS уникальных событий при ~100 правилах на 720 vCPU.
3) Темные паттерны безопасности: когда защита мешает пользователю. Артем Бачевский, Наталья Проценко (Солар)
Вы создаете сервис и комплексно подумали о безопасности. И даже со стороны пользователя предусмотрели регулярные разлогинивания, поставили CAPTCHA, написали миллион предупреждений. Увы, вы все могли сделать не так. Возможно, этот доклад поможет вам сделать сервис более безопасным и дружелюбным.
До скорой встречи на Saint HighLoad++ 2025 ⚡
✅ Полная программа конференции и расписание на сайте
❤5👍2🔥2🤔1
Понять механизмы работы современных технологий автопрома и их влияния на безопасность, а еще узнать, как трансформируется индустрия космических дата-центров, — вы сможете на докладах из секции «Технологии будущего», о которых рассказываем сегодня:
1) Как автомобильные инженеры устроили техническую гонку между собой, но забыли про пользователей. Илья Стариков (MWS (МТС Web Services))
Современный автомобиль, да и другие средства передвижения — это распределенная архитектура. У нее есть фронтенд, есть бэкенд, механическая составляющая, и есть интерфейс взаимодействия. Доклад посвящен развитию автомобиля как информационной системы.
2) Почему в космосе (пока) нет дата-центров. Александр Токарев (Voxys)
Космос: такой далекий и одновременно близкий. Послушаем про актуальные задачи при размещении вычислительного оборудования не только на Земле: связь, тепло, питание и не только.
Ждем вас на Saint HighLoad++ 2025 🙌
✅ Программа конференции и расписание на сайте
1) Как автомобильные инженеры устроили техническую гонку между собой, но забыли про пользователей. Илья Стариков (MWS (МТС Web Services))
Современный автомобиль, да и другие средства передвижения — это распределенная архитектура. У нее есть фронтенд, есть бэкенд, механическая составляющая, и есть интерфейс взаимодействия. Доклад посвящен развитию автомобиля как информационной системы.
2) Почему в космосе (пока) нет дата-центров. Александр Токарев (Voxys)
Космос: такой далекий и одновременно близкий. Послушаем про актуальные задачи при размещении вычислительного оборудования не только на Земле: связь, тепло, питание и не только.
Ждем вас на Saint HighLoad++ 2025 🙌
✅ Программа конференции и расписание на сайте
Владимир Плизга, ведущий бэкенд-инженер в команде разработки AggreGate, приглашает вас на свой доклад «Как сделать исполнение low-code прозрачным: опыт большой IoT-платформы»
В этом видео Владимир поделился, о чем он расскажет и кому доклад особенно будет полезен, послушайте 😉
В этом видео Владимир поделился, о чем он расскажет и кому доклад особенно будет полезен, послушайте 😉
👍19🔥3
Проектирование долгоживущего высоконагруженного приложения. Шардирование высоконагруженного сервиса клиентских данных. Построение системы, которая выдерживает 10K+ запросов в день и выдает саммари за 5–15 минут. Возможности, которые появляются в результате применения AnyCast поверх Overlay-туннелей в связке с российскими криптошлюзами. Реальный архитектурный путь от сбора и постановки требований до работающей системы…
— все это вы найдете в докладах из секции «Архитектура» ⤵️
1) Как выбрать технологии для высоконагруженного проекта и не привлечь внимание санитаров. Дмитрий Кривопальцев, Вадим Клеба (Яндекс 360)
Можно ли писать современные HL- и HA-проекты на Python, Ruby или PHP? Или же теперь мы никогда не вынырнем из Golang, Java и Rust? А что там с базами? PostgreSQL ли единой...
2) Шардирование БД на уровне балансировщика. Николай Прокофьев (Т-Банк)
Хотите знать, как Т-Банк шардирует большие данные? Да еще решардит без даунтаймов, и все это в 3 ДЦ! Приходите на доклад Николая!
3) Автоматическая суммаризация 10K встреч в день: от требований к продакшн-решению. Азер Шахвердиев (Контур)
Из доклада вы узнаете, как реализуется одна из фич, значительно упрощающих жизнь сотрудников, про ее архитектуру, с фокусом на ML-составляющие и ее интеграцию в большой прод.
4) Как «подружить» Anycast-маршрутизацию в ЦОД с ГОСТ-криптошлюзами. Илья Кондратьев (VK)
Большинство криптошлюзов несовместимо с Anycast, и это становится проблемой для привычной и удобной топологии дата-центра. Спикер расскажет, какие варианты рассматривала команда, почему выбрали AnyCast поверх Overlay-VPN, и как решение зарекомендовало себя в распределенной сети ЦОД.
5) Как бизнес-требования диктуют архитектуру: эволюция сервиса уведомлений в Lamoda Tech. Алексей Ситка (Lamoda Tech)
Качественный и отличный пример того, как не скатиться в оверинжиниринг, но развивать архитектуру вслед за изменениями бизнес-требований на конкретном примере.
До скорой встречи на Saint HighLoad++ 2025 ⚡
✅ Расписание конференции на сайте
— все это вы найдете в докладах из секции «Архитектура» ⤵️
1) Как выбрать технологии для высоконагруженного проекта и не привлечь внимание санитаров. Дмитрий Кривопальцев, Вадим Клеба (Яндекс 360)
Можно ли писать современные HL- и HA-проекты на Python, Ruby или PHP? Или же теперь мы никогда не вынырнем из Golang, Java и Rust? А что там с базами? PostgreSQL ли единой...
2) Шардирование БД на уровне балансировщика. Николай Прокофьев (Т-Банк)
Хотите знать, как Т-Банк шардирует большие данные? Да еще решардит без даунтаймов, и все это в 3 ДЦ! Приходите на доклад Николая!
3) Автоматическая суммаризация 10K встреч в день: от требований к продакшн-решению. Азер Шахвердиев (Контур)
Из доклада вы узнаете, как реализуется одна из фич, значительно упрощающих жизнь сотрудников, про ее архитектуру, с фокусом на ML-составляющие и ее интеграцию в большой прод.
4) Как «подружить» Anycast-маршрутизацию в ЦОД с ГОСТ-криптошлюзами. Илья Кондратьев (VK)
Большинство криптошлюзов несовместимо с Anycast, и это становится проблемой для привычной и удобной топологии дата-центра. Спикер расскажет, какие варианты рассматривала команда, почему выбрали AnyCast поверх Overlay-VPN, и как решение зарекомендовало себя в распределенной сети ЦОД.
5) Как бизнес-требования диктуют архитектуру: эволюция сервиса уведомлений в Lamoda Tech. Алексей Ситка (Lamoda Tech)
Качественный и отличный пример того, как не скатиться в оверинжиниринг, но развивать архитектуру вслед за изменениями бизнес-требований на конкретном примере.
До скорой встречи на Saint HighLoad++ 2025 ⚡
✅ Расписание конференции на сайте
👍1
💥 Примите участие в соревновании: «HighLoad++: оптимизация под нагрузкой», которое пройдет на Saint HighLoad++ 2025
📍 23 июня, 16:00, Зал «Нетворкошная»
✋ Трансляции и записи не будет
«Оптимизируй меня полностью!» — интенсивное интерактивное соревнование, где участники продемонстрируют свои навыки в оптимизации конфигурации баз данных и приложений для достижения максимальной производительности. Участникам предстоит работа с реальными сценариями нагрузки и ограниченными ресурсами, что потребует глубоких технических знаний и стратегического мышления.
Условия участия:
🔴 наличие ноутбука с поддержкой Docker Compose;
🔴 допускается как индивидуальное участие, так и командное (до 3 человек в команде);
🔴 перед началом соревнования каждый участник должен зарегистрироваться в месте проведения в системе, указав телеграм-аккаунт, имя/ник, выбрать основную технологию из списка (PostgreSQL, MySQL, MongoDB, ClickHouse, Java. Golang, Phyton и т.п.).
Победителей ждут призы 🔥
🎤 Ведущие соревнования:
Федор Васильев — CTO в процессинге xStack (руководит разработкой антифрод-систем, систем мониторинга и ML-исследованиями),
Алексей Жиряков (MWS (MTС Web Services)) — руководитель бэкенд-направления команды витрины в KION.
До скорой встречи на Saint HighLoad++ 2025 ⚡
✅ Расписание конференции на сайте
✋ Трансляции и записи не будет
«Оптимизируй меня полностью!» — интенсивное интерактивное соревнование, где участники продемонстрируют свои навыки в оптимизации конфигурации баз данных и приложений для достижения максимальной производительности. Участникам предстоит работа с реальными сценариями нагрузки и ограниченными ресурсами, что потребует глубоких технических знаний и стратегического мышления.
Условия участия:
Победителей ждут призы 🔥
🎤 Ведущие соревнования:
Федор Васильев — CTO в процессинге xStack (руководит разработкой антифрод-систем, систем мониторинга и ML-исследованиями),
Алексей Жиряков (MWS (MTС Web Services)) — руководитель бэкенд-направления команды витрины в KION.
До скорой встречи на Saint HighLoad++ 2025 ⚡
✅ Расписание конференции на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥21❤1
Что такое состязательные суффиксы, почему любая LLM им подвержена? Как найти действительно увлекательные моменты для вертикальных видео? Как гарантировать работодателям увеличение просмотров вакансий в 3-10 раз? Как трейдер-бот для Телеграм использует data-driven-подход для оптимизации бизнес-метрик?
Ответы на эти вопросы вы найдете в докладах из секции «Нейронные сети и искусственный интеллект (data science)». А еще узнаете результаты запуска языковой модели GigaChat MAX ⤵️
1) Обход защиты LLM при помощи состязательных суффиксов и AutoDAN. Никита Беляевский (Raft)
Как найти странный набор символов, скушав который в конце запроса, практически любая крупная LLM «сломается» и отключит цензуру? Как и почему это работает? Для чего это нужно? На все эти вопросы Никита даст ответы в докладе.
2) Как с помощью ИИ мы генерируем 130 тысяч шортсов в месяц. Александр Соколов (Оператор Газпром ИД)
Задача очень объемная: тут и содержательное машинное обучение, и ускорение кодирования видео, и другие оптимизации. И на каждом шаге есть свои лайфхаки, которыми и поделится Александр.
3) Динамическое ранжирование поисковой/рекомендательной выдачи в высоконагруженных системах: PID-регулятор для баланса KPI и релевантности. Марк Паненко (Ozon Банк)
ML-ранжирование хорошо работает, когда нужно выдать самый релевантный товар или поисковый результат. Но как только появляется платное продвижение своих позиций в выдаче — необходимо искать баланс между пользовательским опытом и выручкой. Доклад предлагает простое в реализации и управлении решение.
4) Автоматизированный алгоритмический трейдер-бот для управления и оптимизации ставок и бюджетов рекламных кампаний в Телеграм. Виктор Делисов, Ильшат Хафизов (MWS (МТС Web Services))
История создания трейдер-бота для управления тысячами рекламных кампаний на основе data-driven-подхода с целью максимизации ключевых бизнес-метрик на платформе Телеграм. Бот в режиме реального времени заменяет собой 100% функционала множества людей или может быть использован в качестве «цифрового консультанта». В основе лежит комплексная архитектура со своими контурами хранения, мощным ML-движком и интеграция с Telegram Ads API.
5) Обучение GigaChat MAX. Евгений Косарев (SberDevices)
В мире очень мало людей, которые именно учат свою LLM, а не вносят мелкие изменения в готовую. Когда один из таких людей рассказывает о том, как это делается, надо просто приходить и слушать. Без вариантов.
Ждем вас на Saint HighLoad++ 2025, стартуем уже в понедельник ⚡
✅ Расписание конференции на сайте
Ответы на эти вопросы вы найдете в докладах из секции «Нейронные сети и искусственный интеллект (data science)». А еще узнаете результаты запуска языковой модели GigaChat MAX ⤵️
1) Обход защиты LLM при помощи состязательных суффиксов и AutoDAN. Никита Беляевский (Raft)
Как найти странный набор символов, скушав который в конце запроса, практически любая крупная LLM «сломается» и отключит цензуру? Как и почему это работает? Для чего это нужно? На все эти вопросы Никита даст ответы в докладе.
2) Как с помощью ИИ мы генерируем 130 тысяч шортсов в месяц. Александр Соколов (Оператор Газпром ИД)
Задача очень объемная: тут и содержательное машинное обучение, и ускорение кодирования видео, и другие оптимизации. И на каждом шаге есть свои лайфхаки, которыми и поделится Александр.
3) Динамическое ранжирование поисковой/рекомендательной выдачи в высоконагруженных системах: PID-регулятор для баланса KPI и релевантности. Марк Паненко (Ozon Банк)
ML-ранжирование хорошо работает, когда нужно выдать самый релевантный товар или поисковый результат. Но как только появляется платное продвижение своих позиций в выдаче — необходимо искать баланс между пользовательским опытом и выручкой. Доклад предлагает простое в реализации и управлении решение.
4) Автоматизированный алгоритмический трейдер-бот для управления и оптимизации ставок и бюджетов рекламных кампаний в Телеграм. Виктор Делисов, Ильшат Хафизов (MWS (МТС Web Services))
История создания трейдер-бота для управления тысячами рекламных кампаний на основе data-driven-подхода с целью максимизации ключевых бизнес-метрик на платформе Телеграм. Бот в режиме реального времени заменяет собой 100% функционала множества людей или может быть использован в качестве «цифрового консультанта». В основе лежит комплексная архитектура со своими контурами хранения, мощным ML-движком и интеграция с Telegram Ads API.
5) Обучение GigaChat MAX. Евгений Косарев (SberDevices)
В мире очень мало людей, которые именно учат свою LLM, а не вносят мелкие изменения в готовую. Когда один из таких людей рассказывает о том, как это делается, надо просто приходить и слушать. Без вариантов.
Ждем вас на Saint HighLoad++ 2025, стартуем уже в понедельник ⚡
✅ Расписание конференции на сайте
🔥4👍1👏1
Клуб анонимных СТО — впервые на HighLoad++ ⚡
Топовые CTO сбросят маски вежливости и расскажут правду: как они принимают решения на миллионы, какие технологии переоценены, где ждать следующий крах, что ждет индустрию завтра и причем тут LLM.
Никаких записей, камер и дипломатии. Только честные ответы на неудобные вопросы: от вайб кодинга до выгорания команд. Узнайте инсайты, которые никогда не попадут в блоги и интервью.
❗️ Количество мест ограничено, приходите заранее — 23 июня, 19:10, «Зал 03 / Розовый». Трансляции и записи не будет.
🎤 Спикеры:
Евгений Кузовлев — СТО в Т-Банке,
Евгений Россинский — СТО ivi.
🖐️ До встречи на Saint HighLoad++ 2025
Топовые CTO сбросят маски вежливости и расскажут правду: как они принимают решения на миллионы, какие технологии переоценены, где ждать следующий крах, что ждет индустрию завтра и причем тут LLM.
Никаких записей, камер и дипломатии. Только честные ответы на неудобные вопросы: от вайб кодинга до выгорания команд. Узнайте инсайты, которые никогда не попадут в блоги и интервью.
🎤 Спикеры:
Евгений Кузовлев — СТО в Т-Банке,
Евгений Россинский — СТО ivi.
🖐️ До встречи на Saint HighLoad++ 2025
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥23😎2⚡1
Speed Networking — это нетворкинг для всех, кто хочет познакомиться с другими участниками конференции без особых усилий. Для участия необходима регистрация в месте проведения формата. Количество мест ограничено, запишитесь заранее❗️
📍Будет проходить в зале «Нетворкошная»
Программа и расписание на оба дня конференции:
🎤 Спикер Мария Церетели (Т-Банк) — руководитель группы надежности CRM.
«Под капотом: backend, архитектура, прод» . Глубокие техобсуждения. Как мы проектируем сложные системы, справляемся с нагрузкой, раскладываем монолиты и настраиваем CI/CD без боли. Архитектурные паттерны, кэширование, интеграции, контрактные API, очереди и все, что крутится под капотом современного highload-сервиса.
🔴 23 июня, 12:00
🔴 24 июня, 16:00
«Руководим, а не выживаем: управление командами и процессы». Тема закрытая, но открытая дискуссия для тимлидов, хедов, СТО и тех, кто рулит. Как расти без выгорания, держать баланс между техом и управлением, принимать тяжелые решения, масштабировать процессы и сохранять людей. Здесь не объясняют, кто такой тимлид — здесь обсуждают, как быть им лучше.
🔴 23 июня, 13:00
🔴 24 июня, 17:00
Свободная тема. Для обсуждения любых тем и расширения круга знакомств.
🔴 23 июня, 14:00
🔴 24 июня, 18:00
🎤 Спикер Татьяна Сущенко (VK) — Senior Product Manager @Vk, ex-Microsoft.
«Data, ML, LLM & Analytics: данные, которые работают на результат». Здесь собираются те, кто двигает данные — из логов, событий, транзакций и моделей. Как устроены аналитические пайплайны, как мы раскатываем ML в прод, где LLM планируются или уже встроены в рабочие процессы, какие эксперименты реально дают эффект. Если вы строите систему, которая что-то предсказывает, автоматизирует или просто помогает принимать решения — вам сюда.
🔴 24 июня, 12:00
«Надежность и безопасность: держим систему под контролем». Инциденты, отказоустойчивость, реагирование, инфраструктурная безопасность — все, что защищает бизнес и не дает системам падать. Здесь обсуждают не только мониторинг и SRE, но и безопасную архитектуру, уязвимости, контроль доступа, SOC и практики secure-by-default.
🔴 24 июня, 13:00
«Как мы работаем: инженерная культура, процессы и устойчивые практики». Обсудим, как в команде внедряются инженерные практики: код-ревью, документация, внутренние инструменты, quality gates и процессы, которые реально улучшают разработку. Без менеджерской бюрократии, с акцентом на то, как делать хорошо, понятно и стабильно.
🔴 24 июня, 14:00
На Speed Networking вас ждет обмен реальным опытом и обновление круга общения, быстрые точечные консультации по текущим вопросам, возможность узнать, как работают разные практики в других компаниях, почеленджить свои идеи и просто пообщаться, обсудить доклады.
Обязательно сохраните себе этот пост, чтобы расписание Speed Networking было под рукой, принимайте участие и приходите заранее 😉
🖐️ До встречи на Saint HighLoad++ 2025
📍Будет проходить в зале «Нетворкошная»
Программа и расписание на оба дня конференции:
🎤 Спикер Мария Церетели (Т-Банк) — руководитель группы надежности CRM.
«Под капотом: backend, архитектура, прод» . Глубокие техобсуждения. Как мы проектируем сложные системы, справляемся с нагрузкой, раскладываем монолиты и настраиваем CI/CD без боли. Архитектурные паттерны, кэширование, интеграции, контрактные API, очереди и все, что крутится под капотом современного highload-сервиса.
«Руководим, а не выживаем: управление командами и процессы». Тема закрытая, но открытая дискуссия для тимлидов, хедов, СТО и тех, кто рулит. Как расти без выгорания, держать баланс между техом и управлением, принимать тяжелые решения, масштабировать процессы и сохранять людей. Здесь не объясняют, кто такой тимлид — здесь обсуждают, как быть им лучше.
Свободная тема. Для обсуждения любых тем и расширения круга знакомств.
🎤 Спикер Татьяна Сущенко (VK) — Senior Product Manager @Vk, ex-Microsoft.
«Data, ML, LLM & Analytics: данные, которые работают на результат». Здесь собираются те, кто двигает данные — из логов, событий, транзакций и моделей. Как устроены аналитические пайплайны, как мы раскатываем ML в прод, где LLM планируются или уже встроены в рабочие процессы, какие эксперименты реально дают эффект. Если вы строите систему, которая что-то предсказывает, автоматизирует или просто помогает принимать решения — вам сюда.
«Надежность и безопасность: держим систему под контролем». Инциденты, отказоустойчивость, реагирование, инфраструктурная безопасность — все, что защищает бизнес и не дает системам падать. Здесь обсуждают не только мониторинг и SRE, но и безопасную архитектуру, уязвимости, контроль доступа, SOC и практики secure-by-default.
«Как мы работаем: инженерная культура, процессы и устойчивые практики». Обсудим, как в команде внедряются инженерные практики: код-ревью, документация, внутренние инструменты, quality gates и процессы, которые реально улучшают разработку. Без менеджерской бюрократии, с акцентом на то, как делать хорошо, понятно и стабильно.
На Speed Networking вас ждет обмен реальным опытом и обновление круга общения, быстрые точечные консультации по текущим вопросам, возможность узнать, как работают разные практики в других компаниях, почеленджить свои идеи и просто пообщаться, обсудить доклады.
Обязательно сохраните себе этот пост, чтобы расписание Speed Networking было под рукой, принимайте участие и приходите заранее 😉
🖐️ До встречи на Saint HighLoad++ 2025
Please open Telegram to view this post
VIEW IN TELEGRAM
❤7🔥3🤩1
Практическая безопасность на Saint HighLoad++ 2025 🔥
Как защитить высоконагруженные системы и одновременно упростить жизнь администраторам?
В поисках ответа на этот вопрос разработчики БИЗон РАМ изучили множество лучших практик беспарольной аутентификации, погрузились в реальные кейсы корпоративных инфраструктур и уже не представляют своей жизни без FIDO2 или хотя бы SAML на завтрак.
С концентрированным опытом команды можно познакомиться на Saint HighLoad++ 2025 🤝
24 июня Артём Назаретян, руководитель платформы Privilleged Access Management, расскажет, как внедрить беспарольную аутентификацию в большой компании со множеством различных сервисов и требований.
📍13:30, Синий зал (№4), «Passwordless в PAM: миф или реальность?»
Как защитить высоконагруженные системы и одновременно упростить жизнь администраторам?
В поисках ответа на этот вопрос разработчики БИЗон РАМ изучили множество лучших практик беспарольной аутентификации, погрузились в реальные кейсы корпоративных инфраструктур и уже не представляют своей жизни без FIDO2 или хотя бы SAML на завтрак.
С концентрированным опытом команды можно познакомиться на Saint HighLoad++ 2025 🤝
24 июня Артём Назаретян, руководитель платформы Privilleged Access Management, расскажет, как внедрить беспарольную аутентификацию в большой компании со множеством различных сервисов и требований.
📍13:30, Синий зал (№4), «Passwordless в PAM: миф или реальность?»
🔥12❤1👍1
Саботёры правят ТЗ — игра, в которой исполнитель задачи будет делать жизнеспособный продукт и противостоять саботёрам, вносящим правки в ТЗ.
🎤 Ведущая игры — Татьяна Сущенко, Senior Product Manager @VK, ex-Microsoft, автор телеграм-канала Семейка продактов
Казалось бы, ТЗ — это главный источник правды. Но чем выше ты растешь в карьере, тем реже можешь ответить своим коллегам, что «этого не было в ТЗ». Нужно думать на шаг вперед. Нужно предвидеть, что в том самом ТЗ, которое для тебя центр и основа, рано или поздно появится или исчезнет пара слов, и это полностью поменяет картину мира.
Как если из словосочетания «Внутреннее CRM-решение» исчезнет слово «внутреннее».
Пытаясь стать лидерами рынка, из самых лучших побуждений, саботёры правят ТЗ.
На игре участники попрактикуются предусматривать неожиданные повороты и находить выходы из неочевидных ситуаций.
Участники разделятся на команды, в каждой из которых будет один защитник, остальные игроки — саботёры. Все как в жизни 😉
На старте у каждой команды будет ТЗ. Саботёры, действуя в своих интересах, будут устраивать каверзы, внося в ТЗ «небольшие правки», а защитники — эти каверзы отбивать, интегрировать, адаптировать, в общем, делать всё, чтобы эти неожиданные изменения не стали катастрофой для продукта.
✋ Обратите внимание: трансляции и записи не будет, приходите: 23 июня, 19:20, Зал «Нетворкошная»
🖐️ До встречи на Saint HighLoad++ 2025
🎤 Ведущая игры — Татьяна Сущенко, Senior Product Manager @VK, ex-Microsoft, автор телеграм-канала Семейка продактов
Казалось бы, ТЗ — это главный источник правды. Но чем выше ты растешь в карьере, тем реже можешь ответить своим коллегам, что «этого не было в ТЗ». Нужно думать на шаг вперед. Нужно предвидеть, что в том самом ТЗ, которое для тебя центр и основа, рано или поздно появится или исчезнет пара слов, и это полностью поменяет картину мира.
Как если из словосочетания «Внутреннее CRM-решение» исчезнет слово «внутреннее».
Пытаясь стать лидерами рынка, из самых лучших побуждений, саботёры правят ТЗ.
На игре участники попрактикуются предусматривать неожиданные повороты и находить выходы из неочевидных ситуаций.
Участники разделятся на команды, в каждой из которых будет один защитник, остальные игроки — саботёры. Все как в жизни 😉
На старте у каждой команды будет ТЗ. Саботёры, действуя в своих интересах, будут устраивать каверзы, внося в ТЗ «небольшие правки», а защитники — эти каверзы отбивать, интегрировать, адаптировать, в общем, делать всё, чтобы эти неожиданные изменения не стали катастрофой для продукта.
✋ Обратите внимание: трансляции и записи не будет, приходите: 23 июня, 19:20, Зал «Нетворкошная»
🖐️ До встречи на Saint HighLoad++ 2025
🔥14🎉2❤1
Участники Saint HighLoad++ 2025, внимание ✋ В этом посте собрали организационную информацию и ссылки, которые могут вам пригодиться. Поэтому сохраните пост, чтобы потом не искать 😉 (также этот пост можно будет найти в закрепе)
Место проведения конференции: DESIGN DISTRICT DAA in SPB, Санкт-Петербург, Красногвардейская площадь, 3Е (м. Новочеркасская).
📍Точка на карте
Информация о том, как добраться на общественном транспорте или пешком здесь
🔴 Обращаем ваше внимание, что на территории DESIGN DISTRICT DAA, к сожалению, в этом году парковка недоступна. Ближайшая, которую мы можем рекомендовать — парковка в ТЦ Охта Молл. Она находится в ~10 минутах ходьбы от площадки.
🔴 Здесь схема конференции
📃 Расписание программы на сайте.
PDF-версия расписания
🛜 Интернет на конференции. Официального Wi-Fi на площадке нет. Вы можете воспользоваться интернет-пакетом вашего сотового оператора.
🫕 Обеды и кофе-брейки. На конференции постоянно действует кофе-брейк и организованы обеды
для участников по расписанию. Фестивальная зона с интернациональной кухней будет работать с 12:00 и в течение всего дня.
Талоны на обед выдают на стойке регистрации вместе с бейджем участника. В талоне указан один из пяти временных слотов. Расположение зоны обеда можно найти на схеме конференции.
Если вам не подходит время, вы можете поменять талон на стойке регистрации или обменяться с другим участником. Фестивальная зона доступна без предъявления талона и не привязана к временным слотам.
Если вам выдали талон только на один день, обратитесь на стойку регистрации.
🎉 В конце первого дня вас ждет афтепати, программу которого можно найти здесь. Обязательно ознакомьтесь 😉
❓ Если у вас возникнут вопросы, пишите в чат конференции или в чат поддержки
Ждем вас 🙌
Место проведения конференции: DESIGN DISTRICT DAA in SPB, Санкт-Петербург, Красногвардейская площадь, 3Е (м. Новочеркасская).
📍Точка на карте
Информация о том, как добраться на общественном транспорте или пешком здесь
📃 Расписание программы на сайте.
PDF-версия расписания
🛜 Интернет на конференции. Официального Wi-Fi на площадке нет. Вы можете воспользоваться интернет-пакетом вашего сотового оператора.
🫕 Обеды и кофе-брейки. На конференции постоянно действует кофе-брейк и организованы обеды
для участников по расписанию. Фестивальная зона с интернациональной кухней будет работать с 12:00 и в течение всего дня.
Талоны на обед выдают на стойке регистрации вместе с бейджем участника. В талоне указан один из пяти временных слотов. Расположение зоны обеда можно найти на схеме конференции.
Если вам не подходит время, вы можете поменять талон на стойке регистрации или обменяться с другим участником. Фестивальная зона доступна без предъявления талона и не привязана к временным слотам.
Если вам выдали талон только на один день, обратитесь на стойку регистрации.
🎉 В конце первого дня вас ждет афтепати, программу которого можно найти здесь. Обязательно ознакомьтесь 😉
❓ Если у вас возникнут вопросы, пишите в чат конференции или в чат поддержки
Ждем вас 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
👍10❤2⚡1🔥1