▶️Друзья, у нас открыта продажа видеозаписей докладов HighLoad++ 2022
⠀
В плейлисте 100+ докладов. Ключевые темы: проектирование высоконагруженной архитектуры; архитектурные кейсы; устройство систем хранения данных; базы данных; CTO-трек; импортозамещение; инфобезопасность; AI в реальном секторе; DevOps и эксплуатация; агротех; финтех
⠀
✅ Купить видеозаписи можно здесь: https://vk.cc/cmlVvX
⠀
Топ-5 докладов:
⠀
1) Безопасность ядра Linux: в теории и на практике. Александр Попов (Positive Technologies) https://vk.cc/cmlWfT
⠀
2) VK Звонки: все про звук, или Как добиться эталонного качества передачи голоса через интернет. Алексей Шпагин (ВКонтакте, VK) https://vk.cc/cmlWBs
⠀
3) Повышаем живучесть Raft в реальных условиях. Сергей Останевич (Tarantool) https://vk.cc/cmlWWb
⠀
4) Как разобрать сетевой протокол и найти уязвимости в устройстве без использования прошивки - показываем на примере ПЛК Mitsubishi. Антон Дорфман (Positive Technologies) https://vk.cc/cmlXgp
⠀
5) RedHat OpenShift ушел, Что делать энтерпрайзу и не только ему? Юрий Семенюков («Инфосистемы Джет») https://vk.cc/cmlXAi
⠀
🖐️ 26 и 27 июня мы встречаемся в Питере на Saint HighLoad++ 2023
⠀
➡️➡️Программа конференции и билеты на сайте - https://vk.cc/cmlXUT

📝 С Евгением Смирновым обсудим обработку терабайтов данных в кредитном скоринге
⠀
📋 https://vk.cc/cmnDBj
⠀
Кредитный скоринг — очень консервативная область, где традиционно используются самые стабильные и интерпретируемые методы. Сейчас в банке решение о выдаче кредита принимается нейронными сетями на терабайтах данных.
⠀
В докладе пойдет речь о том, как интегрировать обработку большого объема данных в онлайн- и офлайн-процессы кредитного конвейера.
⠀
Встречаемся 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
✅ Подробнее о конференции на сайте - https://vk.cc/cmnDMR

✅ 2 часть статьи про Service Mesh.
⠀
В прошлый раз мы рассмотрели пять пунктов, по которым можно классифицировать любой Service Mesh: компонентный состав Control Plane и Data Plane, Control Plane API и Data Plane API, Data Plane Traffic Capture.
⠀
Теперь Максим Чудновский из СберТех расскажет, как теория накладывается на практику и на что обратить внимание, выбирая Service Mesh для своих задач. Проверим всё на реальных решениях, которые можно найти в open source.
⠀
➡️Читать статью: https://habr.com/ru/company/oleg-bunin/blog/723092/

🎞 Друзья, завершаем эту пятницу полезной подборкой видео: топ-5 докладов конференции HighLoad++ Foundation 2022. Эти доклады набрали самые высокие оценки на основании голосования участников за содержание и подачу, посмотрите 🙌
⠀
1) Дежурство / Небинарный DevOps / Высокоэффективный гуманный on-call. Ян Ашенкампф (Газпромбанк) https://vk.cc/cmnQNi
⠀
2) Экскурсия в бэкенд Интернета вещей. Владимир Плизга (Tibbo Systems) https://vk.cc/cmnR3s
⠀
3) Секретная карта IT-экосистемы, из которой становится понятно, к чему готовиться. Константин Кичинский (Лаборатория Касперского) https://vk.cc/cmnRi4
⠀
4) Pluggable TOAST or One TOAST fits ALL. Олег Бартунов, Федор Сигаев, Никита Малахов (Postgres Professional) https://vk.cc/cmnRtj
⠀
5) Поиск GPS-аномалий среди сотен тысяч водителей. Александр Царьков (Яндекс Go) https://vk.cc/cmnRKg
⠀
Продуктивного просмотра и отличных выходных!
⠀
Ждем вас на Saint HighLoad++ 2023 🖐
⠀
✅ Пройдите на сайт, чтобы узнать подробнее о конференции и купить билет по самой выгодной цене сейчас - https://vk.cc/cmnRZm

📝 Делаем СБОЛ надежнее и надежнее: Артем Арюткин расскажет, как они готовятся к сезонам высокой нагрузки
⠀
📋 https://vk.cc/cmrFCt
⠀
Каждый год Артем с друзьями готовятся к HighSeason (период высокой нагрузки) на сервисы Сбербанк Онлайн
⠀
1. На докладе в виде интерактива вместе попробуем подготовить Сбербанк Онлайн к периоду высокой нагрузки
⠀
2. Разберем входящие требования к системе
Нефункциональные - 200 тыс.входов в минуту/72 млн.MAU., ограничения в инфраструктуре
⠀
3. Окажемся в ситуации "косяка": за время со старта подготовки ИТ ландшафт изменился (Бэковая система не смогла пройти нагрузочное тестирование и нам срочно нужно их спасать).
Что у них могло пойти не так в этой ситуации: как в октябре бегать с горящими пятками и почему это не всегда так страшно
⠀
4. Поговорим о том, какие паттерны отказоустойчивости они используют в Сбербанк Онлайн + поговорим о самой архитектуре детальнее.
⠀
5. Как они управляют масштабными изменениями.
⠀
6. Еще Артем расскажет о том, как они стараются управлять надежностью как продуктом и почему у них это все время не получается.
⠀
Присоединяйтесь к нашей крутой тусовке разработчиков высоконагруженных систем 26 и 27 июня в Санкт-Петербурге 😎
⠀
✅ Прочитать подробнее о конференции и купить билет по самой выгодной цене сейчас на сайте – https://vk.cc/cmrFQG

➖ Развитие программных продуктов и переход на микросервисную архитектуру у многих вызывают чувство ложной безопасности инфраструктуры.
⠀
А между тем, ошибки, допускаемые при проектировании информационной системы и некачественной настройке ее компонентов, зачастую приводят к фатальным проблемам: захвату серверов, майнингу на ваших мощностях и краже конфиденциальной информации.
⠀
Лев Хакимов из Сбера даст несколько «вредных советов» по практическому нарушению информационной безопасности.
⠀
Например, как можно заставить сервер подключиться к вашему ПК и предоставить вам оболочку или как выдать права в K8s и слишком широкие полномочия Pod'ам. А еще расскажет, как не дать «мягким лапкам» котиков-джуниоров создать реальные угрозы.
⠀
➡️➡️Читать статью: https://habr.com/ru/company/oleg-bunin/blog/708114/

🗓 Эффективное обновление состояний в БД обсудим на докладе с Юрием Печатновым
⠀
📋 https://vk.cc/cmtKu4
⠀
В рекламе Яндекса они работают со многими сложными сущностями, которые хранят в базах данных.
⠀
Возьмем, например, рекламный баннер. Если взять всю полезную для показа информацию о баннере, то получится сложная развесистая структура, включающая в себя много простых полей вроде тайтла и картинки, а также сложных — вроде посчитанных эмбеддингов.
⠀
Данные баннера нужно постоянно обновлять — они включаются, выключаются, обновляют какие-то свои данные, по ним пересчитываются эмбеддинги. Так что у них потоковая обработка данных с результатом в виде актуального состояния данных баннеров в таблице (в YT).
⠀
Вроде все просто, какие тут могут быть проблемы? На самом деле проблемы ожидаемые, у нас же Highload, и, если работать с их таблицей с баннерами наивным способом, то будут создавать слишком большую нагрузку.
⠀
Наивный способ — это когда они данные одного баннера хранят в таблице в одной бинарной строке в сериализованном виде. А проблема с нагрузкой в том, что они на каждое, даже очень маленькое изменение (допустим, изменилось 20 байт в состоянии), загружают и пишут обратно все состояние (десятки килобайт).
⠀
В своем докладе Юрий изложит минимум 5 независимых и взаимно совместимых идей, позволивших им многократно снизить нагрузку на запись, и значительно — на чтение, а также несколько новых подходов, которые они пробуют сейчас или хотят попробовать в будущем.
⠀
Приходите, чтобы узнать новое, обсудить известное и поделиться своими идеями про работу с состояниями.
⠀
Ждем вас на Saint HighLoad++ 2023 🙌
⠀
✅ Чтобы забронировать билет перейдите на сайт - https://vk.cc/cmtKIH

🗓 Алексей Федулаев и Андрей Моисеев расскажут в своем докладе про безопасность CI/CD
⠀
📋 https://vk.cc/cmvh59
⠀
Мир стремительно меняется и в настоящее время нужно максимально быстро реагировать на стремительно меняющиеся обстоятельства. Поэтому, все сложнее представить себе высоконагруженное приложение без автоматизированной системы доставки и сборки (CI/CD), ведь использование CI/CD существенно ускоряет разработку и выкатку фич на продакшен.

Вместе с ростом использования автоматизированных систем сборки и доставки растет и внимание злоумышленников к этим системам. А ведь действительно, использование этих систем таит в себе новые опасности.
⠀
В ходе доклада мы разберемся как защищаться от основных угроз в CI/CD.
⠀
🖐 Присоединяйтесь к нам 26 и 27 июня на Saint HighLoad++ 2023
⠀
✅ Подробнее о конференции и билеты на сайте - https://vk.cc/cmvhrZ

⚡️Успейте купить билет по самой выгодной цене сейчас
⠀
✋ Друзья, чем ближе конференция, тем дороже билеты. С 1 апреля у нас первое повышение цены. Забронируйте билет до 31 марта и у вас будет несколько дней для оплаты.
⠀
В программе Saint HighLoad++ 2023 вас ждут 70+ докладов, которые охватят такие аспекты веб-разработок: архитектуры крупных проектов, базы данных и системы хранения, devops и системное администрирование, нагрузочное тестирование, эксплуатация крупных проектов. И другие направления, связанные с большими и высоконагруженными IT-системами.

Форматы конференции и доступные опции:
⠀
▪️Офлайн: общение со спикерами, глубокая проработка тем на митапах, доступ к выставочной зоне, все презентации спикеров, видеозаписи всех докладов, сытные кофебрейки и обеды, подарки от партнёров и организаторов, вопросы спикерам в telegram-чате
⠀
▫️Онлайн: все презентации спикеров, видеозаписи всех докладов, трансляция всех докладов (кроме митапов и воркшопов), вопросы спикерам в telegram-чате, доступ к трансляции для одного пользователя

⠀
Ждем вас 26 и 27 июня в Питере или онлайн по всему миру 🙌
⠀
Пройдите на сайт, чтобы ознакомиться с уже принятыми докладами и забронировать билет
⬇️

🗓 Как профилировать, когда perf видит не всё? Узнаем из доклада Максима Кокряшкина
⠀
📋 https://vk.cc/cmxlxS
⠀
Платформы, опирающиеся на встроенный интерпретатор, сложно профилировать. Чаще всего, возможен только отдельный анализ производительности внутри VM, с помощью специфичного для нее профилировщика, и снаружи VM, с помощью, например, perf. Тем не менее, в некоторых сценариях необходимо видеть полную картину.
⠀
Доклад описывает несколько возможных подходов к профилированию таких систем - от способов интеграции с perf, до написания своего инструментария.
⠀
Встречаемся 26 и 27 июня в Питере на Saint HighLoad++ 2023 🙌
⠀
✅ Прочитать подробнее о конференции и купить билет по самой выгодной цене сейчас на сайте – https://vk.cc/cmxlQg

🗣В 2021 году состоялся публичный OpenSource-релиз платформы для автоматизации обслуживания Kubernetes-кластеров — Deckhouse. Сейчас — это платформа Enterprise-уровня, которая сертифицирована в CNCF и входит в единый реестр российского ПО.
⠀
Рассмотрим процессы разработки, тестирования и управления релизами Deckhouse. Её интеграцию со сторонними решениями для мониторинга, работы сети, безопасности и с другими необходимыми компонентами.
⠀
Константин Аксенов из Флант поделится своим опытом, расскажет, как построены разработка и релизный процесс. Как они добились, чтобы продукт был надёжным и прошли путь от внутреннего проекта до готовой платформы, которую покупает Enterprise-бизнес.
⠀
➡️Читать статью: https://habr.com/ru/company/oleg-bunin/blog/724018/

🗓 MinIO - что изменилось за год? Узнаем из доклада Алексея Плетнёва
⠀
📋 https://vk.cc/cmza5Y
⠀
На прошлогоднем HighLoad++ Алексей рассказывал про свой опыт разворачивания геораспределённого отказоустойчивого S3-совместимого хранилища на базе MinIO. После этого ему на почту (что приятно) пришло множество вопросов касательно различных нюансов.
⠀
В этом году он бы хотел систематизировать ответы на них и представить в виде доклада широкой публике. Кроме того, Алексей планирует рассказать о том, как развивался MinIO в течение прошедшего года, от каких минусов разработчикам удалось избавиться, а что до сих пор остаётся в виде подводных камней, на которые можно легко наступить и порезаться.
⠀
Также хочется рассказать об очень интересном опыте масштабирования MinIO - как они расширили своё присутствие с 3 до 4 дата-центров, какой реальный прирост производительности дал переход от обычных дисков к дисковым массивам. С какими сложностями можно столкнуться при работе с этими массивами.
⠀
Доклад ориентирован не на мастодонтов, создающих свои облака, таких как ребята из Яндекса или VK, а на архитекторов из компаний, представляющих малый и средний бизнес, у которых, однако, есть серьёзный потенциал роста и потребность в хранении данных в собственном периметре.
⠀
Встречаемся 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
✅ Подробнее о конференции и билеты на сайте - https://vk.cc/cmzalF

🟢 Друзья, не упустите возможность купить билет на Saint HighLoad++ 2023 по самой выгодной цене
⠀
⚡️1 апреля стоимость билетов станет выше
⠀
Присоединяйтесь к нам, чтобы:
⠀
- быстрее других быть в курсе тенденций в мире разработки;
- систематизировать, подтянуть свои знания и приобрести новые;
- иметь возможность разобрать свой случай на проекте и получить профессиональный совет от коллег;
- отлично и продуктивно провести время в компании единомышленников
⠀
Ждем вас 26 и 27 июня в Питере 🙌
⠀
✅ Пройдите на сайт, чтобы узнать подробнее о Saint HighLoad++ 2023 и забронировать билет - https://vk.cc/cmze1z

🗓 Алексей Кузнецов и Борис Мурашин расскажут, как они управляют инфраструктурой на более 1000 серверах при помощи ansible
⠀
📋 https://vk.cc/cmDHWx
⠀
Они хотят, чтобы конфигурация в гите всегда соответствовала конфигурации на серверах. Пока серверов было мало - конфигурация применялась быстро, но с ростом количества хостов - стало слишком долго.
⠀
Узнаем:
⠀
- как они управляют более 1000 хостов при помощи ansible с постоянным деплоем изменений на все сервера.
- как они написали ansible-agent, который экономит им ресурсы и время, как он работает и деплоится на сервера.
- как строят свой проект и как применяют AWX
⠀
Присоединяйтесь к нам 26 и 27 июня на Saint HighLoad++ 2023 в Санкт-Петербурге 🙌
⠀
✅ Узнать подробнее о конференции и купить билет можно на сайте - https://vk.cc/cmDIaE

⚡️Осталось 3 дня до повышения цены⚡️
⠀
1 апреля стоимость билетов на Saint HighLoad++ 2023 повысится. Но вы можете зафиксировать текущую стоимость, если забронируете билет до 31 марта. После брони у вас будет несколько дней для оплаты.
⠀
Актуальные цены сейчас:
⠀
▪️офлайн = 48 000 руб.
▫️онлайн = 24 000 руб.
⠀
Ждем вас 26 и 27 июня в Питере 🙌
⠀
✅ Пройдите на сайт, чтобы посмотреть уже принятые доклады в программу и забронировать билет: https://vk.cc/cmFfUm

🗓 Как научить On-Prem Sentry принимать 60 млн событий в сутки? Узнаем из доклада Дмитрия Крапивина
⠀
📋 https://vk.cc/cmFvOj
⠀
Дмитрий расскажет про то, как они в СберМаркете решали проблемы производительности on-prem Sentry — учили обрабатывать 60 миллионов событий в сутки, для чего пришлось провести оптимизацию почти каждого компонента.
⠀
Оптимизировали БД Postgres — научили Sentry работать не только с мастером, но и с репликами. Перенесли хранение событий в s3 и сэкономили 12 ТБ на БД (которые лежали в одной таблице!). Оптимизировали обработку событий из kafka — даже если у вас есть буфер, не значит, что все будет стабильно. Научили работать с шардированным ClickHouse и максимально глубоко погрузились в архитектуру, чтобы достичь производительности, которую не позволяет даже Cloud Sentry.
⠀
О боли, муках и страданиях от несовершенства архитектурных решений, что из этого вытекло, над чем пришлось поработать и к чему приложить руку.
⠀
Встречаемся в Питере 26 и 27 июня 🙌
⠀
✅ Пройдите на сайт, чтобы успеть забронировать билет по самой выгодной цене - https://vk.cc/cmFwft

📊 Друзья, пройдите, пожалуйста, наше небольшое исследование, а в благодарность вы получите видеозаписи топ-5 докладов конференции HighLoad++ 2022, которая прошла в ноябре 🔥
⠀
Тема импортозамещения появилась уже давно, но становится все актуальнее. Как вы справляетесь с уходящими решениями? Нашли уже для себя надежных вендоров? Успели перевезти сервисы и с какими сложностями столкнулись?
⠀
Давайте попробуем оценить общую ситуацию в индустрии на текущий момент. Мы обработаем результаты опроса, оформим в виде краткой аналитики и опубликуем в нашем блоге на Habr.

А вендоров самых популярных решений, на которые вы переехали, пригласим на сцену Saint HighLoad++ 2023 🙌
⠀
➡️➡️Пройти опрос здесь: https://vk.cc/cmFMiY

🔄С Дмитрием Гордиевским поговорим о замещении Thales - аппаратных модулей шифрования
⠀
📋 https://vk.cc/cmHtvq
⠀
Узнаем:
⠀
1. Для чего нужны аппаратные модули безопасности и их применение в финтехе.
2. Чем они пользуются сейчас. И почему именно Thales.
3. Аппаратное устаревание модулей - как долго они работают и как часто их нужно менять.
4. Их историю импортозамещения - что случилось и как строился процесс.
5. Организация тестирования оборудования. Тестирование криптоядра и тесты операционной применимости.
6. Что они ожидают от новых модулей и как мигрировать на новое оборудование.
7. Вопросы сертификации и международной дистрибуции.
⠀
Ждем вас на Saint HighLoad++ 2023 в Питере или онлайн 🖐
⠀
✅ Пройдите на сайт, чтобы успеть забронировать билет по самой выгодной цене сейчас - https://vk.cc/cmHtPK

⌛️ Остался один день до повышения цены билетов на Saint HighLoad++ 2023
⠀
Вы еще успеваете забронировать билет по самой выгодной цене. 1 апреля стоимость станет выше.
⠀
За два дня на Saint HighLoad++ 2023 вы:
⠀
- услышите доклады на самые актуальные темы для разработчиков высоконагруженных систем
- первыми узнаете тенденции в мире разработки
- систематизируете, подтянете свои знания и приобретете новые
- сможете разобрать свой случай на проекте и получить профессиональный совет от коллег
- отлично и продуктивно проведете время в компании единомышленников
⠀
➡️ Забронируйте билет сейчас и у вас еще будет несколько дней для оплаты: https://vk.cc/cmJAyn

☯️Распределенные графовые СУБД — будущее для аналитики на Больших Данных? Поговорим об этом с Павлом Велиховым
⠀
📋 https://vk.cc/cmLfJd
⠀
Графовые СУБД в последнее время стали очень популярны для аналитических задач. Традиционно к графовым СУБД относились скептически из-за их производительности и масштабируемости: например, очень популярная СУБД Neo4j пока практически не масштабируется на несколько узлов. Но появились новые системы, изначально разработанные как распределенные графовые СУБД, которые в состоянии уже хранить и обрабатывать десятки терабайт данных, а в скором будущем смогут масштабироваться до петабайт.
⠀
В чем существенные отличия графовых СУБД, какие преимущества и новые методы они предлагают для аналитики, и почему будущее аналитики на Больших Данных может оказаться именно за графовыми СУБД?
⠀
Встречаемся 26 и 27 июня на Saint HighLoad++ 2023 🖐
⠀
➡️ Программа конференции и билеты на сайте - https://vk.cc/cmLg16