HighLoad++ – Telegram
HighLoad++
6.34K subscribers
2.4K photos
159 videos
16 files
2.26K links
Официальный канал профессиональной конференции разработчиков высоконагруженных систем

Saint HighLoad++ 2026 пройдёт в июне в Санкт-Петербурге: https://highload.ru/spb/2026

Общаемся в чатике https://news.1rj.ru/str/HighLoadTalks
Download Telegram
Старший разработчик Yandex Monitoring Егор Литвиненко расскажет, как они внедряли распределенную open-source-базу данных. Какие подходы к доставке использовали, как настраивали, с какими проблемами столкнулись, какие апдейты делали и что получили в результате. Всё с цифрами, кодом и скринами.

Практически инструкция, как надо и что не надо делать при настройке YDB CDC: https://habr.com/ru/companies/oleg-bunin/articles/801603/
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥52
Media is too big
VIEW IN TELEGRAM
В техтолке Максим Морев поделился интересным опытом перестроения процессов в разработке для ускорения доставки фичи до прода в сжатые сроки.

🖐️ Присоединяйтесь к нам на Saint HighLoad++ 2024
👍1
⚡️4 дня до повышения цены

Друзья, напоминаем, чем ближе конференция, тем дороже билеты. Сейчас у вас ещё есть возможность купить билет по выгодной цене, для этого забронируйте билет до 1 апреля, а оплатить можно будет в течение нескольких дней.

На Saint HighLoad++ 2024 вас ждет:

- супернасыщенная программа докладов на самые актуальные темы, связанные с большими и высоконагруженными IT-системами;
- самая высокая концентрация IT-специалистов страны;
- классное времяпрепровождение в крутой тусовке единомышленников.

Вы точно увезёте с собой багаж идей и полезных знакомств 😉

Встречаемся 24 и 25 июня в Санкт-Петербурге 🙌

Забронировать билет можно на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2
▶️Запись доклада Ильяса Нежибицкого «Warden — зачем нам свой service mesh?»

Ozon удалось внедрить обязательную клиентскую балансировку в масштабе большой организации. Секрет успеха — платформа, обязательный к использованию во всех микросервисах каркас приложения. Вызовы, с которыми столкнулся Ozon, привели к построению передовой реализации service mesh, не имеющей аналогов. Об этом в докладе Ильяса.
Please open Telegram to view this post
VIEW IN TELEGRAM
Друзья, привет! Мы начинаем знакомить вас со спикерами летней конференции Saint HighLoad++ 2024 💥

1) Антон Бочкарев (Третья сторона) «Психологический возраст кибербезопасности»

Внимание к кибербезопасности сегодня такое, что невозможно обойти стороной готовность её организации. Обычно оценивают технологии с помощью опросов и аудита. Антон пошёл дальше и расскажет, как всё это работает и как определить психологическую зрелость кибербеза в компании.

2) Иван Бондаренко (НГУ) «"Сильный искусственный интеллект" у вас в подвале: как собрать мультимодальную LLM из опенсорса и настроить её под вашу задачу»

LLM сегодня – это не обязательно что-то платное, как сервис и с подключением в Интернет. Есть Open Source LLM, и некоторые считают, что они начинают обходить по качеству коммерческие. Иван поделится экспертным мнением по проблеме и расскажет, как собрать собственную LLM на базе Open Source.

3) Михаил Ремнев (Cloud.ru) «Облачные квантовые симуляторы: исследование эффективности квантовых вычислений»

Главный вопрос с квантами - как их применять в обычных задачах и бизнесе. Из доклада вы узнаете о том, что сегодня происходит, чем уникальны кванты на фоне остальных альтернативных вычислителей и как на практике помогают этому эмуляторы квантовых вычислителей, развернутые в облаке Cloud.ru.

Присоединяйтесь к нам 24 и 25 июня в Санкт-Петербурге 🙌

Посмотреть другие принятые доклады и купить билет можно на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥41👍1💯1
Друзья, у нас готово предварительное расписание конференции Saint HighLoad++ 2024 🙌

Ознакомиться с ним можно на сайте в описании канала @HighLoadChannel

В расписании еще возможны корректировки, но ориентировочно уже можно запланировать свой день на конференции 😉
🔥6
Друзья, мы начинаем новую рубрику «Квиз». Сделайте перерывчик, отдохните от лонгридов, отвечайте на вопросы и узнавайте правильные ответы 😉

Вопрос 1-ый ⤵️
Какая операционная система является базовой для Docker контейнеров?
Anonymous Quiz
85%
Linux
1%
Windows
1%
MacOS
13%
Управляющий Хоббит
😁4
Один из антипаттернов наблюдаемости — это Wall of Dashboard. Как говорится, стоит стена высокая, а что за ней — непонятно. Как правило, куча дашбордов — это куча проблем, которые приводят к информационной перегрузке, потере фокуса и сложности восприятия. А что самое грустное, довольно сложно найти и исследовать какой-то инцидент.

Если вы, глядя на свой дашборд, не понимаете, работает ваша система или нет, стоит обратить внимание на статью: https://habr.com/ru/companies/vk/articles/805029/

SRE в VK Рекламе Кирилл Борисов расскажет, как организовать мониторинг, упрощающий нахождение проблем и не перегруженный лишней информацией.
🎉31
Запись доклада Павла Лакосникова «Ах, как хочется вернуться, ворваться в монолит!» с конференции Saint HighLoad++ 2023

Микросервисы — это все еще новый черный. Любой продукт станет лучше, если в нем есть блютус, блокчейн и микросервисы. Но как оно на самом деле? Ждет ли вас «град на холме»?

Павел рассказал о том, как Авито шло к микросервисам. Это таймлайн-история, где спикер показал разные этапы микросервисной архитектуры Авито. И на какие компромиссы шли в процессе. Что же в итоге получилось и почему старички все еще грустят по старому доброму монолиту.

▶️Смотреть здесь: https://www.youtube.com/watch?v=yLrSp174yc0&list=PLH-XmS0lSi_yGjK_r3rkV_x6z1DGjeAER&index=67
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥4
Всем привет! Сегодня знакомим вас с первыми спикерами секции «Нейронные сети, искусственный интеллект»

1) Андрей Кузнецов (AIRI) «Как научить фундаментальные модели читать, видеть, слышать и анализировать всё одновременно»

Моделью, которая умеет общаться текстом, сейчас уже никого не удивишь. Андрей расскажет, из чего собрать модель, которая в дополнение к этому умеет смотреть картинки и слушать речь. Очередной шаг на пути к General AI!

2) Алексей Воропаев (SberAutoTech) «Архитектура беспилотного транспорта нового поколения»

Доклад позволит узнать, как NeRF нейросети позволяют организовать End2End обучение и тестирование современного беспилотного транспорта.

3) Евгений Кокуйкин (Raft) «Новые атаки на LLM и методы защиты для прикладных приложений»

Чем больше LLM проникает в нашу жизнь, тем острее встают вопросы безопасности. Вариативность атак меняется не просто быстро, а очень быстро. Из доклада вы получите полное представление о текущем состоянии атак на LLM и научитесь идентифицировать потенциальные уязвимости в своих приложениях.

Присоединяйтесь к нам 24 и 25 июня на Saint HighLoad++ 2024 🙌

Ознакомиться со всеми принятыми докладами и купить билет можно на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥2👍1
Запись техтолка с Никитой Приймак «Все как у людей: введение современных инженерных практик в легаси-системах» с конференции HighLoad++ 2023

С Никитой поговорили вот о чём:

- Что такое легаси-система на примере автоматизированной системы по обслуживанию кредитов в Газпромбанке.

- Про инженерные практики в работе и улучшении легаси-систем.

- О методологии и подводных камнях миграции.

Посмотрите 🙌
2
Встречайте первые доклады из секции «Архитектуры и масштабируемость»

1) Дмитрий Некрылов (Яндекс 360) «Чего не хватает обычному сервису, чтобы стать cloud-native»

Как встроить в платформу или облако сервис, который по дефолту для этого не был рассчитан? Дмитрий расскажет о том, как встраивали Jitsi в Яндекс 360, обеспечивали много девяток и отказоустойчивость под нагрузкой и встреченных подводных камнях на этом пути.

2) Евгений Пак (Ozon) «Стенд метрик: как построить архитектуру для расчета тысячи метрик и попасть в SLA»

Многие, даже крупные компании, срезают углы на расчёте метрик АБ-тестирования и упрощают расчёты, теряя в чувствительности. На опыте Ozon можно увидеть, что даже для сотен метрик в эксперименте можно проводить расчёты точно.

3) Дмитрий Кривопальцев (Яндекс 360) «Делаем бесконечную галерею в Яндекс.Диске: балуемся плюшками, кластеризацией и синхронизацией»

Показать все, что скрыто! Честный и откровенный рассказ о том, как устроен изнутри просмотр фотографий в Яндекс.Диске, какие нестандартные решения пришлось применить, чтобы можно было удобно смотреть фоточки на мобилке и в браузере.

🖐 Присоединяйтесь к нам 24 и 25 июня в Питере на профессиональной конференции разработчиков высоконагруженных систем Saint HighLoad++ 2024

Посмотреть другие доклады, которые уже приняты в программу, и купить билет можно на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
👍31
Следующая секция в программе конференции — Базы данных и системы хранения, ловите первые доклады по этой тематике:

1) Денис Волков (Yandex Cloud) «Балансировка нагрузки шардированного PostgreSQL не своими руками»

Мы стараемся поддерживать Open Source, а в этом году SPQR (инструмент для шардирования PostgreSQL) научился менять количество шард на лету. Из доклада Дениса вы узнаете о существующих подходах к решардингу, а также о том, что у команды SPQR получилось в результате.

2) Александр Зевайкин (Yandex Infrastructure) «Гарантии доставки сообщений в YDB Topics»

Докладчик погрузит вас во внутреннее устройство брокеров сообщений. Вы узнаете, как правильно «готовить» exactly-one, и какие улучшения для этого типа доставки предлагает YDB Topics относительно Kafka.

3) Андрей Комягин (STM Labs) «Redis, такой простой и такой сложный!»

Redis уже давно не является чем-то новым. Каждый использует его немного по-своему и практически каждый думает, что это всё элементарно. Доклад Андрея покажет, что возможностей и нюансов очень много и даже если сейчас вам это не понадобится, когда-то пригодится точно.

Встречаемся 24 и 25 июня на Saint HighLoad++ 2024 🙌

Купить билет можно на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5👍1
This media is not supported in your browser
VIEW IN TELEGRAM
🔥12😁74
Осенью Яндекс запустил уже вторую версию собственной LLM — YandexGPT 2.

Петр Ермаков, ML-бренд-директор компании, рассказал о том, как появилось решение разрабатывать собственную языковую модель нового поколения, с какими вызовами столкнулась команда и какие задачи еще предстоит решить.

В этом небольшом техтолке мы подняли следующие темы:

- как обучают YandexGPT,
- как Яндексу удаётся продолжать улучшать модель и обгонять другие языковые модели,
- в каких продуктах вы уже можете видеть результат работы этой нейросети.

▶️Смотреть видео: https://www.youtube.com/watch?v=PctcqbSH_8I&list=PLH-XmS0lSi_wTsucmbk-mt034TbaVwHPJ&index=3
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥4
Как узнать, что вы в симуляции? Фанаты фильмов про «Матрицу» сразу вспомнят про феномен дежавю или сбой матрицы. А что происходит в настоящей симуляции? По каким законам работает она?

Александр Чистяков из команды беспилотных автомобилей Яндекса расскажет, как симуляция устроена изнутри. Про параллельные вселенные и эффект бабочки, про неожиданные парадоксы и проблемы, которые возникают перед теми, кто хочет управлять «матрицей». А также про необычные архитектурные решения для систем тестирования.

Подробности в статье: https://habr.com/ru/companies/yandex/articles/808213/
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5
На докладах секции «BigData и машинное обучение» поговорим про инструменты для хранения и обработки больших данных, эксплуатацию систем на базе машинного обучения, версионирование моделей и датасетов, архитектуру систем работы с большими данными, Data Lakes и т.д. Сегодня рассказываем о первых докладах секции:

1) Hadoop в 3 ДЦ. Андрей Коняев (Ozon)

Петабайтные размеры данных давно перестали быть cutting-edge, и их можно встретить в огромном количестве организаций. With great power comes great responsibility - надо делать работу с данными экономически эффективной, а инфраструктуру - надежной и масштабируемой. Из доклада узнаем про это.

2) Streaming Processing на данных BigData для рекламных кампаний МТС. Евгений Ненахов (МТС Digital)

Вы узнаете, как делать процессинг очень больших потоков данных в режиме реального времени из Kafka на голой Java с использованием минимального количества железа.

3) Выбор стримингового фреймворка в 2024 году. Максим Буйлин (Тинькофф)

Spark, Flink, Nifi или что-то другое – какой стриминговый фреймворк выбрать в текущем году? Из доклада вы узнаете основные критерии для выбора, на что обращать особое внимание. И все это на основе практического опыта.

До встречи на Saint HighLoad++ 2024 🙌

Узнать больше о программе конференции и купить билет можно на сайте
👍1
Друзья, сегодня рассказываем про доклады, которые относятся к тегу HighLevel-программирование. В этот блок мы собрали доклады, которые, на наш взгляд, предназначены для разработчиков и тестировщиков очень высокого уровня.

1) Таксономия изоляции: как оградить себя от хакера. Антон Жаболенко и Алексей Федулаев (Wildberries)

Широкий обзор технологий изоляции кода. В докладе будут разобраны плюсы и минусы каждого подхода с точки зрения безопасности.

2) Байт-код — Это Просто! Как сделать Dependency Injection по настоящему быстрым. Григорий Юрков (Яндекс Маркет)

На примере своего DI фреймворка докладчик покажет, какую магию можно делать, манипулируя байт-кодом. И какую магию реализуют в других инструментах.

Встречаемся 24 и 25 июня в Питере на Saint HighLoad++ 2024, присоединяйтесь 🙌

Больше принятых докладов можно посмотреть на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
⚡️Повышение цены с 1 мая

Друзья, чем ближе Saint HighLoad++ 2024, тем дороже билеты. Но у вас есть возможность зафиксировать текущую стоимость, для этого нужно забронировать билет до 30 апреля. После брони у вас будет ещё несколько дней для оплаты.

24 и 25 июня на одной площадке в Питере вновь соберутся сильнейшие разработчики highload-систем. Мы будем обсуждать самые актуальные темы индустрии, обмениваться знаниями о технологиях, позволяющих одновременно обслуживать многие тысячи и миллионы пользователей, разбирать реальные кейсы с решением конкретных задач. И, конечно, очень много общаться в своей тусовке и завязывать полезные знакомства.

Ждем вас 🙌

Ознакомиться с программой конференции и забронировать билет можно на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
Запись доклада Александра Кирсанова «Всё, везде и сразу: трейсинг в условиях хайлоада и 10к бэкендов» с конференции Saint HighLoad++ 2023

В масштабе VK использовать стандартный open tracing практически невозможно. Александр рассказал, чем плох JSON в трейсинге, зачем нужен свой бинарный формат, как выделить важное на этапе сбора, где хранить то, что собрали, и как сделать трейсы человекочитаемыми, если твой проект действительно большой.

Смотреть видео здесь: https://www.youtube.com/watch?v=es0QMN3_57s&list=PLH-XmS0lSi_yGjK_r3rkV_x6z1DGjeAER&index=3
Please open Telegram to view this post
VIEW IN TELEGRAM
👍1