HighLoad++ – Telegram
HighLoad++
6.32K subscribers
2.41K photos
159 videos
16 files
2.27K links
Официальный канал профессиональной конференции разработчиков высоконагруженных систем

Saint HighLoad++ 2026 пройдёт в июне в Санкт-Петербурге: https://highload.ru/spb/2026

Общаемся в чатике https://news.1rj.ru/str/HighLoadTalks
Download Telegram
🤓 5 лет назад вышла книга про SRE от Google. В Додо загорелись этой идеей и реализовали.
Павел Притчин (СТО Dodo Engineering) в своем докладе расскажет:
🔹Как продвигалась методология в компании, как меняли майндсет людей и проводили онбординг в SRE разработчиков.
🔹Как боролись с рутиной, чтобы делать больше малым составом и успевать делать системные изменения.
🔹Как внедрялись практики инцидент-менеджмента, постмортемов, дежурства, мониторинг.
🔹Как распространяли практики SRE на разработчиков.
Все подробности 👉 https://bit.ly/3ji14he

Saint HighLoad++ 2021 состоится 20-21 сентября в Петербурге и онлайн по всему миру. Билеты и тезисы докладов на сайте 👉 https://bit.ly/3hRyiEY
Использование облачных систем стало стандартом для большинства highload-проектов. На конференции в Санкт-Петербурге мы рассмотрим тему облаков с двух сторон.

☁️ Первая — построение приватного облака.

В программе инструкция от Алексея Учакина из ECOMMPAY IT по построению собственного облака 👉🏻 https://bit.ly/3fRDZ4a

Если вам нужно приватное облако, то вот вам VMWare, Nutanix или решение «под ключ» от сервис-провайдера.
Но что делать, если своё (совсем своё) облако хочется, а команды разработчиков под рукой нет? Покупать «коробку» и настраивать под себя? Собирать конструктор из кубиков opensource-решений?

Вместе с Алексеем обсудим:
🔹OpenStack vs VMWare: что выбрать?
🔹Хранилище: CEPH или не CEPH?
🔹Гиперконвергентность или отдельные роли?
🔹Сеть, как основа всего — сколько слоёв абстракции необходимо и достаточно?
🔹Сколько нужно человек, чтобы запустить облако?

Saint HighLoad++ 2021 состоится 20-21 сентября в Петербурге и онлайн по всему миру. Билеты и тезисы докладов на сайте 👉 https://bit.ly/3yEmJqB
Всем привет!
Не забыли? Встречаемся в Петербурге 20-21 сентября на долгожданном Saint HighLoad Conf 2021. Расписание уже на сайте 👉 https://bit.ly/3iELVYh
Можно планировать своё участие в конференции. И, если вы ещё не купили билет, то самое время это сделать.
HighLoad++ pinned a photo
Онтико участвует в масштабном исследовании IT-отрасли России.

Авторы проекта — портал Хабр вместе с партнёрами — собирают мнения айтишников, чтобы разобраться, какими критериями они руководствуются при выборе работодателя, замерить, как специалистами воспринимаются разные компании. По итогу будет составлен открытый рейтинг IT-работодателей (опубликуют на Хабре), основанный на том, как к ним относятся в сообществе.

Нам ценно мнение каждого из вас, вне зависимости от должности и опыта работы.

Подключайтесь к опросу, это займёт 10-15 минут https://bit.ly/3xJxDKe
Результаты мы ждем осенью, а пока можно посмотреть рейтинг и аналитику по IT-работодателям России 2020 https://bit.ly/3AysE0X
Eсли бизнес компании заключается в приеме и обработке платежей во множестве стран в режиме 365/24/7, нужно соответствовать особенным условиям.

На конференции HighLoad++ Весна 2021 директор департамента эксплуатации и разработки сервисных систем ECOMMPAY IT Фёдор Васильев рассказал об эволюции подходов его компании к деплою нового кода. Прочитать об этом можно в нашей новой статье.
⚡️На Saint HighLoad ++ Иван Зерин (Scentbird) расскажет про бизнес-модель данных и как она влияет на процесс подготовки данных в загрузке в datalake https://bit.ly/37LSe61.
🔹Отличия концепции ETL и ELT;
🔹базовые концепции инструмента для преобразования данных DBT;
🔹как они используют DBT для построения сложных моделей, а также осуществляют тестирование данных;
🔹как масштабируется такое решение.

Встречаемся на Saint HighLoad++в Петербурге, 20-21 сентября. Полная программа, расписание и билеты 👉🏻 https://bit.ly/3xKP0u6
Тему ETL на Saint HighLoad ++ продолжит Владимир Верстов из Яндекса в докладе “ETL-сервисы для Такси, Еды и Лавки. Как мы разрабатываем платформу управления данными” 👉🏻https://bit.ly/3xLDsqu
🔹Какие данные хранятся в Data Lake и в каком формате, какие слои и потоки данных есть в DWH: как мы несем данные от десятков различных источников до дашбордов в Tableau и OLAP кубов в MS SSAS;
🔹Почему мы решили вместо готового ETL инструмента написать свой;
Как устроена наша монорепа из ETL сервисов и процесс разработки, отладки и деплоя;
🔹Запуск ETL процессов в 2-х дата центрах, организация тяжелых потоков данных между большими хранилищами, мониторинг наших процессов, проверки качества данных и многое другое;
🔹Про взаимодействие между дата инженерами и бекенд-разработчиками и аналитиками данных на уровне кода.

Встречаемся на Saint HighLoad++в Петербурге, 20-21 сентября. Полная программа, расписание и билеты https://bit.ly/3xKP0u6
Роман Кондаков из GirdGain на Saint HighLoad++ раскроет тему, как ускоряют движки OLAP баз данных. На какие ухищрения идут разработчики, чтобы ускорить ваши запросы https://bit.ly/3xGNZTR

Мы поговорим об индексах, оптимизации запросов, параллелизме, векторизации, разных железяках и о многом другом, что разработчики пускают в ход, лишь бы запросы не тормозили (а бизнес получал информацию вовремя).

Встречаемся на Saint HighLoad++ 20-21 сентября в Петербурге. Полная программа, расписание и билеты https://bit.ly/3fWnqUM
💥 Завершит блок data driven на Saint HighLoad++ Максим Лапшин с рассказом о том, как они внедрили систему телеметрии, которая позволяет находить тех клиентов, кто молчит, но так же страдает, как те, что обратились, а также находить тех, кому плохо ещё до того, как они обратятся.

Реальный пример использования data driven, позволяющий принимать решения на основе цифр, оценивать реальный урон от выявленных проблем и получить реальную картинку происходящего не только со слов клиента 👉🏻https://bit.ly/3iHA3EY

Встречаемся на Saint HighLoad++ 2021 в Петербурге 20-21 сентября. Программа и билеты на сайте 👉https://bit.ly/3s8i1yK
🚀 Сколько логов генерирует ваш проект? Данных стало слишком много! Каждый пользователь генерирует огромное количество логов, клики, переходы, покупки, транзакции. Но как обрабатывать такой объем информации? Как их хранить? Как извлекать из логов знания для бизнеса?

Александр Крылов из Росгосстраха расскажет именно об этом - как с помощью правильной готовки логов в транзакционном виде на базе конвенции логирования сделать хорошо и себе, и бизнесу https://bit.ly/2UcBwts

Успейте запланировать своё участие в Saint HighLoad++. И, если вы ещё не купили билет, то самое время это сделать. Расписание уже на сайте 👉https://bit.ly/37JtU4I
🔥 Пётр Зайцев из Одноклассников раскроет тему использования Elasticsearch для логов в особо крупных масштабах:
🔹холодное хранилище на elasticsearch для архивных данных;
🔹особенности использования hdd и ssd в рамках elasticsearch;
🔹отказоустойчивость elasticsarch размером ~1к нод, или что нам принёс elasticsearch 7;
🔹практический профит: как облегчает жизнь разным командам разработки и не только.
Для полного погружения в тему советуем ознакомится с доп. информацией к докладу https://bit.ly/2XqPtFy

Встречаемся на Saint HighLoad++ 2021 в Петербурге 20-21 сентября. Программа и билеты на сайте 👉https://bit.ly/3slmwpR
Пользователи — это наши друзья, даже если они об этом еще не знают.
От их доверия зависит ваша ежедневная работа, авральные ситуации и даже восстановление после аварии. Чтобы они нам доверяли, наши действия должны быть максимально прозрачными, а коммуникации с ними — постоянными и полезными для них.

Виктор Попов рассказал, как выстроить коммуникации, чтобы пользователи были на вашей стороне и не отвлекали вас от «пожарного» спасения прода. Сегодня вышла вторая часть по мотивам доклада Виктора 👉🏻 https://bit.ly/3g0GzVF. В ней можно узнать о том, как вести коммуникацию с пользователями, зачем это нужно и о чем говорить, когда вроде бы не о чем.
Денис Безкоровайный подвергнет сомнению святое - его доклад называется “Есть ли жизнь без ELK? Как снизить стоимость Log Management, используя Kafka, ClickHouse и Vector”.

🤓 Можно ли в разы снизить затраты на хранение и обработку логов?

В докладе Дениса - опыт построения централизованной системы для управления логами. Процесс выбора решений, почему остановились на связке Vector/Kafka/ClickHouse, какие есть сложности в работе с логами в ClickHouse и как их решать, а также — как эффективно писать, анализировать и хранить сотни гигабайт логов в сутки. Подробности https://bit.ly/3g2UHxw

📌Полная программа, расписание и билеты на Saint HighLoad++ https://bit.ly/3yLGFrp
Нарушение доступности системы — одно из трех направлений тестирования безопасности, о котором часто забывают. При этом отказ сервиса может принести компании убытки, несравнимо большие, чем утечка данных.

В докладе Алексея Бабенко (Мир Plat.Form) мы глазами нарушителя посмотрим на информационные системы, разберем типовые ошибки, приводящие к атакам отказа в обслуживании, и примеры из жизни, когда падали, казалось бы, самые производительные системы https://clck.ru/Wx7Pi

Встречаемся на Saint HighLoad++ 20-21 сентября в Петербурге. Полная программа, расписание и билеты https://clck.ru/Wx7RN
Вопрос о том, ругать или ценить тусовку на конференциях уже не первый год у всех на устах. Олег Бунин, признанный российский эксперт в области высоких интернет-нагрузок и организатор ведущих в России профессиональных конференций считает, что нетворкинг важен.

Мы поговорили с Олегом о тусе, как неоценимой части конференции. А ещё обсудили:

- важность докладов про "железо", которые помогут сэкономить существенные суммы, правильно используя хорошо подобранное аппаратное обеспечение;
- IT-задачи энтерпрайз-сектора;
- логи, машинное обучение и многое другое.

Интервью, которое затронуло самые горячие темы HighLoad читайте сегодня в нашем блоге на Хабре https://habr.com/ru/company/oleg-bunin/blog/573742/
Давайте глубоко рассмотрим тему киберучений/security awarness. И сделаем это вместе с Лукой Сафоновым - экспертом совета Института Развития Интернета (секция «информационная безопасность») https://clck.ru/WxBmp

🔹Рассмотрим какие бывают учения и для чего необходимы;
🔹Теория vs практика;
🔹Готовые решения;
🔹Методы самостоятельной реализации.

Встречаемся на Saint HighLoad++ 20-21 сентября в Петербурге. Полная программа, расписание и билеты https://clck.ru/WxBpo
Всем привет!
Напоминаем, что мы участвуем в исследовании для создания открытого рейтинга IT-работодателей (будет опубликовано на Хабре)
Нам ценно мнение каждого из вас, вне зависимости от должности и опыта работы.
Подключайтесь к опросу, это займёт 10-15 минут https://bit.ly/3xJxDKe
💥Среди участников, прошедших опрос по нашей ссылке мы разыграем 1 офлайн и 3 онлайн билета на HighLoad ++ 2021.
Результаты рейтинга мы ждем осенью, а пока можно посмотреть рейтинг и аналитику по IT-работодателям России 2020 https://bit.ly/3AysE0X
⚡️ Цены на Saint HighLoad++ скоро вырастут!

Ещё думаете, стоит ли идти на Saint HighLoad++? А если мы скажем, что сейчас можно купить билеты дешевле? До 31 августа действует ограниченное предложение — потом цены поднимутся.

Расписание конференции уже на сайте 👉🏻https://clck.ru/X3r3p

Покупайте билеты на сайте до 31 августа, пока они не подорожали https://clck.ru/X3r6D

Ждём вас на Saint HighLoad++!
HighLoad++ pinned a photo
📌 Векторные расширения в платформах Х86 появились в 1996 году. Вместе с Ignas Bagdonas, сетевым инженером Equinix, попробуем посмотреть на современный процессор Х86 и его векторные расширения с практической стороны — как это можно использовать повседневно и для базовых задач https://clck.ru/X45qr

Параллельный поиск в дереве, параллельное вычисление множества хэш-функций, сортировка, переупорядочивание и транслирование данных — все это может быть ускорено при корректном применении векторизации. Как и может быть существенно замедлено при некорректном. Практическое применение AVX2 и AVX-512 на примерах проб и ошибок, подчеркивая архитектурные основы векторизации и методику их применения в повседневной практике.

Встречаемся на Saint HighLoad++ 20 и 21 сентября в Петербурге. Полная программа, расписание и билеты https://clck.ru/X45sW