🎞 Всем привет! Мы открыли доступ к двум резервным докладам HighLoad++ 2022, которая прошла 24 и 25 ноября, посмотрите 🙌 Сегодня первый:
⠀
➡️ Андрей Кузнецов, руководитель продуктовой аналитики ВКонтакте, расскажет зачем и как они написали MapReduce-движок над Clickhouse.
⠀
Аналитика ВКонтакте очень активно использует ClickHouse. Не будет преувеличением сказать, что эта СУБД выступает в качестве ключевого компонента их DWH: бэкенд пишет риалтайм click stream, сотни дэшбордов читают данные, десятки аналитиков пишут запросы. Благодаря развитому сервисному слою, все это работает параллельно на одних и тех же серверах.
⠀
В докладе о части этого слоя, а именно инструментов для работы с данными поверх ClickHouse. А также об эволюции этих инструментов от ETL-утилиты до MapReduce-фреймворка, доступного всем коллегам.
⠀
Попутно об устройстве пайплайна АБ-экспериментов, способного работать с самыми тяжелыми логами в масштабах сотен одновременно запущенных экспериментов.
⠀
➡️➡️ Видео доклада здесь – https://vk.cc/ckFctj

🎙Сейчас голосовых помощников очень много. Но их разработка началась не так уж давно и, конечно, прошла все позитивные и негативные стадии совершенно нового продукта, у которого ещё нет истории и своих традиций.
⠀
Наибольшие сложности возникли на стадии проектирования и тестирования. Но прежде чем говорить об этом, давайте разберемся как все начиналось, с какими проблемами пришлось столкнуться и на какие грабли наступить.
⠀
Об этом расскажет лингвист и антрополог Анна Дегтева. Она точно знает, чем люди отличаются от роботов, и как сделать так, чтобы для голосового помощника эти различия почти исчезли.
⠀
https://habr.com/ru/company/oleg-bunin/blog/704558/

🟢Микросервисный подход бешено разгоняет разработку, но вдогонку плодит кучу сущностей с бесконечными зависимостями.
⠀
Чтобы в этом не потонуть, можно изменить стандартные подходы к проектированию приложения. По крайней мере, в Cloud сделали именно так.
⠀
Что в результате получилось, расскажет Lead frontend Михаил Трифонов. С его помощью будем разбираться, когда необходимы микрофронты, каким должен быть технологический стек, как нарезать мироксервисы и какие существуют стандарты при построении микросервисной архитектуры. Вперёд! ⤵️

https://habr.com/ru/company/oleg-bunin/blog/660695/

🎞 От MVP к реальности. О проблемах перехода и лекарствах для решения вы можете посмотреть в видеозаписи доклада Алексея Дашкевича и Андрея Похилы. Это второй резервный доклад конференции HighLoad++ 2022, прошедшей 24 и 25 ноября, доступ к которому мы открыли 🖐
⠀
➡️ Видео здесь – https://vk.cc/cl2Iug
⠀
Запуская MVP, обычно мы жертвуем качеством ради быстрой проверки гипотезы. А что же дальше? Как жить и что делать после успешного тестирования гипотезы? С какими техническими вызовами нам придется столкнуться и как их решать? А вдруг можно уже на этапе MVP построить архитектуру, которая нам облегчит жизнь в дальнейшем?
⠀
Этими вопросами задались Алексей с Андреем, поэтому хотят поделиться своим опытом технического развития быстрорастущих продуктов:
⠀
- как сохранять баланс развития и техдолга при масштабировании в 10 раз? С какими проблемами они столкнулись и как их решали;
- о чем можно было подумать в начале разработки, чтобы сделать переход от MVP к реальности проще.
⠀
Продуктивного просмотра 🙌

➡️О eBPF слышали, наверное, все. Многие даже запускали на ней небольшие инструменты. Но мало кто разрабатывает решения с её использованием и работает со множеством различных окружений клиентов: от bare-metal до managed Kubernetes в популярных облачных провайдерах.
⠀
Дмитрий Евдокимов и Александр Трухин из Luntry поделятся опытом, знаниями, проблемами и результатами. Это будет полезно разработчикам, которые смотрят в сторону eBPF и думают на ней что-то реализовать. А также компаниям, которые планируют использование решений на базе eBPF у себя в проде.
⠀
Давайте разбираться со всем этим ⤵️
⠀
https://habr.com/ru/company/oleg-bunin/blog/712658/

📝 Алгоритм Raft всё больше набирает популярность, но не всё что обещает его реклама можно реализовать без дополнительных решений.
⠀
Например, возникает проблема с доступностью кластера при частичной потере связности. Но если её даже решить, из первой проблемы вытекает следующая. При определённых условиях кластер неспособен выбрать нового лидера даже при наличии достаточного количества живых и соединенных между собой узлов.
⠀
Как со всем этим бороться, а также с какими ещё трудностями они столкнулись, расскажет архитектор репликации в проекте Tarantool, Сергей Останевич. Будут реальные примеры того, как чистый Raft не справился с задачей и какие улучшения протокола пришлось сделать.
⠀
➡️Читать статью: https://habr.com/ru/company/oleg-bunin/blog/

📛Всем привет!

Saint HighLoad 2023 теперь летом!

📍26-27 июня, DDA Artplay, Питер.

Белые ночи, развод мостов и два дня высокой нагрузки.

📜Прием докладов уже во всю идет, дедлайн подачи 17 февраля, отправить заявку можно тут

Что нового помимо классических тем мы планируем:

▪️фейл секция
▪️хардкор
▪️больше обучения
▪️оффтоп
▪️лайтнинг толки

Давайте обсуждать эти и другие идеи для летнего Хайлоада уже на следующей неделе в Питерском убежище для разработчиков - Failover Bar

📍10 февраля, пятница.
⏰ Сбор гостей 19.30
Начало 20.00

➡️➡️ Регистрация на встречу

Трансляция будет, но из онлайна не распробовать вкусности кухни и не почувствовать уютную атмосферу бара 😉

Ждем вас!

🟢Команды безопасности давно озадачены тем, как автоматически реагировать на многочисленные security-инциденты в их инфраструктурах. Для этого даже придумали целый класс решений SOAR (Security Orchestration, Automation and Response).
⠀
Давайте посмотрим, что это такое и как его варить в Kubernetes. А заодно разберемся, как автоматизировано реагировать на те или иные угрозы, риски и инциденты, которые происходят в Kubernetes-кластере.
⠀
Опытом поделится основатель и технический директор Luntry, Дмитрий Евдокимов.
⠀
➡️➡️Читать статью: https://habr.com/ru/company/oleg-bunin/blog

⬆️ Сейчас многие проекты уходят в Облака, и игры не исключение. Вот только проблемы нестабильного интернета никто не отменял!
⠀
Как в таких условиях сделать игру в облаке неотличимой от игры на локальном компьютере и сохранить отличный игровой опыт, расскажет основатель Playkey, Алексей Лыков.
⠀
Речь пойдет о технологиях повышения качества, которые в условиях нестабильного интернета подстраиваются под соединение конкретного пользователя и качество его канала, а конкретнее о cloud gaming, проблеме latency и борьбе за заветные миллисекунды.
⠀
➖ Читать статью: https://habr.com/ru/company/oleg-bunin/blog/713660/

❗️Друзья, напоминаем, что 10 февраля пройдет офлайн-встреча потенциальных докладчиков с Программным комитетом Saint HighLoad++ 2023
⠀
Приходите, обсудим идеи для летнего Хайлоада:
⠀
📍 Failover Bar
▫️10 февраля, пятница.
⏰ Сбор гостей 19.30
⠀
➡️➡️Регистрация на встречу здесь: https://vk.cc/clnSEd
⠀
➡️➡️Узнать подробнее о Saint HighLoad++ 2023 и подать заявку на доклад здесь: https://vk.cc/clnV7T
⠀
Ждем вас!

⚡️Встречаемся завтра (10 февраля) с 19:30 до 22:00 в Санкт-Петербурге на традиционной встрече потенциальных докладчиков и Программного комитета конференции Saint HighLoad++ 2023
⠀
Если у вас есть идеи и мысли по выступлению, но есть и вопросы, приходите!
⠀
Ждём вас в Питерском убежище для разработчиков — Failover Bar
⠀
Регистрация обязательна — так мы заготовим достаточно угощения 😉
⠀
➡️➡️Все подробности, а также регистрация на встречу на сайте - https://vk.cc/clsxsI

Приходите 🙌

➖ Сегодня мы представляем вам вторую часть эпической трилогии Алексея Ефимова «Service Mesh в Enterprise-grade-приложениях».
⠀
Она посвящена деплою толп микросервисов в кубер без даунтайма, с условием, что кубер не должен лопнуть. Вторая часть фокусируется на работе с message bus, посвящена техникам ВlueGreen и Canary-деплоймента для обеспечения Zero Deployment Downtime.
⠀
В данном контексте Service Mesh является «системным интегратором», который, помимо управления непосредственно REST-взаимодействием, также управляет другими средами — Messaging и DB.
⠀
🚩Читать статью: https://habr.com/ru/company/oleg-bunin/blog/708110/

📷 Друзья, загрузили все фотографии с офлайн-встречи, которая прошла10 февраля, в альбом во ВКонтакте
⠀
Спасибо всем участникам за крутую атмосферу и продуктивную встречу 🙌

💬 Сами решайте это история успеха или небольшого падения. Кто-то всегда во всём видит полупустой стакан, а кто-то наполовину полный.
⠀
Максим Смирнов из команды Тинькофф расскажет то, что было на самом деле. Весь путь своей команды от монолита до независимых микрофронтендов с использованием Webpack Module Federation.
⠀
Про проблемы, с которыми они столкнулись, и о том, что накрутили сверху данного плагина для реальной независимости команд и приложений. То есть, всё как было.
⠀
➡️Заходите почитать: https://habr.com/ru/company/oleg-bunin/blog/

➖ Ещё недавно Service Mesh находился на пике хайпа, а сейчас уже входит в перечень стандартных технологий бэкенда.
⠀
Как и что изменилось и какой подход к построению Service Mesh выбрать — расскажет Максим Чудновский из СберТех. Он разберёт что такое паттерн Service Mesh и зачем он нужен. Какие архитектурные подходы есть к его реализации.
⠀
Рассмотрит популярные OpenSource-реализации Service Mesh: Istio, Linkerd, Cillium, NGINX Service Mesh, и поделится своим опытом эксплуатации и решения проблем в большом и нагруженном продакшне.
⠀
✅ Читать статью: https://habr.com/ru/company/oleg-bunin/blog/719394/