🟢Чтобы лучше понимать как противостоять распределённым атакам, надо «думать как распределённые атаки» 😁 А чтобы разобраться, как они «думают» — стоит погрузиться в историю их развития и пройти по важнейшим временным вехам.
⠀
Давайте рассмотрим проблемы Panix, Sony, XboxLive/PSN, Mirai, memcached, а также значимые случаи в Рунете.
⠀
О том, как параллельно с DDoS возникал и развивался инструментарий для парсинга веб-страниц и API, создавались боты для скрэпинга и росла их массовость, нам расскажет Георгий Тарасов, владелец продукта Bot Protection в Qrator Labs.
⠀
https://bit.ly/3QvciPC

❗️ Внимание, друзья!
⠀
У нас открыт приём докладов на конференцию Saint HighLoad++ 2023, которая пройдёт в Санкт-Петербурге 26 и 27 июня.
⠀
▪️Заявки принимаем до 17 февраля.
▪️Решение по каждому докладу примем 10 марта.
⠀
Тематика конференции охватывает все, что актуально для специалистов, работающих или планирующих работать с системами высоких нагрузок и реального времени, крупных и сложных проектов:
⠀
▫️Архитектуры, масштабируемость
▫️Базы данных и системы хранения
▫️BigData и машинное обучение
▫️Нейронные сети, искусственный интеллект
⠀
и другие направления, связанные с высоконагруженными системами.
⠀
Для всех наших спикеров предусмотрены бонусы: предоставим билет на конференцию и номер в отеле, при необходимости, покроем расходы на логистику, и обязательно поможем подготовиться к выступлению 🙌
⠀
➡️ Подайте заявку здесь - https://bit.ly/3X50er5
⠀
➡️ Все подробности по ссылке - https://bit.ly/3vUVKXX

🎞 Всем привет! Мы открыли доступ к двум резервным докладам HighLoad++ 2022, которая прошла 24 и 25 ноября, посмотрите 🙌 Сегодня первый:
⠀
➡️ Андрей Кузнецов, руководитель продуктовой аналитики ВКонтакте, расскажет зачем и как они написали MapReduce-движок над Clickhouse.
⠀
Аналитика ВКонтакте очень активно использует ClickHouse. Не будет преувеличением сказать, что эта СУБД выступает в качестве ключевого компонента их DWH: бэкенд пишет риалтайм click stream, сотни дэшбордов читают данные, десятки аналитиков пишут запросы. Благодаря развитому сервисному слою, все это работает параллельно на одних и тех же серверах.
⠀
В докладе о части этого слоя, а именно инструментов для работы с данными поверх ClickHouse. А также об эволюции этих инструментов от ETL-утилиты до MapReduce-фреймворка, доступного всем коллегам.
⠀
Попутно об устройстве пайплайна АБ-экспериментов, способного работать с самыми тяжелыми логами в масштабах сотен одновременно запущенных экспериментов.
⠀
➡️➡️ Видео доклада здесь – https://vk.cc/ckFctj

🎙Сейчас голосовых помощников очень много. Но их разработка началась не так уж давно и, конечно, прошла все позитивные и негативные стадии совершенно нового продукта, у которого ещё нет истории и своих традиций.
⠀
Наибольшие сложности возникли на стадии проектирования и тестирования. Но прежде чем говорить об этом, давайте разберемся как все начиналось, с какими проблемами пришлось столкнуться и на какие грабли наступить.
⠀
Об этом расскажет лингвист и антрополог Анна Дегтева. Она точно знает, чем люди отличаются от роботов, и как сделать так, чтобы для голосового помощника эти различия почти исчезли.
⠀
https://habr.com/ru/company/oleg-bunin/blog/704558/

🟢Микросервисный подход бешено разгоняет разработку, но вдогонку плодит кучу сущностей с бесконечными зависимостями.
⠀
Чтобы в этом не потонуть, можно изменить стандартные подходы к проектированию приложения. По крайней мере, в Cloud сделали именно так.
⠀
Что в результате получилось, расскажет Lead frontend Михаил Трифонов. С его помощью будем разбираться, когда необходимы микрофронты, каким должен быть технологический стек, как нарезать мироксервисы и какие существуют стандарты при построении микросервисной архитектуры. Вперёд! ⤵️

https://habr.com/ru/company/oleg-bunin/blog/660695/

🎞 От MVP к реальности. О проблемах перехода и лекарствах для решения вы можете посмотреть в видеозаписи доклада Алексея Дашкевича и Андрея Похилы. Это второй резервный доклад конференции HighLoad++ 2022, прошедшей 24 и 25 ноября, доступ к которому мы открыли 🖐
⠀
➡️ Видео здесь – https://vk.cc/cl2Iug
⠀
Запуская MVP, обычно мы жертвуем качеством ради быстрой проверки гипотезы. А что же дальше? Как жить и что делать после успешного тестирования гипотезы? С какими техническими вызовами нам придется столкнуться и как их решать? А вдруг можно уже на этапе MVP построить архитектуру, которая нам облегчит жизнь в дальнейшем?
⠀
Этими вопросами задались Алексей с Андреем, поэтому хотят поделиться своим опытом технического развития быстрорастущих продуктов:
⠀
- как сохранять баланс развития и техдолга при масштабировании в 10 раз? С какими проблемами они столкнулись и как их решали;
- о чем можно было подумать в начале разработки, чтобы сделать переход от MVP к реальности проще.
⠀
Продуктивного просмотра 🙌

➡️О eBPF слышали, наверное, все. Многие даже запускали на ней небольшие инструменты. Но мало кто разрабатывает решения с её использованием и работает со множеством различных окружений клиентов: от bare-metal до managed Kubernetes в популярных облачных провайдерах.
⠀
Дмитрий Евдокимов и Александр Трухин из Luntry поделятся опытом, знаниями, проблемами и результатами. Это будет полезно разработчикам, которые смотрят в сторону eBPF и думают на ней что-то реализовать. А также компаниям, которые планируют использование решений на базе eBPF у себя в проде.
⠀
Давайте разбираться со всем этим ⤵️
⠀
https://habr.com/ru/company/oleg-bunin/blog/712658/

📝 Алгоритм Raft всё больше набирает популярность, но не всё что обещает его реклама можно реализовать без дополнительных решений.
⠀
Например, возникает проблема с доступностью кластера при частичной потере связности. Но если её даже решить, из первой проблемы вытекает следующая. При определённых условиях кластер неспособен выбрать нового лидера даже при наличии достаточного количества живых и соединенных между собой узлов.
⠀
Как со всем этим бороться, а также с какими ещё трудностями они столкнулись, расскажет архитектор репликации в проекте Tarantool, Сергей Останевич. Будут реальные примеры того, как чистый Raft не справился с задачей и какие улучшения протокола пришлось сделать.
⠀
➡️Читать статью: https://habr.com/ru/company/oleg-bunin/blog/

📛Всем привет!

Saint HighLoad 2023 теперь летом!

📍26-27 июня, DDA Artplay, Питер.

Белые ночи, развод мостов и два дня высокой нагрузки.

📜Прием докладов уже во всю идет, дедлайн подачи 17 февраля, отправить заявку можно тут

Что нового помимо классических тем мы планируем:

▪️фейл секция
▪️хардкор
▪️больше обучения
▪️оффтоп
▪️лайтнинг толки

Давайте обсуждать эти и другие идеи для летнего Хайлоада уже на следующей неделе в Питерском убежище для разработчиков - Failover Bar

📍10 февраля, пятница.
⏰ Сбор гостей 19.30
Начало 20.00

➡️➡️ Регистрация на встречу

Трансляция будет, но из онлайна не распробовать вкусности кухни и не почувствовать уютную атмосферу бара 😉

Ждем вас!