Плановые профилактические работы

🛑 Во время проведения работ панель управления аккаунта Hosting/Cloud может быть недоступна (суммарный простой до 5 минут)
🌐 Время: 14.08.2024 с 20:00 до 21:00 по МСК
⚒ Причина: технические работы по модернизации инфраструктуры.

Плановые профилактические работы

🛑 В датацентре msk будут проводится аварийно-восстановительные работы на сети, в 18:00 ожидается кратковременная сетевая недоступность до 5 минут в Москве и Казахстане
🌐 Время: 17.08.2024 с 18:00 до 18:15 МСК
⚒ Причина: Необходима замена сетевого оборудования.

Технические работы

🛑 Вся зона будет недоступна ~5 —15 минут.
🌐 Зона и время: Польша, 20.08.2024 с 13:00 до 15:00 по МСК
⚒ Причина: партнер в Польше будет проводить аварийные работы на уровне сети.

Технические работы

🛑 Недоступность сети по причине аварийных работ со стороны провайдера
🌐 Зона и время: Польша, 20.08.2024 с 13:00 до 15:00 по МСК
✅ Проблема решена

🛑 Сетевая недоступность;
🌐 Зоны: NL;
⚒ Проблема: Наблюдаем недоступность серверов в Нидерландах, инженеры погружены в выявление проблемы и ее решение.

2 сентября с 00:00 до 01:00 мск наши инженеры будут менять маршрутизацию сети для релиза BGP.

В этот период может пропасть сеть — суммарно до 5 минут в Нидерландах и Польше, и до 30 секунд в других локациях.

🛑 Частичная сетевая недоступность;
🌐 Зона: KZ;
⚒ Проблема: Наблюдали недоступность серверов в KZ C ~01:48 до 1:52, инженеры провели работы.
Сейчас проблем уже не должно быть.
✅ Проблема решена

🛑 Недоступность сети
🌐 Зона: SPB, MSK

При обновлении правил на сетевом оборудовании возникли проблемы. Производим откат изменений

🛑 Недоступность сети
🌐 Зона: SPB, MSK

Откат изменения произведен, сервисы восстановятся веерно в ближайшее минуты

🛑 Недоступность сети
🌐 Зона: SPB, MSK

✅ Работа сети восстановлена, все сервисы доступны.
Затронуло часть стоек в SPB, MSK на BGP сетях.

Начало инцидента: 11:22:01 по мск
Решение инцидента: 11:49:17 по мск

Расширим алгоритм тестирования с целью предотвращения подобных инцидентов

🛑 Аварийные работы на трассе Амстердам - СПб

Обрыв трассы в Европе. Время устранения обрыва до 5 часов. Могут появиться задержки и замедления. Сетевые инженеры перераспределяют трафик на время аварийных работ.

🛑 Сетевая недоступость панели управления Timeweb Cloud

Страница панели управления https://timeweb.cloud/my/ может быть временно недоступна

Начало инцидента: 01:28 по мск
Решение инцидента: 02:21 по мск

✅ Работа панели управления восстановлена

🛑 Временно отключили работу с образами

Во всех локациях, кроме Польши, будут недоступны создание и загрузка новых образов, а также удаление и скачивание уже созданных. Ориентировочно до 5 ноября. Списания за образы на этот период остановлены.

Включили создание и загрузку новых образов в Москве и Санкт-Петербурге.

🛑 Аварийные работы на трассе Амстердам - СПб

Обрыв трассы в Европе. Могут появиться задержки и замедления. Сетевые инженеры перераспределяют трафик на время аварийных работ.

🛑 Аварийные работы на трассе Амстердам - СПб

Обрыв трассы в Европе. Могли наблюдаться задержки и замедления.

✅ Проблема решена

🛑 Фиксируем DDoS-атаку, отражаем и мониторим ситуацию.

🛑 Фиксируем новую волну DDoS-атаки, сетевые инженеры продолжают работать над отражением.

Отчет по итогам DDoS-атак 05.12.2024

1 волна: с 13:35 до 14:35 мск. Тип атаки: GRE-флуд. Пиковый объем ~267 Gb/s

2 волна: с 16:37 до 17:19 мск. Тип атаки: L3-флуд. Пиковый объем ~150 Mp/s

3 волна: с 18:47 до 19:26 мск. Тип атаки: L3-флуд. Пиковый объем ~173 Mp/s

Атаки велись по подсетям, основной вектор был направлен на регион NL. Во время атак наблюдалась просадка пакетной производительности маршрутизаторов, вследствие чего увеличивались задержки и потери пакетов. Аварийных отключений не было.

На данный момент все три атаки отражены.

🛑 Фиксируем новые волны DDoS-атак. Продолжаем фильтровать.

🛑 Фиксируем новую волну DDoS-атаки на локацию Нидерланды. Сетевые инженеры уже работают над отражением атаки.

✅ Волны атак закончились, продолжаем следить за ситуацией.