Timeweb Cloud восстановила сервисы после сетевого сбоя 17 ноября
17 ноября с 13:18 до 15:05 мск часть сервисов Timeweb Cloud была недоступна из-за сетевого сбоя, возникшего при обновлении гипервизоров. Затронутыми оказались все локации, кроме Новосибирска. Об этом сообщает Telegram-канал «Timeweb Cloud Alerts».
«Мы проводили обновление сетевого стека гипервизоров для повышения безопасности инфраструктуры. Во время обновления служба динамической маршрутизации перезапустилась не полностью. В результате этого гипервизоры не смогли повторно анонсировать маршруты к сетевому оборудованию, и часть серверов потеряла сетевую связность. При этом сами виртуальные серверы продолжали работать», — пишет «Timeweb Cloud Alerts».
Проблемы с сетевой доступностью серверов начались в 13:18 мск. В 13:28 мск инженеры локализовали проблему и приступили к восстановлению. В 13:47 мск сообщили о проблемах в локациях SPB, MSK, DE, NL и KZ. Инженеры полностью перезапустили сетевой стек гипервизоров, после чего маршрутизация восстановилась. В 14:17 мск большая часть серверов снова стала доступна по сети. В 15:05 мск работа всех сервисов в рамках инцидента была полностью восстановлена.
В дальнейшем компания планирует расширить проверки после обновления гипервизоров, проверяя каждый компонент службы маршрутизации, а не только службу целиком. Также будут увеличены интервалы между этапами обновления для выявления проблемы до перехода к следующим нодам. Кроме того, планируется ускорить восстановление сетевого стека при похожих сбоях, чтобы быстрее возвращать доступность сервисов.
Подписывайтесь на наш Telegram-канал, чтобы быть в курсе всех новостей и событий Рунета.