Полный шатдаун Beget 💥

Сегодня около 3 часов ночи один из крупнейших хостинг-провайдеров России Beget столкнулся с масштабным сбоем. Падение затронуло сотни тысяч клиентов: перестали открываться сайты, «легла» панель управления и отвалились ключевые сервисы (включая приложение государственного маркетплейса «Честный знак»). У меня, естественно, тоже легло абсолютно всё.

Но больше всего умиляет коммуникация: о самом сбое я узнал из новостных пабликов — через официальный TG-бот и почту ребята не додумались оповестить клиентов. Видимо, бот и почта тоже крутились на их же серверах 🤡 Зато счета и просьбы занести денег прилетают в телегу строго по расписанию.

Чтобы оценить масштаб трагедии:

🏆 Топ-3 в РФ: Beget стабильно входит в тройку лидеров рынка хостинга и VPS в России, уступая только REG.RU.
🌐 ~500 000 сайтов: В их инфраструктуре крутится огромная часть рунета — от мелких интернет-магазинов до сервисов национального уровня.
📦 15% всех RU-доменов: На серверах компании зарегистрирована почти шестая часть доменных имён в зоне .ru.

У вас как дела? Вся инфраструктура выстояла или пришлось срочно поднимать бэкапы на сторонних VPS? Планируете ли уезжать с российских хостингов?

Дополнение: оказывается, Beget взломали 💥

Команда Beget опубликовала обновление по инциденту: в ночь на 2 ноября их инфраструктура подверглась массированной кибератаке.

Провайдер сразу же официально заявил о возникновении обстоятельств непреодолимой силы. Так что юридически компания заранее снимает с себя ответственность за простои и финансовые убытки клиентов.

Что происходит с восстановлением прямо сейчас:

Подняли работу dedicated-серверов.
Восстановление DNS-инфраструктуры в приоритете, обещают поднять в ближайшие 4–5 часов (хотя то, что базовые NS поднимают почти целые сутки, намекает на глубину проблемы).
Работы по восстановлению почты продолжаются.
Файловые бэкапы большинства ресурсов виртуального хостинга и облаков им доступны, но процесс разворачивания данных из-за объёмов займёт длительное время.

Команда признаёт, что всё ещё оценивает масштаб бедствия, поэтому точных сроков полного оживления сервисов назвать не может. Похоже, данные частично повреждены или зашифрованы, а поднятие систем из бэкапов будет долгим.

Ох уж эти обстоятельства непреодолимой силы…

Дополнение 2: хакеры уничтожили данные облачных сервисов

Хостинг-провайдер Beget столкнулся с масштабными последствиями кибератаки. В компании подтвердили полную утрату данных в инфраструктурах VPS, S3 и Kubernetes. Вместе с ними были уничтожены бинарные бэкапы VPS, а также настройки IP и CDN.

Тем не менее специалисты уже смогли восстановить работу выделенных серверов и практически полностью наладили работу почтового сервиса. Кроме того, клиентам продлят сроки делегирования доменов в российских зонах.

Восстановительные работы продолжаются.