Microsoft не смогла полностью восстановить Microsoft 365 более чем через 13 часов после начала сбоя 12 ноября. Компания сообщала лишь об ограниченном восстановлении: часть серверов вернули в строй, а трафик направляли по альтернативным маршрутам.
К утру 13 ноября сервисы не восстановили полностью. Как мы писали 12 ноября, Microsoft связала сбой с недоступностью части серверов; позднее компания сообщила о перегрузке процесса защищённых соединений.
Центром сбоя стала Exchange Online — облачная система корпоративной почты, календарей и контактов. Пользователи могли терять доступ к ящикам через браузер, настольный Outlook и мобильные клиенты, а доставка писем задерживалась. На пике Downdetector зарегистрировал более 130 тысяч сообщений о проблемах с Outlook, пишет CIO.
Читайте также
Microsoft сначала проверяла, не вызвана ли перегрузка общим ростом трафика. Затем компания установила, что часть серверов неожиданно перестала отвечать, из-за чего подключения перешли на оставшуюся инфраструктуру. Дополнительной проблемой стал перегружавшийся процесс, отвечающий за защищённые соединения: затронутые серверы переставали обрабатывать запросы.
Компания остановила развёртывание обновлений, перезапускала серверы, добавляла вычислительные мощности и перераспределяла подключения между регионами. Microsoft также тестировала изменение конфигурации и отменяла недавнюю сетевую настройку, совпавшую по времени с началом сбоя. При этом некоторые серверы после возвращения трафика снова переставали отвечать. Окончательный отчёт о первопричине инцидента пока не опубликован.
Основные чаты и видеозвонки Teams работали, но зависимые от Exchange календари, приглашения и планирование встреч могли давать сбои. Copilot мог терять доступ к рабочей почте, календарям и файлам, а Safe Links — не проверять ссылки, открываемые из Outlook и Teams.
Отдельно 12 ноября произошёл более короткий сбой Teams в Северной и Южной Америке. Он продолжался с 9:45 до 10:53 по восточному времени США и затрагивал отправку и получение сообщений. Microsoft объявила этот инцидент устранённым, но не сообщила, связан ли он с последующей аварией Microsoft 365.
«Коммерсантъ» сообщил о жалобах пользователей из 74 стран. Издание также указало, что в Австралии проблемы затронули школы, суды, полицию и контрразведку.
Аналитик Greyhound Research Санчит Вир Гогиа советует компаниям предусмотреть отдельный канал для критической координации на случай недоступности Microsoft 365.