Интенсив 21–22.11 · БесплатноБесплатный 2-дневный интенсив по вайбкодингу 21–22 ноября в 16:00 МСК (Сб–Вс) · Живой Поток 3 стартует 23.11Записаться бесплатно →Поток 3 (23.11)
РелизРазбор · На радарArs Technica→ оригинал

Сбой Microsoft 365 отключил почту и Copilot, недоставленные письма хранят 48 часов

С четверга у Microsoft 365 не работают почта, облако и Copilot: серверы проваливают автоматическую проверку «жив ли я» и выпадают из работы. Возвращённые в строй машины снова зависают, как только получают трафик. Поэтому Microsoft продлила хранение недоставленных писем до 48 часов — они ждут в очереди, а не пропадают. Вывод для команд: коды входа не стоит держать на одной почте.

AI-обработка оригинала Ars Technica; редакция Hamidun News
Сбой Microsoft 365 отключил почту и Copilot, недоставленные письма хранят 48 часов
Источник: Ars Technica. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникArs Technica ↗
Главный редактор
Ключевой факт #1Затронуты почта, облако и ИИ; у Microsoft более 450 млн платных подписок
Эксперт Киаран Мартинсбой может быть хуже AWS и CrowdStrike
Взлома нетпричину Microsoft обещает назвать в отчёте после починки

В четверг в середине дня у Microsoft 365 начался глобальный сбой, и к утру пятницы он всё ещё не закончился. Перестали стабильно работать почта Outlook, облачные сервисы и ИИ-помощник Copilot. Причина, по словам Microsoft, в том, что серверы массово проваливают автоматическую проверку состояния, то есть регулярный запрос «ты жив?», и из-за этого выпадают из работы. Чтобы письма не терялись, пока почта лежит, компания продлила срок их хранения в очереди до 48 часов. Если ваша команда живёт на Outlook, Teams и облачных документах, вы, скорее всего, уже почувствовали это на себе.

Что сломалось и почему чинить так долго

Microsoft сообщила, что проблема возникла в части инфраструктуры, которая испытывала повышенную нагрузку сразу в нескольких регионах. При этом компания подчёркивает: причина не в росте трафика, а в том, что серверы не проходят автоматические проверки и становятся недоступны.

Как это работает на простом примере. Перед группой серверов стоит балансировщик, который раздаёт запросы пользователей. Он постоянно спрашивает каждый сервер: «ты в порядке?» Если ответа нет, машину убирают из раздачи. Когда проверки ломаются у многих серверов сразу, нагрузка падает на оставшиеся, они перегружаются и тоже перестают отвечать. Получается эффект домино.

Microsoft сначала пыталась остановить выпадение новых серверов и проверяла другие способы такой проверки. Через четыре часа компания признала, что принятые меры «не дали ожидаемого облегчения». Выяснилось, что на затронутых серверах перегружается один из базовых процессов, из-за чего падает доступная мощность. Тогда инженеры начали изолировать часть инфраструктуры, перезапускать компоненты и понемногу возвращать трафик, проверяя, что сервисы остаются стабильными.

Но и это сработало не сразу: часть серверов, которые удалось вернуть в строй, снова переставала отвечать, как только на них приходили запросы. Поэтому Microsoft начала защищать данные: срок ожидания недоставленной почты увеличили до 48 часов. Простыми словами, если письмо не удаётся доставить сразу, система ждёт до двух суток и не отбрасывает его.

Кто пострадал

Бывший глава Национального центра кибербезопасности Великобритании Киаран Мартин в разговоре с NBC News назвал сбой одним из крупнейших в истории и допустил, что он может оказаться хуже недавних падений Amazon Web Services и CrowdStrike. Это оценка эксперта, итогового подсчёта ущерба пока нет.

NBC описывает такие последствия:

  • в Японии нарушилась работа государственной IT-инфраструктуры, заявил заместитель главного секретаря кабинета министров Масанао Одзаки;
  • врачи не могли отправлять пациентам важные сообщения об изменении лекарств и дальнейшем лечении;
  • люди не могли делать банковские переводы, потому что к ним не приходили коды подтверждения;
  • Верховный суд Филиппин не мог вести юридическую работу;
  • в одном из шерифских офисов штата Колорадо стало трудно оформлять залог для немедленного освобождения задержанных.

Сколько именно пользователей затронуто, неизвестно. Для масштаба: в январе Microsoft оценивала число платных коммерческих подписок на Microsoft 365 больше чем в 450 миллионов.

Что известно о восстановлении и что делать

К пятнице Microsoft сообщила об улучшениях в Северной Америке, устойчивом восстановлении в большей части Европы и «обнадёживающих сигналах» в Азиатско-Тихоокеанском регионе. По данным DownDetector, пик жалоб пришёлся на четверг после полудня и к утру пятницы заметно снизился. Однако один из пользователей Outlook пишет, что исходящие письма уходят нормально, а входящие приходят нестабильно. Часть пользователей Copilot жалуется, что ИИ-помощник вернулся позже почты.

Microsoft говорит, что не видит признаков вредоносной активности, и обещает опубликовать полный постинцидентный отчёт с первопричиной и мерами защиты после устранения сбоя. Пока отчёта нет, судить о том, почему именно сломались проверки состояния, рано.

Что стоит сделать командам, которые строят продукты:

  • не держите коды двухфакторной аутентификации и важные уведомления клиентов на одном почтовом провайдере, нужен запасной канал, например SMS или мессенджер;
  • заранее решите, что делают ваши ИИ-функции, если облако вендора недоступно: ручной режим или резервная модель;
  • посмотрите на собственные проверки состояния: если они слишком агрессивно убирают серверы из раздачи, частичная проблема может стать каскадной;
  • подготовьте план связи с клиентами на случай, когда недоступны и почта, и рабочие чаты.

Главный урок самого сбоя: массовое падение нельзя вылечить простым перезапуском. Серверы возвращаются, получают реальную нагрузку и снова падают. Выводы о причинах и ущербе стоит делать после отчёта Microsoft.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: что сломалось и почему чинить так долго?

Microsoft сообщила, что проблема возникла в части инфраструктуры, которая испытывала повышенную нагрузку сразу в нескольких регионах. При этом компания подчёркивает: причина не в росте трафика, а в том, что серверы не проходят автоматические проверки и становятся недоступны. Как это работает на простом примере. Перед группой серверов стоит балансировщик, который раздаёт запросы пользователей. Он постоянно спрашивает каждый сервер: «ты в порядке?» Если ответа нет, машину убирают из раздачи.

Что известно по теме: кто пострадал?

Бывший глава Национального центра кибербезопасности Великобритании Киаран Мартин в разговоре с NBC News назвал сбой одним из крупнейших в истории и допустил, что он может оказаться хуже недавних падений Amazon Web Services и CrowdStrike. Это оценка эксперта, итогового подсчёта ущерба пока нет.

Что известно по теме: что известно о восстановлении и что делать?

К пятнице Microsoft сообщила об улучшениях в Северной Америке, устойчивом восстановлении в большей части Европы и «обнадёживающих сигналах» в Азиатско-Тихоокеанском регионе. По данным DownDetector, пик жалоб пришёлся на четверг после полудня и к утру пятницы заметно снизился. Однако один из пользователей Outlook пишет, что исходящие письма уходят нормально, а входящие приходят нестабильно. Часть пользователей Copilot жалуется, что ИИ-помощник вернулся позже почты.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Практика · Hamidun Academy

Соберите рабочего ИИ-агента или сервис своими руками без ручного кода

В Академии Жемала Хамидуна (academy.hamidun.com) открыт бесплатный 72-часовой тест-драйв: интерактивные скетч-уроки по Claude Code и Cursor, живой Tech Radar и готовые шаблоны агентов.

Открыть 72ч бесплатный доступ →Интенсив по Вайб-кодингу
Что вы думаете?
Загружаем комментарии…