Cloudflare 18 ноября 2025 года произошел масштабный сбой в работе сервиса, начавшийся примерно в 11:20 UTC. Сбой затронул значительную часть мирового интернет-трафика и привел к перебоям в работе основных платформ, включая ChatGPT, Клод, Spotify, X и HostScore.net. Сбой привел к постоянным ошибкам HTTP 5xx, нарушению потоков аутентификации и увеличению задержек в Cloudflareсеть.
Cloudflare Позднее было подтверждено, что инцидент не был вызван кибератакой, несмотря на первоначальные предположения, связанные с масштабом и симптомами сбоя. Это объявление служит официальным обновлением для наших читателей, партнёров и заинтересованных сторон, поскольку мы документируем произошедшее, пути распространения и то, как в конечном итоге восстановились сервисы.
Масштаб нарушения
Сбой вызвал Cloudflare'счет CDN и уровни безопасности перестали обрабатывать трафик в обычном режиме, что привело к резкому увеличению количества ошибок HTTP 5xx в сети. Посетители затронутых веб-сайтов столкнулись с ошибками, зависанием загрузки или длительными задержками. CloudflareПрокси-уровень не смог ответить. Ключевые сервисы, включая Bot Management, Turnstile, Workers KV и Cloudflare В то же время доступ ухудшился. Влияние усугубилось для веб-сайтов, которые полагались на Cloudflare для кэширования, безопасности и аутентификации.
CloudflareДоступ к панели управления компании также был затруднен из-за сбоя загрузки Turnstile, уровня верификации на странице входа. Внешняя страница статуса компании также была отключена, что создало путаницу в первые минуты инцидента. CloudflareИнфраструктура электронной почты продолжала работать, однако точность обнаружения спама на короткое время снизилась из-за потери канала репутации IP-адресов.
Основная причина: скрытая ошибка
Cloudflare подтвердили, что сбой был вызван скрытой ошибкой в основном компоненте системы управления ботами.
В 11:05 UTC плановое обновление разрешений базы данных непреднамеренно изменило способ запроса метаданных службой генерации признаков. Вместо того, чтобы извлекать данные из одной схемы, служба начала запрашивать данные как из схемы по умолчанию, так и из схемы r0, создавая большой набор дублирующихся строк признаков. Этот раздутый файл конфигурации затем распространился по всем Cloudflareглобальная сеть.
Основной прокси-движок устанавливает жёсткое ограничение в 200 функций машинного обучения для обеспечения производительности и распределения памяти. Файл слишком большого размера превысил этот лимит, что привело к панике прокси-сервера FL2 и возврату ошибок 5xx для всех затронутых запросов. Клиенты, всё ещё использующие старый прокси-движок FL, не столкнулись с полным отказом, но их показатели управления ботами по умолчанию упали до нуля, что привело к нестабильной обработке трафика.
Временная шкала разрешения
Cloudflare Первую волну ошибок в трафике клиентов обнаружили в 11:28 UTC.
Первоначально инженеры сосредоточились на Workers KV, где наблюдалось аномальное падение скорости реагирования между 11:32 и 13:05 UTC.
В 13:04 UTC Cloudflare применил экстренный патч для обхода основного прокси-сервера для Workers KV, а затем аналогичный обход для Cloudflare Доступ в 13:05 UTC.
К 13:37 UTC команда инженеров начала откат конфигурации Bot Management до заведомо исправной версии.
Cloudflare остановил создание новых файлов функций в 14:24 UTC и развернул исправленную конфигурацию по всему миру в 14:30 UTC, что восстановило нормальный поток трафика.
Проблемы со входом в панель управления были устранены позднее, полный доступ к панели управления был восстановлен около 15:30 UTC. Cloudflare было отмечено, что инцидент был полностью решен в 17:06 UTC.
HostScore.net Заявление о воздействии
HostScore.net Входил в число сайтов, пострадавших во время сбоя. Наша команда наблюдала резкие всплески ответов 5xx и временную недоступность. CloudflareАвтора CDN и уровни безопасности не смогли обработать запросы. Восстановление сайта происходило постепенно, Cloudflare реализовал шаги по откату и восстановлению.
Наши системы мониторинга обнаружили проблему в течение нескольких минут и продолжили отслеживать поведение сети до полного восстановления её стабильности. Хотя сбой произошёл выше по течению от нашей инфраструктуры, мы по-прежнему стремимся к прозрачности и продолжим совершенствовать наши процессы мониторинга и реагирования на непредвиденные обстоятельства для повышения общей устойчивости сервиса.
CloudflareПодтверждение и действия после инцидента
Cloudflare публично признали серьезность инцидентаТехнический директор Дэн Кнехт принёс извинения и заявил, что компания «подвела своих клиентов и весь Интернет». Компания назвала это событие самым серьёзным сбоем с 2019 года, подчеркнув, как небольшая ошибка конфигурации может привести к каскадному эффекту в масштабных распределённых системах.
Cloudflare начал работу над несколькими долгосрочными улучшениями, включая усиление процесса загрузки внутренних файлов конфигурации, расширение глобальных аварийных выключателей для более быстрой изоляции неисправных компонентов и предотвращение потребления системных ресурсов в результате скачков числа сообщений об ошибках. Благодаря инфраструктуре, охватывающей 330 городов и обслуживающей примерно 20% интернета, Cloudflare подчеркнул свою приверженность предотвращению подобных сбоев в будущем.
Подводя итог
Этот инцидент наглядно демонстрирует, насколько сильно современный интернет зависит от небольшого числа основных поставщиков услуг. Когда в одной из этих сетей происходит сбой, последствия могут охватить миллионы пользователей за считанные минуты. Cloudflare работает над планом по восстановлению, HostScore.net по-прежнему привержена принципам прозрачности, постоянного мониторинга и постоянных улучшений, которые повышают устойчивость нашей платформы и надежность услуг, от которых зависят наши читатели.
