«Я запаниковал, что произошло?», сбой в работе Cloudflare вызвал хаос в глобальном интернете

Автор: Чжао Юхэ

Источник: Wallstreetcn

Ранним утром во вторник по восточному времени США интернет-провайдер инфраструктуры Cloudflare сообщил о сбоях в своей глобальной сети, вызвавших проблемы с доступом ко множеству сайтов, включая социальную платформу X, с ошибками вроде «internal server error». Пользователи не могли получить доступ ко многим сайтам и сервисам, включая платформы для розничной торговли, электронной коммерции, социальных сетей, финансовых услуг и транспорта. Позднее компания заявила, что проблема была устранена менее чем за четыре часа.

Во время простоя часть функций X вышла из строя, а множество других сайтов столкнулись с проблемами доступа. Согласно данным платформы отслеживания сбоев Downdetector, помимо X, пострадало большое количество ресурсов, при этом количество жалоб непрерывно росло. При попытке посетить X, ChatGPT, DoorDash, IKEA, а также сайты метрополитена Нью-Йорка (MTA), пользователи видели сообщения об ошибках, связанных с Cloudflare.

Позже одна из представительниц Cloudflare сообщила, что примерно в 6:20 утра по восточному времени США на одном из их сервисов произошел аномальный всплеск трафика, что привело к ошибкам в прохождении трафика через сеть компании.

Другой представитель Cloudflare Джеки Даттон в официальном сообщении указала, что проблема была вызвана автоматически сгенерированным конфигурационным файлом для управления угрозным трафиком, на исправление ушло менее четырех часов. Компания отметила, что основные меры по устранению уже внедрены, но предупредила, что системе «требуется время для полной стабилизации».

Даттон сказала:

«Количество записей в данном файле превысило ожидаемый размер, что привело к сбою программной системы, отвечающей за обработку трафика части сервисов Cloudflare».

В заявлении отмечается, что нет никаких доказательств связи инцидента с кибератакой или злонамеренной деятельностью.

Масштабы сбоя оказались крайне широкими. На своей платформе Downdetector сообщил, что во время простоя Cloudflare «накопилось более 2,1 миллиона отчетов об ошибках различных затронутых сервисов», что указывает на то, что данный инцидент стал одним из наиболее серьезных инфраструктурных сбоев за последние годы.

После инцидента акции Cloudflare в начале торгов во вторник резко упали на 7%, после чего спад несколько сократился.

Реакция последовала и со стороны индустрии цифровых активов. Сооснователь и бывший генеральный директор Binance Чжао Чанпан опубликовал пост в X: «Блокчейн продолжал работать (Blockchain kept working)», намекая на то, что децентрализованные системы не пострадали от этого инцидента.

К 12:15 по восточному времени США Cloudflare сообщила, что система постепенно восстанавливается, однако в некоторых регионах мира все еще могут возникать ошибки доступа, снижение производительности или проблемы с авторизацией. Компания будет регулярно обновлять информацию о ходе устранения неполадок на специальной странице статуса.

Чрезмерная зависимость от нескольких компаний

В последние годы неоднократно происходили случаи, когда сбои у поставщиков цифровой инфраструктуры парализовали работу глобального интернета. Аналогичные инциденты с Amazon Web Services (AWS), CrowdStrike Holdings Inc. и Microsoft подчеркивают, что мировой интернет в значительной степени зависит от услуг всего нескольких компаний.

Сервисы Cloudflare и AWS практически незаметны для обычных пользователей, но их инструменты обеспечивают работу множества сайтов и сервисов, которыми потребители пользуются каждый день.

В прошлом месяце простой AWS привел к параличу отдельных регионов интернета: миллионы пользователей потеряли доступ к своим сайтам и приложениям, рухнули розничные продажи, прервалась работа социальных сетей и финансовых сервисов, пострадали многие предприятия. А в прошлом году уязвимость в инструменте, используемом компанией по кибербезопасности CrowdStrike, вызвала массовые сбои компьютерных систем по всему миру, что привело к задержкам и отмене тысяч авиарейсов, а также дезорганизовало работу государственных учреждений и крупных корпораций.

Эксперт калифорнийской компании по кибербезопасности Check Point Software Грэм Стюарт отметил, что подобные инциденты обнажают чрезмерную зависимость интернета от нескольких провайдеров инфраструктуры.

Он заявил:

«Многие организации по-прежнему завязывают все ключевые службы на один единственный канал и не имеют по-настоящему эффективного резервного копирования. Как только этот канал выходит из строя, альтернативных решений не остается. Именно это мы и наблюдаем постоянно».

Профессор кибербезопасности Суррейского университета (University of Surrey) Алан Вудвуд заявил, что сегодняшний сбой вновь доказывает, насколько сильно интернет зависит от «небольшого числа игроков». Он назвал Cloudflare «самой большой компанией, о которой вы, возможно, никогда не слышали».

«У людей нет выбора, они вынуждены полагаться на этих несколько крупнейших компаний».

Извинения технического директора

Технический директор Cloudflare Дэйни Кнетт принес извинения за произошедший инцидент. Он написал в X:

«Когда сеть Cloudflare дает сбой и затрагивает огромные объемы трафика, который от нас зависит, мы подводим как клиентов, так и весь интернет. Сама проблема, последствия и время, потраченное на её устранение, неприемлемы. Мы уже приступили к работе над тем, чтобы подобное больше не повторилось, но я понимаю, что сегодня доставил всем массу неудобств. Доверие наших клиентов — самое важное, и мы сделаем всё возможное, чтобы вернуть его».

Cloudflare неоднократно сталкивалась с подобными отключениями в последние годы.

В июле 2019 года уязвимость в программном обеспечении Cloudflare привела к чрезмерной нагрузке на вычислительные ресурсы отдельных модулей сети, из-за чего тысячи зависимых от компании сайтов (включая Discord, Shopify, SoundCloud и Coinbase) оставались недоступными в течение 30 минут. В июне 2022 года еще один сбой повлиял на трафик 19 ее дата-центров, парализовав работу ряда крупных сайтов и сервисов на полтора часа.

Программное обеспечение Cloudflare используется сотнями тысяч компаний по всему миру в качестве буферного слоя между корпоративными веб-сайтами и конечными пользователями для защиты ресурсов от сбоев, вызванных атаками на трафик или его резкими скачками.

В прошлом году ошибочное обновление программного обеспечения, выпущенное компанией по кибербезопасности CrowdStrike, привело к отказу миллионов устройств под управлением Windows от Microsoft, вызвав масштабный хаос в авиаперевозках, банковской сфере, здравоохранении и многих других отраслях.

Сбой CrowdStrike был вызван ошибкой, скрытой глубоко в работе продукта на клиентских компьютерах. Задача же Cloudflare заключается в защите интернет-инфраструктуры, такой как сайты и платформы, поэтому при ее отключении множество популярных ресурсов становится полностью недоступным или работает некорректно. Основная миссия Cloudflare — «поддерживать работу сайтов в круглосуточном режиме и обеспечивать высокую скорость», тогда как CrowdStrike специализируется на защите компьютеров и серверов от кибератак.