05 октября 2021, 12:10

Хроники 6-часового простоя: что случилось 4 октября с Facebook, Instagram и WhatsApp

4 октября 2021 года произошло самое продолжительное и серьёзное падение основных глобальных соцсетей за последние годы.

Около 9 часов утра по тихоокеанскому времени на западном побережье США (около 19 часов по мск), где находится штаб-квартира социального гиганта, выяснилось что пропал доступ к приложениям семейства Facebook — самой соцсети, WhatsApp, Instagram и Facebook Messenger. И так продолжалось до закрытия рынка, при этом акции компании упали примерно на 5% ниже цены открытия в понедельник. Доступ к приложениям появился только к полудню — после того, как Facebook отправил специалистов в свой датацентр в Санта-Кларе, чтобы «вручную перезагрузить» серверы. Утром Facebook отправил короткий твит с извинениями, что «у некоторых людей возникают проблемы с доступом к нашим приложениям и продуктам». Затем появились сообщения о том, что отключение коснулось не только пользователей, но и самой компании. Оказалось, сотрудники не могли попасть в свои офисные здания и выполнять хоть какие-то функции, потому что отключение повлияло и на внутренние приложения для совместной работы.

Сначала Facebook никак не прокомментировал причину сбоя, но сторонние эксперты сразу объяснили падение сервисов сетевыми проблемами. Например, уже удалённая ветка Reddit от инженера Facebook описывала причину задолго до того, как она стала широко известной. По словам Джона Грэхема-Камминга, технического директора Cloudflare, первые признаки нестабильности появились около 8:50 по тихоокеанскому времени в Калифорнии: Facebook «исчез из интернета в результате шквала обновлений BGP» в течение двух минут. BGP или Border Gateway Protocol используется в сетях для определения наиболее быстрого способа отправки данных через интернет в другую сеть. Обновления в основном отменяли маршруты BGP, а без них Facebook словно закрылся от остального интернета вместе с WhatsApp, Instagram, Facebook Messenger и всем, что находится внутри его «цифровых стен».

Через несколько минут после отмены маршрутов BGP пользователи начали замечать проблемы. Интернет-трафик, который должен был идти в Facebook, по сути, терялся в интернете и никуда не уходил. Приложения Facebook перестали работать, веб-сайты — загружаться, появились сообщения о проблемах с DNS или системой доменных имен, которая является ещё одной важной частью работы интернета (она преобразует удобочитаемые веб-адреса в машиночитаемые IP-адреса, чтобы определить, где именно находится веб-страница в интернете).

Конечно, протокол BGP, который существует с момента появления интернета, тоже не исключает злонамеренных вмешательств, которые могут привести к массовым сбоям в работе. Но в данном случае просто криво прошло обновление конфигурации Facebook, а уже затем проблема распространилась дальше — по всему интернету. И только через 6 часов работа приложений полностью восстановилась.

«Наши сервисы снова подключены к сети, и мы активно работаем над тем, чтобы полностью вернуть их в нормальный режим работы. На данный момент мы хотим прояснить, что мы считаем, что основной причиной этого сбоя было неправильное изменение конфигурации. У нас также нет доказательств того, что пользовательские данные были скомпрометированы в результате этого простоя», — Facebook.

To the huge community of people and businesses around the world who depend on us: we’re sorry. We’ve been working hard to restore access to our apps and services and are happy to report they are coming back online now. Thank you for bearing with us.
— Facebook (@Facebook) October 4, 2021

«Приносим свои извинения огромному сообществу людей и компаний по всему миру, которые зависят от нас. Мы много работали над восстановлением доступа к нашим приложениям и сервисам и рады сообщить, что они снова возвращаются в онлайн. Спасибо, что терпите нас».

А что в итоге? За день FAANG — Facebook, Amazon, Apple, Netflix и Alphabet (владелец Google) — потеряла в общей сложности 243 млрд $, хорошо тряхнуло основные американские индексы — S&P 500, Nasdaq 100, Dow Jones и NYSE Composite, а лично Цукерберг обеднел на 6 млрд $ и спустился в списке миллиардеров Forbes с третьей на шестую строчку.

В результате масштабного сбоя пострадали не только приложения семейства Facebook: пользователи начали искать замену и массово перекинулись на другие площадки, которые оказались не готовы к такой нагрузке. Примечательно, что в Telegram массово мигрировали не только пользователи, но и... сотрудники Facebook, оставшиеся без связи друг с другом в привычных им сервисах. Именно мессенджер Павла Дурова стал основным средством общения во время падения в Facebook, пишет Эльдар Муртазин со ссылкой на собственные источники в компании. Сам Дуров запостил опрос в своём канале: