Почему Яндекс не работал

Активные пользователи Интернета могли наблюдать сегодня, что самая крупная поисковая система рунета — Яндекс напрочь отказывалась открываться и практически все сервисы Яндекса так же были недоступны.

В 17-30 по Московскому времени пресс-служба Яндекса прокомментировала сложившуюся ситуацию и сообщила, что Яндекс и все его сервисы недоступны из-за того, что в дата-центре случился сетевой сбой. Компания Яндекс так же уточнила, что текущая проблема является внутренней и связана с проблемами маршрутизации в сети.

Через пару часов поисковая система и все входящие сервисы от компании Яндекс полностью восстановили работоспособность после такого не запланированного сбоя.

Данная ситуация не могла пройти стороной мима и вот несолько сообщений из твиттера:

Конечно, это сразу отразилось в блогосферах. Вот несколько сообщений из твиттера —

День приключений — вот #yandex упал, кто его очень сильно достал. Карты пропали, закладки и почта, будем гуглить интенсивней и точка! :)))
@IgorZ_ua

Ставлю 5$, что #yandex пролежит ещё пол часа (до 20:00 по Мск)!
@seowit

Мой приезд в Москву с невыдачей визой в США никак не связан с тем что #yandex упал, правда
@terehoff

На блоге компании Яндекс написано:

Сегодня в течение нескольких часов сервисы Яндекса были недоступны. Это произошло из-за проблемы с маршрутизацией в сети Яндекса. С работой дата-центров, DDoS-атаками, пожарами, а также любыми другими внешними факторами это никак не связано. Сейчас основные последствия проблемы устранены. Никакие пользовательские данные не потеряны.

Мы приносим извинения всем нашим пользователям.

Для тех, кому интересно, более подробное описание:

Проблема вызвана ошибкой программного обеспечения на маршрутизаторе, расположенном в нашем новом дата-центре в Амстердаме. В Яндексе используются протоколы маршрутизации – внутренний протокол OSPF и внешний протокол BGP. Из-за ошибки информация обо всех внешних маршрутах оказалась во внутренних таблицах маршрутизации. Это примерно на три порядка больше маршрутов, чем обычно. Протокол OSPF не рассчитан на такое количество. В результате у всех маршрутизаторов кончилась память, и они перестали работать. Нарушилась работа сети, и через несколько минут Яндекс стал полностью недоступен.

Внутренняя сеть тоже не работала. Поэтому нашим специалистам потребовалось потратить много времени для того, чтобы по цепочке добраться до источника проблемы.

Администраторы исправили ошибку на маршрутизаторе. После этого, чтобы снять лишнюю нагрузку с остальных маршрутизаторов, которых у нас больше сотни, нашим специалистам пришлось разделить сеть на несколько частей. Количество трафика снизилось, у маршрутизаторов появилось больше свободной памяти, и они смогли самостоятельно восстановить связность сети.

Сеть начала постепенно подниматься. Через некоторое время сервисы Яндекса стали доступны большей части пользователей.

Владимир Иванов,
делаю sh ip bgp summary

Интересным остается вопрос: «Сколько денег стоил простой?» — будет интересно поразмышлять в комментария, которые находятся ниже 🙂