Восстановление сервисов Яндекса после сбоя в ЦОДах

А теперь со словами и эмоциями То, с чем мы столкнулись: беспрецедентно. Когда отваливается несколько крупных ЦОДов — это очень и очень больно 🤔. У нас есть такая штука, как "УченЬки" — где мы уже очень давно (мне кажется, я ещё в школу в то время ходил) тренируемся в сетапе с отключением ДЦ. И это нам помогало не раз: всякий раз, когда приходила беда — мы всегда справлялись, потому что смотрели наперёд. И в моменте хотелось, конечно, иногда поныть, нафига всё это, мешаете работать: сейчас понятно, зачем 😍. Если бы неделю назад меня спросили: "представь себе ситуация, у вас отключают несколько ДЦ, будете ли вы наплаву" — я бы уверенно сказал: нет. И оказался бы неправ . За супер короткий срок, мы научились жить в очень критических условиях, спасибо каждому инженеру, ребятам из рантайма — вы герои 🌿! И пусть сейчас не всё гладко у наших сервисах, пусть что-то где-то тормозит, подлагивает, не всегда отрабатывает — мы днями и ночами пытаемся стараемся это вылечить. Вопросы не о простой нагрузке, а о многомиллионной аудитории, над перераспределением которой мы работаем 🤯. Я относительно давно занимался такими же делами и прекрасно понимаю, какой это труд, когда под гнётом трафика начинают сыпаться поды, балансеры и лавинообразным эффектом захватывает всё вокруг 💀. А я не то чтобы ослуживал супер высоконагруженный сервис. Но уже сейчас Алиса, Поиск, Карты, Такси, Почта и другие сервисы восстанавливаются и всё больше функций доступны нашим пользователям — это чудо! Спасибо вам за середечки в прошлом посту, ваша поддержка очень важна для нас прямо сейчас 🥹! И мы обязательно всё починим — нам просто нужно немножечко времени!