Инженер Google случайно отключил оптические кабели и вывел из строя облачный сервис

1 сентября облачные сервисы Google в регионе us-central1-b полностью вышли из строя на четыре часа. Причиной стала человеческая ошибка: инженер, выполнявший техническое обслуживание, отключил все оптические кабели от разъемов, что привело к полной потере сетевого соединения. В результате трафик сократился на 100%, и тысячи виртуальных машин стали недоступны для пользователей.

Google спроектировал свою инфраструктуру с множественным резервированием: двойная маршрутизация, отдельные источники питания и несколько независимых кабельных линий. Однако все эти системы защиты оказались бесполезны против простого физического отключения кабелей. Компания признала, что инженеру удалось обойти все предусмотренные меры безопасности.

Нарушение стало неприятным напоминанием о хрупкости облачной инфраструктуры и важности процедур, предотвращающих случайное отключение критического оборудования. Google опубликовала полный отчет об инциденте, но не уточнила, какие дополнительные меры будут введены для предотвращения подобных ситуаций в будущем.