Google Cloud рассказала о курьёзном сбое в регионе us-central1-b, случившемся 1 сентября с 07:41 до 11:52 по тихоокеанскому времени. Причиной стал инженер, обслуживавший оборудование и физически отключивший часть сети от интернета.
По данным The Register, сотрудник последовательно отключил 100% оптоволоконных соединений всего за 13 минут. Скорость его действий не позволила системам вовремя предупредить об ошибке.
Виртуальные машины в одной из зон доступности потеряли связь с внешним миром, хотя между собой обмениваться данными могли. Пользователи не могли получить доступ к ресурсам и даже понять, что происходит.
Объём трафика в пострадавшей зоне облака упал на 100%, часть инстансов стала недоступна, а потери пакетов выросли. Google уточнила, что резервирует маршрутизаторы и использует раздельное питание с несколькими ВОЛС на случай двойных и тройных отказов.
Все эти меры защиты можно обойти, просто выдернув кабели из гнёзд.
После обнаружения проблемы трафик перенаправили на работоспособные мощности в других частях региона. Затем инженеры вернули кабели на место и восстановили исходную конфигурацию сети.
Предполагается, что виновник нарушил базовое требование — читать инструкции перед началом работ. Uptime Institute отмечает: сбои в дата-центрах стали реже, но их последствия — значительнее.
Человеческий фактор регулярно приводит к авариям и за пределами облачных технологий. Летом 2025 года австралийские военные по ошибке отключили Wi-Fi и радиосвязь на побережье Новой Зеландии.