В дата-центре Google в США произошёл электрический взрыв, который затронул часть оборудования. Подобные инциденты напоминают, что даже самые надёжные площадки зависят от физической инфраструктуры: трансформаторов, распределительных щитов, UPS и генераторов. Для администратора это повод пересмотреть собственные допущения о непрерывности.

Разберём, почему такие аварии случаются, как устроена защита дата-центров и что можно сделать в домашней лаборатории.

Что произошло

По сообщениям, инцидент был связан с электрической системой площадки. Точные причины и масштаб ущерба уточняются, но сам класс событий известен: дуговой разряд, отказ оборудования, ошибка при обслуживании. В результате часть стоек может потерять питание, а системы — перейти на резерв.

Для пользователей облачных сервисов это обычно выглядит как кратковременная деградация: одни виртуальные машины перезапускаются, другие продолжают работать. Провайдеры проектируют системы с запасом, но полностью исключить простой невозможно.

Как устроено резервирование

Современный дата-центр получает питание от нескольких вводов. Между внешней сетью и стойками стоят трансформаторы, автоматические выключатели, ИБП и дизельные генераторы. ИБП покрывает время до запуска генераторов, генераторы — длительные отключения.

Критичные нагрузки имеют двойное питание: два независимых пути к разным источникам. Сервер с двумя блоками питания распределяет нагрузку и переживает отказ одного пути. Но если оба пути сходятся в одной точке, защита иллюзорна.

Помимо питания, резервируются охлаждение, сеть и системы пожаротушения. Авария в одном компоненте не должна каскадно отключать всё.

Почему аварии всё равно случаются

  • человеческий фактор при обслуживании;
  • износ оборудования и старение проводки;
  • ошибки проектирования или монтажа;
  • перегрузка в жару;
  • каскадные отказы, когда защита срабатывает не так, как ожидалось.

Даже при резервировании остаётся риск, что инцидент затронет обе линии или систему управления. Поэтому контракты на облако должны учитывать не только заявленную доступность, но и план восстановления.

Что делать пользователю облака

  1. Проверьте, в каких регионах и зонах доступности размещены ресурсы.
  2. Убедитесь, что резервные копии хранятся в другом регионе.
  3. Настройте health checks и автоматический перезапуск.
  4. Имейте runbook на случай деградации провайдера.
  5. Не полагайтесь на один сервис для критичных функций.
# пример проверки доступности из разных мест
curl -sS -o /dev/null -w "%{http_code} %{time_total}\n" https://example.com
dig +short example.com

Если приложение развёрнуто в одной зоне, инцидент в дата-центре может остановить его целиком. Мультизонное развёртывание стоит дороже, но для критичных сервисов это осознанный выбор.

Домашняя лаборатория

Домашний сервер тоже зависит от электричества. Дешёвый ИБП защищает от кратких отключений и скачков, но не заменяет генератор. Подключите сервер к ИБП, настройте корректное завершение работы и проверьте, что оно действительно срабатывает.

sudo apt install apcupsd
sudo systemctl status apcupsd
apcaccess status

Для NUT (Network UPS Tools) настройте мониторинг и уведомления. Если ИБП не умеет общаться с системой, хотя бы измерьте время автономии и запишите его.

sudo apt install nut
upsc myups
systemctl status nut-monitor

Не ставьте сервер на пол без вентиляции и не подключайте критичное оборудование в одну дешёвую переноску. Пожарная безопасность важнее аптайма.

Уроки для архитектуры

Проектируйте так, чтобы отказ одной площадки не приводил к потере данных. Репликация должна быть асинхронной или синхронной в зависимости от допустимой задержки. Бэкапы — отдельно от реплик: реплика повторяет ошибки и шифрование, а бэкап позволяет вернуться назад.

Проверяйте сценарии: что будет, если регион недоступен час, сутки, неделю. Кто принимает решение о переключении? Где лежат ключи? Кто отвечает за коммуникацию с пользователями? Технические меры без организационных не работают.

Что проверить в договоре с провайдером

Читайте SLA: что считается простоем, какие компенсации, как быстро провайдер уведомляет. Уточните, где хранятся данные и как организовано резервное копирование. Для критичных систем запросите план непрерывности и результаты последних учений.

Не считайте, что «облако» автоматически означает отказоустойчивость. Ответственность за архитектуру, бэкапы и доступность приложения часто лежит на клиенте.

План непрерывности для небольшой компании

Если у вас нет дата-центра, это не значит, что инцидент с питанием вас не касается. Определите критичные сервисы, допустимое время простоя и минимальный набор функций, которые должны работать. Для многих компаний это почта, телефония, файлы и доступ к учётной системе.

# инвентаризация: что где работает
systemctl list-units --type=service --state=running
docker ps --format "table {{.Names}}\t{{.Status}}\t{{.Ports}}"
# проверка, что резервные копии свежие
ls -lt /mnt/backup | head

Запишите, кто отвечает за электрику, сеть и приложения, и как с ними связаться при отключении. Проведите учения: отключите питание на тестовом стенде и посмотрите, что действительно поднимется. Результаты важнее документа.

Для арендованного офиса уточните, есть ли ИБП на серверную и кто обслуживает генератор. Не рассчитывайте, что «здание всё предусмотрело»: ответственность часто размыта.

Итог

Электрический инцидент в дата-центре Google напоминает, что физический мир никуда не исчез. Резервирование снижает риск, но не устраняет его. Проверьте зоны размещения, бэкапы и runbook; дома поставьте ИБП и настройте корректное завершение. Аптайм — это результат архитектуры и процессов, а не только надёжного железа.

Насколько публикация полезна?

Нажмите на звезду, чтобы оценить!

Средняя оценка 4 / 5. Количество оценок: 1

Оценок пока нет. Поставьте оценку первым.

Поделиться: Telegram ВКонтакте