Одна поврежденная линия электропередачи заставила мигать свет от Вирджинии до Чикаго. Причина — центры данных AI.

Ключевые моменты

• Отказ линии электропередачи рядом с Вашингтоном на этой неделе привел к появлению 3,49 гигаватта избыточной электроэнергии в сети PJM, крупнейшего оператора сети в США, обслуживающего 67 миллионов клиентов.
• Примерно 3,1 гигаватта нагрузки центров данных отключились в течение 30 секунд, вызвав скачок напряжения от Северной Вирджинии до Чикаго.
• Массовое отключение было примерно в два раза больше, чем аналогичное событие в 2024 году, когда 60 центров данных одновременно изъяли 1,5 гигаватта из сети.
• Центры данных в настоящее время составляют около 6% от общего спроса PJM на электроэнергию; аналитики ожидают, что эта доля достигнет 24% к 2040 году.
• Одна компания ON.Energy уже устанавливает системы стабилизации на основе батарей емкостью 3 гигаватта на четырех кампусах центров данных.

На этой неделе одна линия электропередачи упала рядом с Вашингтоном. Обычно сетка восстанавливается за несколько секунд. На этот раз потребовалось более 11 минут, и в течение части этого времени свет мигал на протяжении большей части восточной части Соединенных Штатов, вплоть до Чикаго.

Виновником было внезапное одновременное решение, принятое десятками центров данных в Северной Вирджинии.

Что произошло на самом деле?

Когда линия электропередачи вышла из строя, напряжение в сети PJM, которая управляет электроэнергией от Нью-Джерси до Иллинойса, кратко упало. Центры данных разработаны для защиты своего оборудования от именно такого рода колебаний. Поэтому в течение секунд они переключились на свои собственные резервные генераторы и отключились от общественной сети.

Проблема в том, что они все это сделали одновременно.

Примерно 3,1 гигаватта спроса, примерно эквивалентный выходу трех крупных ядерных реакторов, исчез из сети примерно за 30 секунд, согласно данным PJM. Сетка, внезапно поставляющая намного больше энергии, чем кто-либо потреблял, выросла до 3,49 гигаватта избытка. Этот скачок вызвал волны напряжения в регионе, что и привело к миганию лампочек в домах и офисах далеко от Северной Вирджинии.

Событие, впервые сообщенное TechCrunch, вызвало скачки напряжения, измеренные Ting Labs, компанией-стартапом, которая отслеживает здоровье сети через датчики, подключенные к обычным электрическим розеткам по всей стране.

Почему это продолжает происходить?

Сетка должна оставаться в почти идеальном равновесии все время. Предложение и спрос должны совпадать, иначе напряжения колебаются. Небольшие колебания нормальны. Большие колебания запускают автоматические системы безопасности внутри сетки и отдельных зданий, которые затем отключаются для защиты.

Проблема в том, что Северная Вирджиния содержит наивысшую концентрацию центров данных где-либо в мире. Когда один ощущает падение напряжения, все это чувствуют, и все реагируют в течение секунд друг после друга.

«Нам нужно найти способ, чтобы эти нагрузки, которые расположены рядом друг с другом, последовательно либо отключались, либо переподключались», — сказал Ali Zain Banatwala, старший специалист по моделям рынка в Independent Electricity System Operator, изданию TechCrunch.

Событие на этой неделе было примерно в два раза больше, чем аналогичный случай в 2024 году, когда 60 центров данных одновременно изъяли 1,5 гигаватта из сети.

Какое решение?

Один ответ предоставляет стартап ON.Energy. Компания защищает весь кампус центра данных с помощью большого набора батарей и умного оборудования преобразования электроэнергии. Для сетки это выглядит как один стабильный, хорошо управляемый клиент вместо группы машин, которые могут исчезнуть в мгновение ока.

Если мощность сетки упадет, батареи мгновенно восполнят пробел, измеряемый в миллисекундах, поэтому центр данных никогда не должен отключаться. Если есть избыток мощности, батареи его поглощают. ON.Energy в настоящее время устанавливает свои системы на четырех кампусах центров данных общей емкостью 3 гигаватта, согласно главному технологу компании Ricardo de Azevedo.

Регуляторы также принимают меры. Оператор сети Техаса ERCOT планирует требовать от крупных клиентов, таких как центры данных, «пережидать» сбои вместо отключения.

«Это канарейка в угольной шахте», — сказал de Azevedo.

Честный вывод: если вы владелец бизнеса рядом с центром данных или просто человек, который заметил мигание, основная проблема заключается в координации, а не в катастрофе. Но игнорировать это станет все сложнее, так как требования к обучению AI каждый год требуют все больше энергии. Спросить вашу местную коммунальную компанию, что она делает для управления крупными промышленными нагрузками, — это совершенно разумный вопрос, и именно сейчас.