Одна перебита лінія електропередачі мерехтіла вогні від Вірджинії до Чикаго. Це були центри обробки даних AI.
Коли одна лінія електропередачі вийшла з ладу поблизу Вашингтона, округ Колумбія, більше 3 гігават потужності центрів обробки даних зникло за секунди. Мережі знадобилося 11 хвилин на відновлення. Це сигнал застереження про те, що відбуватиметься далі, оскільки попит на AI продовжує зростати.
Ключові моменти
- Відмова лінії електропередачі поблизу Вашингтона, округ Колумбія на цьому тижні призвела до того, що 3,49 гігавата надлишкової електроенергії потрапило в мережу PJM, найбільшого оператора мережі в США, який обслуговує 67 мільйонів споживачів.
- Близько 3,1 гігавата навантаження центрів обробки даних відключилося протягом 30 секунд, що спричинило скачок напруги від Північної Вірджинії аж до Чикаго.
- Масове відключення було приблизно в два рази більшим за подібну подію у 2024 році, коли 60 центрів обробки даних одночасно відібрали 1,5 гігавата з мережі.
- Центри обробки даних нині становлять близько 6% від загального енергоспоживання PJM; аналітики очікують, що цей показник сягне 24% до 2040 року.
- Одна стартап, ON.Energy, уже встановлює 3 гігавата батарейних систем стабілізації на чотирьох кампусах центрів обробки даних.
На цьому тижні одна лінія електропередачі впала поблизу Вашингтона, округ Колумбія. Зазвичай мережа відновлюється за кілька секунд. На цей раз це зайняло більше 11 хвилин, і протягом частини цього часу вогні мерехтіли у значній частині східних США, що простягається аж до Чикаго.
Винуватцем був раптовий, одночасний рішення, прийняте десятками центрів обробки даних у Північній Вірджинії.
Що насправді сталося?
Коли лінія електропередачі вийшла з ладу, напруга в мережі PJM, яка керує електроенергією від Нью-Джерсі до Іллінойсу, коротко впала. Центри обробки даних розроблені для захисту свого обладнання від саме такого коливання. Тому протягом секунд вони перейшли на свої власні резервні генератори та відключилися від громадської мережі.
Проблема в тому, що вони всі це зробили одночасно.
Близько 3,1 гігавата навантаження, приблизно еквівалент потужності трьох великих ядерних реакторів, зникло з мережі приблизно за 30 секунд, відповідно до даних PJM. Мережа, раптом забезпечуючи набагато більше потужності, ніж хтось споживав, піднялася до 3,49 гігавата надлишку. Цей скачок відправив коливання напруги по всьому регіону, що спричинило мерехтіння лампочок у будинках і офісах далеко від Північної Вірджинії.
Спочатку про цю подію повідомила компанія TechCrunch. Подія спричинила скачки напруги, виміряні Ting Labs, стартапом, який відслідковує здоров'я мережі за допомогою датчиків, підключених до звичайних електричних розеток по всій країні.
Чому це продовжує траплятися?
Мережа має залишатися в майже ідеальній рівновазі постійно. Пропозиція та попит повинні відповідати один одному, інакше напруга коливається. Невеликі коливання — це нормально. Великі коливання активують автоматичні системи безпеки в мережі та в окремих будівлях, які потім відключаються для захисту себе.
Проблема в тому, що Північна Вірджинія утримує найвищу концентрацію центрів обробки даних у світі. Коли один зареєструє падіння напруги, це роблять усі, і всі реагують протягом секунд один після одного.
«Нам потрібно знайти спосіб для цих навантажень, які розташовані поруч одне з одним, послідовно або відключитися, або знову підключитися», — розповів TechCrunch Алі Зайн Банатвала, старший спеціаліст з моделей ринку в Незалежному оператору електроенергетичної системи.
Подія на цьому тижні була приблизно в два рази більшою за подібний епізод у 2024 році, коли 60 центрів обробки даних одночасно відібрали 1,5 гігавата з мережі.
| Подія | Рік | Відключене навантаження | Час відновлення |
|---|---|---|---|
| Каскад у Північній Вірджинії | 2024 | 1,5 ГВт | Не розголошено |
| Каскад у Північній Вірджинії | 2025 | 3,1 ГВт | 11+ хвилин |
| Доля центрів обробки даних у навантаженні PJM | 2024 | ~6% | , |
| Прогнозована доля навантаження PJM | 2040 | ~24% | , |
Яке рішення?
Одну відповідь пропонує стартап ON.Energy. Компанія захищає весь кампус центру обробки даних за допомогою великої батареї та інтелектуального обладнання для перетворення потужності. Мережа бачить одного стійкого, добре поведеного споживача замість кластера машин, які можуть зникнути в один миг.
Якщо напруга в мережі впадає, батареї миттєво заповнюють цей розрив, виміряний в мілісекундах, тому центру обробки даних ніколи не потрібно відключатися. Якщо є надлишкова потужність, батареї її поглинають. Компанія ON.Energy нині встановлює свої системи на чотирьох кампусах центрів обробки даних загальною потужністю 3 гігавата, за словами головного технічного директора компанії Ріккардо де Азеведу.
Регулятори також діють. Оператор мережі Техасу ERCOT планує вимагати від великих споживачів, таких як центри обробки даних, «пройти крізь» збої замість відключення.
«Це канарик у вугільній шахті», — сказав де Азеведу.
Чесна оцінка: якщо ви власник бізнесу поблизу центру обробки даних або просто хтось, хто помітив мерехтіння, основна проблема полягає в координації, а не в катастрофі. Але це буде все складніше ігнорувати, оскільки вимоги до навчання AI щороку потребують більше енергії. Запитання у вашої місцевої енергопостачальної компанії про те, що вона робить для управління великими промисловими навантаженнями, — це цілком розумне питання, і його варто задати прямо зараз.
