Microsoft отказывается от мощностей Oracle. Что происходит на рынке ЦОДов
6 ноября стало известно, что Microsoft не продлит часть соглашения с Oracle об аренде ИИ-мощностей. Ускорители Nvidia, за которыми еще недавно охотились крупнейшие компании, уже не устраивают заказчика. Впрочем, Oracle утверждает, что четырехлетние GPU удается сдавать другим клиентам даже на 20% дороже.
Со строительством новых ЦОДов тоже проблемы. Не хватает электричества, подключение к сетям затягивается, а требования к мощности и охлаждению меняются еще до завершения строительства.
К техническим проблемам добавилось недовольство местных жителей. 6–7 ноября общественные организации в 15 европейских странах потребовали ограничить строительство ИИ-дата-центров. Людей беспокоит, что ЦОДы потребляют все больше электричества и воды, создают дополнительную нагрузку на местную инфраструктуру, а ощутимой пользы для жителей практически не приносят.
По оценке Международного энергетического агентства, потребление электроэнергии дата-центрами вырастет с 415 ТВт·ч в 2024 году до 945 ТВт·ч к 2030-му. При этом новые ИИ-ускорители требуют все более мощного питания и охлаждения, а существующие ЦОДы далеко не всегда к этому готовы.
Миллиарды на строительство и оборудование
В 2025 году Microsoft планировала вложить около $80 млрд в развитие ИИ-инфраструктуры, Alphabet около $75 млрд, Meta (признана экстремистской организацией и запрещена в России) от $60 до $65 млрд, Amazon около $100 млрд. В общей сложности четыре компании собирались потратить более $300 млрд за год. Причем не только на строительство ЦОДов, но и на серверы, сетевое оборудование и другую инфраструктуру.
Однако даже такие деньги не решают проблему с электричеством. В американском штате Вирджиния, где находится один из крупнейших в мире кластеров ЦОДов, пришлось масштабно расширять электросети. В районе Дублина ограничения на подключение новых дата-центров действуют с 2021 года. В 2024 году ЦОДы потребляли уже 22% всей электроэнергии Ирландии против 5% в 2015 году, по данным национального статистического ведомства.
Растут и требования к оборудованию. Восемь ускорителей Nvidia H100 имеют суммарно 640 Гбайт памяти HBM, H200 уже 1128 Гбайт, а Blackwell B200 все 1440 Гбайт. Но новые GPU требуют не только больше электричества, но и более мощного охлаждения.
Обычные ЦОДы часто проектировались под нагрузку от 5 до 15 кВт на стойку. Современным ИИ-системам могут потребоваться более 100 кВт. Например, стойка Nvidia GB200 NVL72 объединяет 72 ускорителя и использует жидкостное охлаждение. Установить такое оборудование в существующем дата-центре без серьезной модернизации зачастую невозможно.
Российские ЦОДы столкнулись с новой угрозой
В России ситуация не проще. По данным NF GROUP, ввод 67% коммерческих мощностей ЦОДов, запланированных на 2026 год в Московском регионе, перенесен. Неудовлетворенный спрос оценивается в 200–300 МВт. При этом в стране реализуются 42 проекта строительства дата-центров общей стоимостью более 280 млрд рублей.
Но теперь операторам приходится думать не только о том, где взять электричество и деньги на строительство, но и о защите уже существующих ЦОДов. В октябре беспилотники атаковали площадки «Яндекса», Сбера и VK. Наиболее серьезные последствия пришлись на инфраструктуру «Яндекса».
С 8 по 11 октября остановились два ЦОДа «Яндекса» в Сасове и Владимирской области, еще один дата-центр в Калужской области был поврежден. Как сообщал IT-World, две зоны доступности Yandex Cloud перестали работать. Компании пришлось ограничить предоставление новых вычислительных мощностей и посоветовать клиентам искать других провайдеров. Помощь предложили VK Cloud, Selectel и К2 Cloud. Но уже 18 октября беспилотники атаковали ЦОД VK в Ленинградской области. Компания заявила, что ее сервисы работают как обычно, но о состоянии самого дата-центра ничего не сообщила.
14 октября беспилотники атаковали строящийся ЦОД Сбера в Балакове. В нем планируется разместить до 120 тыс. серверов на 3000 стойках. Для работы комплекса потребуется до 82 МВт электроэнергии, а стоимость строительства оценивалась в 122,2 млрд рублей. Сбер сообщил, что банковские системы продолжают работать без сбоев, но насколько сильно пострадал объект, не уточнил.
После октябрьских атак Минцифры подготовило рекомендации по защите дата-центров. Их предложено разделить на три категории в зависимости от важности. Рассматриваются и другие способы защиты. Например, как писал IT-World, «Ростелеком» обсуждает с «Норникелем» строительство подземных ЦОДов.
Но защита ЦОДов потребует дополнительных расходов. По оценкам экспертов, строительство обычного дата-центра обходится в 1,2–1,3 млрд рублей за 1 МВт IT-нагрузки. Подземный ЦОД может стоить на 30–40% дороже, а усиление защиты наземного объекта увеличит его стоимость на 5–10%.
Есть и другой вариант. Вместо одного крупного ЦОДа можно использовать несколько небольших площадок, расположенных в разных местах. Замглавы «Ростелекома» Валерий Ермаков предложил создавать резервные «ЦОДы судного дня», а технический директор STSS Иван Гоголев в беседе с IT-World выступил за распределение инфраструктуры между небольшими дата-центрами. Правда, такой подход тоже потребует дополнительных серверов, независимых каналов связи и резервных мощностей.
Впрочем, даже если сами ЦОДы не пострадали, данные все равно могут быть потеряны. В начале ноября хакеры взломали систему управления инфраструктурой Beget и уничтожили данные VPS, S3 и Kubernetes. Как сообщал IT-World, восстановить файлы из резервных копий смогут лишь около половины пользователей VPS. При этом здания дата-центров остались целы, а резервные копии хранились на другой площадке.
А если заказчики начнут отказываться от GPU?
Oracle, похоже, повезло. Microsoft отказывается от части арендованных мощностей, но на них уже нашлись другие клиенты. Причем, по утверждению Oracle, готовые платить на 20% больше. Вот только инвесторов эти заявления не успокаивают. Акции компании падают, а вместе с ними растут сомнения в окупаемости многомиллиардных вложений в ИИ-инфраструктуру.
А если следующему оператору так не повезет? Крупный заказчик отказывается от аренды, а на балансе остаются тысячи GPU стоимостью в миллиарды. Еще вчера за такими ускорителями стояла очередь, а завтра может оказаться, что сдавать их некому. И пока оператор ищет новых клиентов, Nvidia выпускает следующее поколение чипов. Время работает против владельца оборудования.
В России ситуация пока другая. Здесь не хватает не только площадок для размещения GPU, но и самих ускорителей. Строительство ЦОДов задерживается, оборудование дорожает, а теперь операторам приходится тратиться еще и на защиту от атак. И пока на мировом рынке думают, куда девать устаревающие GPU, в России приходится решать, где разместить новые, как их защитить и где взять средства на это.
