Представьте себе одну устаревшую стойку в старом центре колокации с воздушным охлаждением мощностью 8 кВт и план по её преобразованию в стойку с прямым жидкостным охлаждением мощностью 40 кВт, в которой будут размещены четыре сервера NVIDIA H100. Стойка — это наименьшая единица инфраструктуры, но её модернизация затрагивает всё, что находится вокруг.
В этой статье прослеживается одна арифметическая цепочка: от тепла, выделяемого стойкой мощностью 40 кВт, до галлонов воды, ампер тока, килограммов нагрузки на пол и сетевых портов, которые она требует. Каждый ответ ведёт к следующему, и каждый из них определяет, может ли эта стойка считаться частью Центра обработки данных, готового к ИИ. Только после завершения всей цепочки такой ярлык, как «Центр обработки данных, готовый к ИИ», обретает измеримый смысл. Упражнение намеренно ограничено — одна стойка и четыре сервера, — но оно разрешает вопрос, касающийся всего здания.
Почему модернизация мощностью 40 кВт начинается с тепла, а не с электроэнергии?
Мощность и тепловыделение равны друг другу, поскольку каждый ватт, потребляемый сервером, должен отводиться в виде тепла. Стойка мощностью 40 кВт выделяет 136 500 БТУ/ч, поскольку каждый киловатт равен примерно 3 412 БТУ/ч, что составляет около 11,4 холодильных тонн. Напротив, стойка с воздушным охлаждением мощностью 8 кВт выделяет всего 27 300 БТУ/ч, или 2,3 тонны. Пятикратное увеличение определяет размеры всех последующих труб, контуров и плит.
Никакие последующие расчёты не имеют смысла, пока это число не будет определено, именно поэтому первым этапом аудита при модернизации ЦОД, готового к размещению ИИ, в рамках ограничений стойки является расчёт тепловой нагрузки, а не энергетический бюджет. Короче говоря, центр обработки данных, готовый к ИИ, — это прежде всего тепловой баланс, и каждое инженерное решение вытекает из него. Расчёты остаются верными независимо от того, размещены ли в стойке четыре H100 или восемь графических процессоров меньшего размера; меняется лишь тепловой баланс.
Какой расход охлаждающей жидкости требуется для стойки центра обработки данных, готовой к внедрению ИИ?
Жидкостное охлаждение необходимо, поскольку воздух не способен отвести 40 кВт тепла из небольшого пространства. Расход определяется простым уравнением: тепло, деленное на теплоемкость воды и величину повышения её температуры. При типичном перепаде температур между подачей и обраткой в 15 К для нагрузки в 40 кВт требуется расход около 0,64 литра в секунду, что составляет примерно 10 галлонов в минуту. Этот объем проходит через трубы подачи и обратки диаметром от 25 до 40 мм к блоку распределения хладагента. Цифры кажутся небольшими, но именно они определяют диаметр каждой подающей и обратной трубы в помещении, что и является сантехническим определением центра обработки данных, готового к внедрению искусственного интеллекта.
В мире с воздушным охлаждением мощностью 8 кВт водяной контур вообще отсутствует, поэтому большинство объектов упускают из виду вопрос о том, существуют ли такие трубы и где их можно проложить. Если отсутствует трасса для циркуляции воды с расходом 10 галлонов в минуту, установка стоек останавливается на этом этапе, независимо от того, какую мощность помещение заявляет на бумаге. Именно поэтому создание настоящего ЦОД, готового к внедрению ИИ, начинается с трубопровода, а не с сервера.
Какой объем электрической цепи требуется для стойки центра обработки данных, готовой к внедрению ИИ?
Теперь тепловая мощность преобразуется в потребляемый ток, который большинство устаревших панелей не в состоянии обеспечить. При трехфазном питании напряжением 415 В с коэффициентом мощности 0,9 стойка мощностью 40 кВт потребляет около 62 ампер. В трёхфазных системах напряжением 208 В, распространённых в старых зданиях, та же стойка потребляет около 123 ампер, что требует выделенного питающего кабеля и более мощных автоматических выключателей. Эти два значения — 62 и 123 ампера — являются «электрическим отпечатком» стойки центра обработки данных, готовой к внедрению ИИ, при любом из указанных напряжений.
В белой книге Ethernet Alliance за 2026 год прямо указано, что напряжение 415 В на стойке в настоящее время является обязательным условием для новых установок искусственного интеллекта и что большинство объектов, ограниченных напряжением 208 В, не могут размещать оборудование искусственного интеллекта. В традиционных стойках использовались два PDU на 60 или 63 ампера; стойка для ИИ, напротив, требует нескольких PDU на 100 ампер и более. Для входных трансформаторов и распределительного оборудования действуют те же расчёты, поэтому большинство зданий с напряжением 208 В именно на этом этапе незаметно перестают быть центрами обработки данных, готовыми к внедрению ИИ.
Сможет ли ваш пол выдержать вес стойки для центра обработки данных, готовой к работе с ИИ?
Стойка мощностью 40 кВт не просто нагревается — она ещё и тяжелая. Четыре сервера H100 сами по себе весят около 560 кг, а с учётом стойки, кабельной разводки и оборудования для охлаждения вес установки с жидкостным охлаждением достигает 800–900 кг. При стандартной площади основания 0,6 на 1,2 метра это составляет примерно 1 100 кг на квадратный метр. Традиционные конструкции с фальшполом часто рассчитаны на нагрузку от 450 до 600 кг на квадратный метр, при этом точечные нагрузки значительно ниже тех, которые создает стойка с высокой плотностью размещения графических процессоров. Именно конструкция, а не серверы, зачастую является ограничивающим фактором при модернизации ЦОД с целью обеспечения готовности к работе с ИИ.
Операторы, решившие провести модернизацию, часто обнаруживают, что укрепление конструкции обходится дороже, чем сама система охлаждения. Это первый этап в цепочке, который носит скорее финансовый, чем физический характер, и зачастую ставит крест на проекте модернизации, который успешно прошел проверки по водоснабжению и электроснабжению. Если пол не выдерживает эту проверку, стойка теряет право претендовать на статус «готового к ИИ» центра обработки данных.
Представляет ли одна стойка центра обработки данных, оснащённая технологией One AI, угрозу для соседних стоек?
Стойка с жидкостным охлаждением по-прежнему выделяет тепло, только через воду, а не через воздух в помещении, и это тепло должно куда-то уходить. Если блок распределения охлаждающей жидкости выделяет от 30 до 40 кВт тепла в тот же зал, где соседние стойки с воздушным охлаждением засасывают воздух, то соседние серверы сталкиваются с более теплым входящим воздухом и снижают производительность.
Согласно отчету AFCOM за 2025 год, только 17% центров обработки данных перешли на жидкостное охлаждение, а ещё 32% планируют сделать это в течение 12–24 месяцев, поэтому залы со смешанными системами охлаждения являются нормой, а не исключением. Этот тепловыброс реальен, поскольку при эффективности теплообмена «охлаждающая жидкость–воздух» на уровне 80% в зал по-прежнему утекает примерно 8 кВт тепла.
Инженерное решение заключается в зонировании: ряды с жидкостным охлаждением должны быть изолированы от рядов с воздушным охлаждением с помощью системы локализации горячих проходов и отдельного воздушного потока. Поэтому пилотный проект с одним стойковым блоком внутри зала с полностью воздушным охлаждением — это не просто электротехнический проект, поскольку он незаметно ухудшает рабочие характеристики каждой стойки, расположенной в том же проходе. Зонирование на уровне рядов — вот что на практике означает термин «центр обработки данных, готовый к ИИ», поскольку это обозначение относится ко всему зданию в целом.
Сколько портов 400G необходимо в одной стойке, чтобы она стала полноценным узлом искусственного интеллекта?
Каждый из четырёх узлов H100 в стойке имеет по восемь портов со скоростью 400 Гбит/с, поэтому стойка предоставляет 32 высокоскоростных порта. Они должны подключаться к коммутаторам 400G, установленным в верхней части стойки (top-of-rack), как правило, в виде двух резервированных пар, с восходящими каналами 400G или 800G. В руководстве Cisco по инфраструктуре искусственного интеллекта описывается именно такая схема: топологии «leaf-spine» с высоким радиксом и протокол RoCEv2 для коллективной связи. Без такого набора портов ни один программный стек не сможет рассматривать стойку как полноценный узел центра обработки данных, готовый к работе с искусственным интеллектом.
Система хранения должна располагаться рядом с вычислительными ресурсами, поскольку запись контрольных точек и загрузка данных занимают львиную долю времени обучения. Стойка с достаточной мощностью и охлаждением, но с перегруженной сетью, непригодна для обучения. Близость к сети является не менее важным свойством центра обработки данных, готового к работе с ИИ, чем охлаждение, поскольку именно задержка определяет, будут ли графические процессоры постоянно загружены. Профилактическая модернизация сетевой инфраструктуры обходится гораздо дешевле, чем выявление узкого места после начала обучения.
Сколько на самом деле стоит модернизация одного стойки и стоит ли она того?
Суммирование приведенных выше цифр объясняет, почему слово “модернизация” пугает большинство операторов. Аналитики Schneider Electric и Omdia отмечают, что переоборудование устаревшего объекта представляет собой чрезвычайно сложную задачу, поскольку его фидеры, системы охлаждения и конструкция были рассчитаны на нагрузки XX века, а не на кластеры графических процессоров. Они приходят к выводу, что для многих предприятий специализированные центры колокации являются более выгодным решением с экономической точки зрения, что делает статус «ЦКД, готового к ИИ» весьма престижным и сложным для получения.
Кроме того, стоимость модернизации возрастает с каждым невыполненным пороговым показателем, поскольку каждое отклонение от нормы обходится вдвойне: с одной стороны, на разработку инженерных решений для его устранения, а с другой — на компенсацию потери производственных мощностей.
Пилотный проект с использованием одной стойки по-прежнему осуществим, но его истинная ценность заключается в проведении измерений, а не в производстве. Модернизация позволяет выявить, какой из факторов — тепло, вода, ток, конструкция или сеть — является основным ограничивающим фактором в данном здании. Эти данные позволяют вашей команде принять решение: либо расширить масштаб одного оптимизированного стойки, либо переехать на специально построенный объект. Кроме того, это поднимает операционные вопросы: кто отвечает за водяной контур и контролирует его, и что произойдет, если труба с расходом 10 галлонов в минуту протечет над стойкой с $200 000 графических процессоров.
Подрядчики, обслуживающий персонал здания и сетевые специалисты должны согласовать свои действия ещё до запуска первого сервера, и именно от этого зависит, сможет ли здание вообще когда-либо разместить в себе центр обработки данных, готовый к внедрению ИИ.
В каком порядке следует проводить проверку стойки для подтверждения соответствия центра обработки данных требованиям «AI Ready»?
Теперь эта цепочка сводится к упорядоченному списку.
- Сначала установите мощность на уровне 40 кВт.
- Во-вторых, рассчитайте расход жидкости в контуре примерно на 10 галлонов в минуту и проверьте схему прокладки трубопровода.
- В-третьих, убедитесь, что имеется отдельная электрическая цепь с током примерно 62 ампер при напряжении 415 В, либо запланируйте работы по прокладке фидерных линий. В-четвертых, проверьте прочность пола с учетом веса стойки (800–900 кг) и нагрузки 1 100 кг на квадратный метр.
- В-пятых, изолируйте стойку от соседних устройств с воздушным охлаждением.
- В-шестых, предусмотреть в бюджете средства на 32 порта 400G и сопутствующее хранилище.
- В-седьмых, сравните стоимость пилотного проекта со стоимостью размещения оборудования в центре обработки данных.
Порядок имеет значение, поскольку один сбой делает бессмысленным всё, что следует за ним. Стойка, прошедшая все семь проверок, остаётся всего лишь одной стойкой, но она является первой полноценной единицей центра обработки данных, готового к работе с ИИ: её состояние поддаётся измерению, задокументировано и готово к тиражированию стойка за стойкой.
