Решения для охлаждения ЦОД, которые действительно справляются со стойками мощностью 120 kW: руководство по миграции на охлаждение direct-to-chip

data center cooling solutions

Прямое охлаждение кристалла (direct-to-chip) — единственное решение для охлаждения ЦОД, способное обслуживать ИИ-стойки мощностью выше 50 kW, а экономика заставляет переходить на него при гораздо более низких плотностях, чем ожидает большинство операторов. По данным TrendForce, проникновение жидкостного охлаждения в ИИ-центрах обработки данных выросло с 14% в 2024 году до 33% в 2025 году, когда стойки NVIDIA GB200 NVL72 достигли 130-140 kW на стойку — плотности, которая вынуждает операторов пересмотреть свои решения для охлаждения ЦОД.

Решения для охлаждения ЦОД на основе direct-to-chip удерживают PUE около 1,10 при любой плотности, тогда как воздушные конструктивы растут с 1,5 до 1,7-2,0 при мощности выше 60 kW. Решение здесь финансовое, а не техническое.

Что такое охлаждение direct-to-chip и почему оно трансформирует решения для охлаждения ЦОД?

Охлаждение direct-to-chip (DTC) — самое быстрорастущее решение для охлаждения ЦОД для ИИ-парков: прецизионные холодные пластины монтируются непосредственно на GPU и CPU, а хладагент циркулирует по микроканалам, улавливая тепло в источнике его возникновения. Блок распределения хладагента (CDU) передает это тепло в контур воды объекта или на сухой охладитель. По оценке ResearchIntelo, на DTC пришлось 38,4% расходов на жидкостное охлаждение в 2025 году, а DC Market Insights оценивает долю direct-to-chip в 71,4% всего рынка жидкостного охлаждения.

Эта архитектура объясняет, почему DTC — предпочтительное решение для охлаждения ЦОД для парков GPU. По данным ResearchIntelo, температура переходов на 15-25 °C ниже, чем при воздушном охлаждении при эквивалентной мощности, что расширяет запас производительности и защищает инвестиции в ускорители. NVIDIA поставляет семейство GB200 NVL со встроенными интерфейсами холодных пластин, и практически каждый крупный OEM-производитель серверов уже предлагает платформы GPU с поддержкой DTC. Этот переход — массовый, а не экспериментальный.

решения для охлаждения центра обработки данных

Какую плотность стоек на самом деле обеспечивают воздушные решения для охлаждения ЦОД?

Воздушное охлаждение упирается в жесткий физический предел около 25-30 kW на стойку, поэтому современные решения для охлаждения ЦОД перешли на жидкость. American Compute документирует, что стойка на 10 kW с воздушным охлаждением при PUE 1,5 деградирует до 1,7-2,0, когда нагрузка достигает 60 kW.

Вода переносит примерно в 3500 раз больше тепла в единице объема, чем воздух, поэтому как только тепловая расчетная мощность (TDP) GPU превышает отметку 1000 W, вентиляторы и холодные коридоры исчерпывают свой запас, сколько бы воздуха ни подавалось.

Дорожная карта NVIDIA количественно описывает этот сдвиг: A100 на 300 W в 2020 году, H100 на 700 W в 2023 году, модули GB200 выше 1000 W в 2025 году. Стойка из восьми таких GPU требует 80-120+ kW, что неспособно отвести ни одно воздушное решение для охлаждения ЦОД. Потолок физический, а не вопрос количества вентиляторов.

В руководстве по архитектуре GYGO на 2026 год указано, что теплообменники задней дверцы упираются в потолок около 40-50 kW и не могут масштабироваться до плотностей Blackwell. Чтобы отвести 100 kW только потоком воздуха, потребовалось бы перемещать примерно 35 000 кубических футов воздуха в минуту, что делает структурированную прокладку кабелей и обслуживание практически невозможными.

Сколько стоит модернизация по сравнению с созданием решений для охлаждения ЦОД, готовых к жидкостному охлаждению?

По данным Rax 2026, решения для охлаждения ЦОД на основе direct-to-chip требуют капитальных затрат около $5 000-15 000 на стойку плюс расходы на CDU, трубопроводы и внешний отвод тепла. Окупаемость зависит от плотности. ToneCooling сообщает, что новые высокоплотные развертывания мощностью выше 40 kW на стойку окупают инвестиции менее чем за год, тогда как модернизация занимает 1,5-3 года. Dell заявляет, что прямое жидкостное охлаждение снижает энергозатраты ЦОД до 45%, с возможной окупаемостью в течение 1,3 года.

Axis Intelligence оценивает годовой выигрыш в долларах: перевод одной стойки GB200 NVL72 на 132 kW с воздушного PUE 1,56 на жидкостный PUE 1,10 экономит $53 191-79 786 в год при ценах на электроэнергию $0,10-0,15 за kWh. За десятилетний цикл инфраструктуры это накапливается до $531 907-797 861.

Supermicro добавляет, что ее платформа DLC-2 снижает энергопотребление ЦОД до 40% и уменьшает совокупную стоимость владения на 20%. Эти экономии превращают готовые к жидкостному охлаждению решения для охлаждения ЦОД в решение по capex, а не в риск по opex. Цена ожидания растет с каждым поколением GPU.

Какие компоненты важнее всего в надежном решении для охлаждения ЦОД на основе direct-to-chip?

Надежность любого решения для охлаждения ЦОД на основе direct-to-chip определяется четырьмя уровнями: холодные пластины на уровне чипа, коллекторы и быстросъемные соединения на уровне лотка, CDU на уровне стойки и объектные водяные системы для отвода тепла. Сегодня доминируют боковые CDU (sidecar), при этом внутрирядные блоки набирают позиции для плотных ИИ-стоек. Испытания Vertiv показали, что насосная двухфазная система direct-to-chip рассеяла 170 kW, удерживая температуру корпуса на отметке 56,4 °C. Именно выбор компонентов определяет, сохранится ли такая мощность при постоянной нагрузке.

Supermicro сообщает, что ее внутристоечный CDU отводит 250 kW на стойку и улавливает до 98% тепла стойки. Быстросъемным соединениям следует уделить особое внимание, поскольку именно герметичность их уплотнений определяет, дойдет ли утечка когда-либо до вычислительного оборудования. В каждом решении для охлаждения ЦОД на основе direct-to-chip операторы должны относиться к контуру хладагента как к инфраструктуре, закладывая резервирование, фильтрацию и контроль химического состава с самого начала. Одна голодающая холодная пластина молча троттлит весь лоток GPU.

решения для охлаждения центра обработки данных

Как проверить решение для охлаждения ЦОД до того, как взять на себя обязательства?

Проведите структурированный пилот до масштабирования, потому что отказы при вводе в эксплуатацию губят большинство бюджетов на решения для охлаждения ЦОД. NVIDIA GB200 NVL72 ожидает подачу воды при 25-45 °C со строгими требованиями к химическому составу, а стойка нуждается в более чем 700 литрах в минуту на коллекторе. Любое отклонение, обнаруженное при валидации, должно останавливать развертывание. Прежде чем подписывать согласование, проверьте каждый пункт этого чек-листа:

  • Рассчитывайте CDU на пиковую мощность стойки плюс 20% запаса; занижение — самая частая причина отказа на практике.
  • Установите датчики утечек на каждом соединении холодной пластины и на каждом стыке коллектора, а не только на CDU.
  • Сверьте целевые показатели качества воды и проводимости со спецификацией OEM.
  • Смоделируйте распределение потока с помощью CFD по всем холодным пластинам; один голодающий GPU сводит на нет всю стойку.
  • Обучите эксплуатационный персонал обращению с жидкостью, проверкам давления и процедурам быстрого разъединения до запуска.
  • Контролируйте расход хладагента по каждому модулю и еженедельно фиксируйте перепады давления в течение первого квартала эксплуатации.

Каковы реальные сроки переоборудования для решений для охлаждения ЦОД?

Полный переход с воздуха на жидкость проходит предсказуемую последовательность: тепловое обследование, перемещение стоек для доступа к трубопроводам, установка CDU, прокладка коллекторов и поэтапное переключение. American Compute предполагает 12-18 месяцев для объекта мощностью 2 MW, когда целевая плотность превышает 40 kW на стойку. Новые постройки с изначально жидкостным проектированием сжимают этот срок до 6-9 месяцев, потому что плита перекрытия, водоснабжение и отвод тепла планируются с первого дня.

Главная неизвестность — объектная система водоснабжения. Решения для охлаждения ЦОД на основе direct-to-chip нуждаются в чистых кондиционированных водяных контурах, а в старых зданиях часто не хватает давления, резервирования и фильтрации. Вендоры вроде Vertiv и Supermicro теперь предлагают готовые CDU-скиды (skid), которые монтируются с минимальными строительными работами. Заложите 20% времени проекта на валидацию качества воды и получение разрешений — именно здесь срываются графики.

Какие ошибки молча разрушают окупаемость решений для охлаждения ЦОД?

Первая ошибка — считать PUE единственным KPI при сравнении решений для охлаждения ЦОД. Goldman Sachs теперь рекомендует измерять Power Compute Effectiveness, потому что PUE 1,10 ничего не говорит о том, выдает ли объект 50 или 500 TFLOPS на квадратный фут. Вторая ошибка — игнорирование эффективности использования воды. Архитектура NVIDIA direct-to-chip при 45 °C может сократить расход воды на охлаждение объекта с примерно 2,6 млн галлонов на МВт в год почти до нуля в благоприятном климате.

Третья ошибка — отрицание модернизации. Теплообменники задней дверцы упираются в потолок около 40-50 kW и не могут масштабироваться до плотностей Blackwell, поэтому любая миграция на их основе застопорится на следующем поколении GPU. Четвертая — откладывание контроля химического состава жидкости до появления отказов; коррозия и биообрастание незаметно повышают перепад давления, пока не сработает CDU. Каждая ошибка усугубляет остальные, превращая разумное решение для охлаждения ЦОД в центр затрат. Потерянные кварталы операторы редко наверстывают.

Как операторы эксплуатируют объект с жидкостным охлаждением без простоев?

Решения для охлаждения ЦОД на основе direct-to-chip работают в промышленных гиперскейл-центрах обработки данных с 2018 года, при этом ToneCooling сообщает о показателях MTBF, превышающих 100 000 часов. Риск простоев сосредоточен в обращении с жидкостью, а не в аппаратном обеспечении. Операторам следует планировать ежеквартальные проверки давления, ежемесячные проверки проводимости и резервные пути насосов для каждой зоны CDU. Поток NVL72 — более 700 литров в минуту — превращает любое незапланированное перекрытие клапана в тепловое событие в течение нескольких минут.

Запасные быстросъемные соединения и холодные пластины должны находиться на площадке еще до включения первой стойки. Записи о вводе в эксплуатацию должны связывать каждую стойку с ее CDU, коллектором и набором датчиков, чтобы операторы могли быстро отследить аномалию давления. Эталонные проекты NVIDIA рассматривают контур хладагента как пятую критическую систему — наряду с питанием, сетью, хранением и вычислениями. Учения по сценариям (runbook) предотвращают панические перезапуски, которые вызывают большинство вторичных отказов.

решения для охлаждения центра обработки данных

Когда операторам следует обновлять стратегию своих решений для охлаждения ЦОД?

Задавайте точку перехода по плотности, а не по календарю. Ниже 30 kW на стойку оптимизированное воздушное охлаждение остается экономически эффективным. Между 30 и 80 kW direct-to-chip становится практичным выбором по умолчанию для решений для охлаждения ЦОД; выше 80 kW это единственный вариант. Регулирование подкрепляет эти сроки. ЕС требует PUE ниже 1,3 для новых центров обработки данных к 2030 году, а Сингапур требует ниже 1,2. Диапазоны плотности ужесточаются быстрее, чем предполагает большинство дорожных карт.

Будущее оборудование делает точку перехода необратимой. NVIDIA Vera Rubin NVL144 нацелена примерно на 600 kW на стойку, а Deloitte оценивает, что ИИ-стойки следующего поколения могут достичь 370 kW уже в 2026 году. Объекты, которые внедряют жидкостный подход уже сейчас, будут размещать эти системы; объекты, которые ждут, конкурируют за сужающиеся окна модернизации и растущие затраты на водяные контуры. Выбор правильных решений для охлаждения ЦОД должен стоять в повестке совета директоров уже в этом квартале — наравне с закупкой электроэнергии.

Выбор решений для охлаждения ЦОД сейчас определяет, будет ли объект размещать GPU поколения 2027 года или станет неликвидным активом. Direct-to-chip обеспечивает 80-120+ kW на стойку при PUE 1,05-1,15, окупается в течение 1-3 лет и поддерживает температуру переходов на 15-25 °C ниже, чем воздух. Это самое сильное обновление инфраструктуры, которое объект может сделать в этом году.

TrendForce ожидает, что проникновение превысит 33%, поскольку после 2027 года ускорятся архитектуры liquid-to-liquid. Операторы, которые задают пороговые значения, валидируют решения на пилотах и защищают химический состав воды, получают экономику плотности современных решений для охлаждения ЦОД. Остальным придется заплатить втройне, чтобы догнать.