Сборный контейнерный центр обработки данныхМодульный центр обработки данных с проходамиМодульный центр обработки данных RowШкаф модульного центра обработки данных

Жидкостное охлаждение серверов: как модернизировать свой центр обработки данных

поделиться с:

Вы уже много лет эксплуатируете свой центр обработки данных с воздушным охлаждением. Раньше это работало, когда ваши стойки потребляли по 5–8 киловатт каждая. Теперь же ваши кластеры графических процессоров требуют 40 кВт на стойку, и ваши блоки CRAC работают на пределе возможностей. Вы не одиноки: по данным Uptime Institute, 68% корпоративных центров обработки данных, построенных до 2015 года, не обладают достаточной охлаждающей мощностью для современных рабочих нагрузок искусственного интеллекта. При этом у 82% из этих объектов срок аренды истекает только через более чем десять лет. Вам нужно жидкостное охлаждение серверов Модернизация, которая действительно работает — и она вам нужна как можно скорее.

Почему воздушное охлаждение вас подводит

Законы физики неумолимы. Традиционное воздушное охлаждение имеет тепловое сопротивление в диапазоне от 0,5 до 2,0 градусов Цельсия на ватт — этого было достаточно, когда стойки потребляли от 8 до 25 кВт. Сегодня, согласно исследованию TrendForce от августа 2025 года, стоечный сервер NVIDIA GB200 NVL72 имеет расчётную тепловую мощность от 130 до 140 кВт. Воздух просто не способен отводить такое количество тепла.

Вероятно, ваш центр обработки данных работает с показателем PUE в диапазоне от 1,4 до 1,6, а это означает, что почти половина ваших расходов на электроэнергию уходит на охлаждение. Если мощность стоек с воздушным охлаждением превысит 25 кВт, вы столкнетесь с серьезными проблемами: турбулентность, появление «горячих точек» и отказы вентиляторов станут все более частыми. Вы, вероятно, уже замечали снижение производительности серверов в часы пиковой нагрузки. Это не аномалии — это система охлаждения, работающая на пределе своих физических возможностей. Именно здесь жидкостное охлаждение серверов меняет ситуацию.

Жидкостное охлаждение серверов: три варианта на выбор

При рассмотрении вариантов жидкостного охлаждения для серверов выделяются три подхода: холодные пластины с прямым контактом с чипом, однофазное погружное охлаждение и двухфазное погружное охлаждение. Только один из них имеет практический смысл для проектов по модернизации.

При системе охлаждения «Direct-to-chip» к процессорам и графическим процессорам крепятся металлические холодные пластины. Смесь воды и гликоля циркулирует по микроканалам, поглощает тепло и отводит его в распределительный блок охлаждающей жидкости, который выводит тепло в контур водоснабжения вашего объекта. Все остальные компоненты сервера остаются на воздушном охлаждении. По данным тестов ToneCooling, система «Direct-to-chip» обеспечивает тепловое сопротивление от 0,02 до 0,10 градуса Цельсия на ватт — это в 10–20 раз лучше, чем при воздушном охлаждении.

При однофазном погружении серверы погружаются в диэлектрическую жидкость. При двухфазном погружном охлаждении используется жидкость, кипящая при температуре от 50 до 60 градусов по Цельсию. Погружное охлаждение позволяет снизить показатель PUE до 1,02, но требует использования специальных резервуаров, специализированных шасси, протоколов обращения с жидкостью и перепроектирования объекта. Для большинства операторов, рассматривающих возможность внедрения жидкостного охлаждения серверов, погружное охлаждение является слишком радикальным решением для модернизации существующих систем.

«Direct-to-Chip» или «Immersion»: что подходит именно вам

Технология «Direct-to-chip» обеспечивает мощность от 60 до 120 кВт на стойку при показателе PUE от 1,05 до 1,15. Технология погружного охлаждения позволяет достичь мощности от 100 до 250 кВт при показателе PUE от 1,01 до 1,08. На бумаге погружное охлаждение выигрывает по эффективности. В реальных условиях технология «Direct-to-chip» предполагает добавление к существующим стойкам охлаждающих пластин, шлангов и блока CDU — модификации, с которыми ваша команда справится за несколько недель. Технология погружного охлаждения требует полной перепланировки помещения, заполнения резервуаров диэлектрической жидкостью с показателями $35–$80 на литр, а также переподготовки персонала по вопросам химической безопасности.

В отчете «Cooling Report» за февраль 2026 года отмечается, что на долю технологий «direct-to-chip» приходится 47% рынка жидкостного охлаждения, тогда как погружное охлаждение по-прежнему остается нишевым сегментом с показателем среднего годового темпа роста (CAGR) на уровне 25%. Компании Dell, HPE, Lenovo и Supermicro предлагают серверы с заводской интеграцией системы охлаждения «прямо на чип» в стандартных 19-дюймовых стойках. Серверы с погружным охлаждением в основном изготавливаются по индивидуальному заказу.

Что касается именно модернизации, то, по данным 451 Research, установка систем жидкостного охлаждения обеспечивает 70% производительности нового оборудования при затратах, составляющих 20% от стоимости нового оборудования. Исследование Introl, проведенное в декабре 2025 года, зафиксировало случай, когда фармацевтическая компания модернизировала объект 2008 года выпуска, установив 800 графических процессоров NVIDIA H100 за $4,2 миллиона — по сравнению с $35 миллионов при строительстве нового объекта. Четыре месяца вместо 18. Именно поэтому в дискуссиях о модернизации доминирует тема жидкостного охлаждения серверов с прямым контактом с чипом.

Готово ли ваше предприятие к внедрению системы жидкостного охлаждения?

Прежде чем заказывать системы «cold plates», необходимо учесть три фактора: состояние электросети, пропускную способность водяного контура и нагрузку на пол. Установка системы жидкостного охлаждения для серверов, как правило, приводит к увеличению веса на 15–25 кг на каждый стойку. Большинство фальшполов, рассчитанных на нагрузку от 800 до 1 200 кг на стойку, выдерживают такую нагрузку без дополнительного усиления, однако рекомендуется проконсультироваться с инженером-конструктором.

Ваш водяной контур является основной переменной. CDU отводит тепло в систему конденсационной воды. Если температура подаваемой воды составляет от 10 до 15 градусов по Цельсию, то все готово. Если она выше — что часто встречается в старых зданиях — вам может понадобиться дополнительный чиллер или CDU с циклом «жидкость-воздух». TrendForce подтверждает, что системы с циклом «жидкость-воздух» являются доминирующей переходной архитектурой именно потому, что они работают с существующей инфраструктурой.

Жидкостное охлаждение серверов

Электропитание — это третий важный фактор. Кластеры графических процессоров, потребляющие от 40 до 60 кВт на стойку, требуют соответствующей мощности системы распределения электроэнергии. Многие объекты, построенные до 2015 года, рассчитывались на нагрузку от 5 до 10 кВт на стойку. Планируйте модернизацию системы электропитания одновременно с внедрением системы жидкостного охлаждения серверов. Реализация одного проекта без другого приведет к появлению нового узкого места.

Ваш план модернизации

Первый этап: пилотный проект. Выберите от двух до четырёх стоек, установите холодные пластины на серверах с самыми нагревающимися графическими процессорами, подключите их к CDU и обеспечьте непрерывную работу в течение 30 дней. Контролируйте температуру охлаждающей жидкости на входе и выходе, перепад давления и температурные показатели компонентов. Перед расширением масштаба необходимо убедиться в стабильной производительности и отсутствии утечек.

Если в ходе пилотного проекта вы столкнетесь с нестабильными значениями расхода, инструмент мониторинга будет собирать данные о температуре по всему контуру в режиме реального времени, что поможет вам точно определить места, где происходят падения давления или накопление тепла.

Второй этап: расширение до полноценного модуля. Установка коллекторов на уровне стойки с быстроразъемными соединениями. Согласно данным TrendForce, компаниями, сертифицированными NVIDIA в качестве поставщиков GB200, являются CPC, Parker Hannifin, Danfoss и Staubli. Использование быстроразъемных соединений, рассчитанных на 10 000 циклов соединения и разъединения, является обязательным условием — они позволяют заменять серверы без слива жидкости из контура.

Третий этап: полное внедрение. К этому моменту ваша команда должна уверенно справляться с доливкой хладагента, заменой фильтров CDU и обнаружением утечек. Согласно отчету «Рынок серверов с жидкостным охлаждением в Китае», на долю решений с холодными пластинами приходится более 80% рынка жидкостного охлаждения по объему выручки, поскольку они интегрируются в существующие рабочие процессы, не требуя освоения новых навыков.

Сколько стоит жидкостное охлаждение для серверов

Согласно данным поставщиков, капитальные затраты на модернизацию с переходом на технологию «direct-to-chip» составляют от $5 000 до $15 000 на стойку. Развертывание системы из 100 стоек обходится в сумму от $500 000 до $1,5 млн на оборудование для охлаждения. При использовании технологии погружного охлаждения затраты только на резервуары и рабочую жидкость составляют от $20 000 до $50 000 на одну стойку.

Экономия на эксплуатационных расходах меняет ситуацию. Переход с воздушного охлаждения с показателем PUE 1,5 на жидкостное охлаждение серверов с показателем PUE 1,2 позволяет сократить энергопотребление на охлаждение на 30–40%. Согласно китайскому руководству по модернизации, опубликованному в мае 2026 года, центр обработки данных мощностью 10 МВт, в котором система воздушного охлаждения серверов была заменена на жидкостное охлаждение с использованием холодных пластин, экономит примерно 24 млн юаней в год на электроэнергии. Срок окупаемости составляет значительно менее 24 месяцев даже при максимальных капитальных затратах.

Еще одно преимущество: согласно исследованиям в области тепловой надежности, более низкие температуры в местах соединений в два-три раза продлевают срок службы ЦП и ГП. Если ваши кластеры ГП стоят миллионы, то такое повышение надежности станет существенным аргументом в пользу внедрения жидкостного охлаждения серверов.

Ошибки, которые опустошают ваш бюджет

Отказ от расчета водного контура — самая дорогостоящая ошибка. Если контур вашего здания не сможет принять тепловую нагрузку от CDU, вам придется впоследствии устанавливать сухой охладитель, что приведет к задержке сроков реализации проекта и увеличению бюджета на сумму от 30 до 50%. Перед покупкой оборудования просчитайте производительность контура совместно с инженером-механиком.

Рассматривать модернизацию исключительно как ИТ-проект — это ещё одна ловушка. Жидкостное охлаждение серверов затрагивает вопросы эксплуатации зданий, электрооборудования, сантехники и эксплуатации. Если ваша ИТ-команда будет заниматься этим в одиночку, то во время ввода в эксплуатацию вы обнаружите, что температура воды на 5 градусов выше нормы или что сливные отверстия в полу расположены неправильно. Привлекайте специалистов по эксплуатации зданий и техническому обслуживанию с самого первого дня.

Третью строчку в списке самых распространенных ошибок занимает пренебрежение качеством охлаждающей жидкости. Смеси гликоля и воды со временем разлагаются, превращаясь в коррозионные кислоты, которые разъедают микроканалы охлаждающей пластины. Необходимо составить график фильтрации и проводить ежеквартальные анализы химического состава охлаждающей жидкости. Замена корродированной охлаждающей пластины обойдется гораздо дороже, чем установка системы фильтрации.

Жидкостное охлаждение серверов: ваша новая реальность

После завершения модернизации серверов с установкой системы жидкостного охлаждения скорость вращения вентиляторов серверов снижается или они полностью останавливаются. Уровень шума в центре обработки данных снижается на 20–30 дБ. Температура компонентов стабилизируется в диапазоне 2–3 градуса независимо от нагрузки. Показатель PUE опускается ниже 1,2, а ежемесячные расходы на электроэнергию сокращаются на треть.

Вы получаете резерв по плотности размещения: стойка, рассчитанная на 15 кВт при воздушном охлаждении, теперь способна выдерживать нагрузку от 50 до 80 кВт. Вы консолидируете рабочие нагрузки, освобождаете площадь в помещении и откладываете строительство новых объектов. По прогнозам TrendForce, уровень внедрения жидкостного охлаждения серверов в центрах обработки данных искусственного интеллекта резко вырастет со 14% в 2024 году до 33% в 2025 году и будет продолжать расти. Модернизация сейчас позволит вам опередить конкурентов, вместо того чтобы спешно наверстывать упущенное, когда они уже перейдут на новую технологию.

Возможность ещё есть, но время поджимает. Согласно планам развития NVIDIA, к 2026 году появятся серверные стойки мощностью 600 кВт. Выжить в ближайшие пять лет смогут только те центры обработки данных, которые внедрят жидкостное охлаждение серверов в 2025 или 2026 году. Ваш центр должен стать одним из них.

Об авторе

Гэвин

Гэвин

Гэвин - менеджер по операциям в компании, специализирующейся на вспомогательном оборудовании для центров обработки данных. Он разбирается в источниках бесперебойного питания для центров обработки данных, прецизионных кондиционерах и решениях для центров обработки данных. Он может помочь вам лучше понять эти продукты и выбрать различные решения.

Похожие посты