Это авторитетное руководство по охлаждению стойков данных центров является вашим универсальным ресурсом для освоения теплового управления. Это руководство поможет вам обеспечить устойчивость, эффективность и масштабируемость вашей ИТ-инфраструктуры.
На основе обширной литературы, от основных принципов до подробного сравнения технологий воздушного охлаждения, жидкостного охлаждения, модульного охлаждения и погружного охлаждения, мы объясняем все, что вам нужно знать, чтобы помочь вам выбрать решение для охлаждения стойки центра обработки данных.
Мы фокусируемся на решении ключевых проблем - устранении горячих точек, снижении PUE на 0,1-0,5, сокращении энергопотребления на 20-40% и предотвращении $100000 в час простоя - и изучаем ключевые факторы оптимизации, такие как расположение стоек, конфигурация оборудования, обслуживание и автоматизация на основе искусственного интеллекта.
Если вы модернизируете существующие стойки для повышения плотности, строите новые периферийные центры обработки данных или стремитесь к нулевому уровню выбросов, в этом руководстве вы найдете практические рекомендации, примеры из реальной практики и тенденции будущего, которые помогут вам превратить охлаждение стоек из недостатка в конкурентное преимущество.
Для руководителей центров обработки данных, ИТ-инженеров и операторов объектов - это самое полное руководство по преодолению тепловых проблем и максимизации производительности, срока службы и устойчивости оборудования, установленного в стойке.

1. Основные принципы охлаждения стоек центров обработки данных
Прежде чем погружаться в технологии, важно освоить основополагающие принципы, определяющие эффективность охлаждения стоек. Эти принципы применимы к центрам обработки данных любого размера и плотности размещения стоек, составляя основу любой успешной стратегии охлаждения.
1.1 Тепловая нагрузка
Тепловая нагрузка - это общее количество тепла, выделяемое ИТ-оборудованием стойки и факторами окружающей среды. Она является отправной точкой для выбора и определения размеров решений по охлаждению.
ИТ-оборудование Heat: Составляет 80-90% от общей тепловой нагрузки стойки. Рассчитайте ее путем суммирования номинальной мощности всех устройств (например, 10 серверов × 750 Вт = 7,5 кВт; 4 графических процессора × 300 Вт = 1,2 кВт → общая ИТ-нагрузка = 8,7 кВт).
Экологические дополнения: Добавьте 10-20% к ИТ-нагрузке для учета тепла от солнечного света, плохой изоляции или соседнего оборудования, выделяющего тепло.
Буфер роста: В комплект входит буфер 10-15%, позволяющий в будущем обновлять оборудование или расширять стойку.
Ключевой момент: Недооценка охлаждения с учетом тепловой нагрузки - это первая ошибка, которую допускают операторы центров обработки данных. Исследование Data Center Dynamics, проведенное в 2024 году, показало, что 38% объектов испытывают горячие точки из-за неточных расчетов тепловой нагрузки.
1.2 Критические показатели
Чтобы измерить и оптимизировать охлаждение стоек, отслеживайте эти стандартные для отрасли показатели:
PUE: Общая мощность объекта ÷ мощность ИТ-нагрузки. Идеальный показатель PUE составляет 1,0, но эффективность охлаждения на уровне стойки напрямую влияет на этот показатель. Например, переход с воздушного охлаждения на жидкостное охлаждение непосредственно на кристалле может снизить PUE для стойки на 0,2-0,3. .
Стойка Температура на входе/выходе: Температура на входе должна оставаться в пределах 18-24°C; температура на выходе обычно колеблется в пределах 35-45°C. Дельта >20°C указывает на плохой воздушный поток или недостаточное охлаждение.
Скорость воздушного потока: Измеряется в CFM. Для поддержания безопасной температуры в стеллажах высокой плотности требуется 1500-2500 CFM, а в стеллажах низкой плотности - 500-1000 CFM.
Влажность: 40-60% RH предотвращает коррозию и статическое электричество, которые повреждают оборудование, установленное в стойке.
1.3 Динамика воздушного потока
Горячие точки - локализованные очаги тепла в стойках - являются тихими убийцами ИТ-оборудования. Они возникают, когда холодный приточный воздух смешивается с горячим вытяжным воздухом, минуя воздухозаборники сервера. Решение заключается в оптимизации динамики воздушных потоков:
Конфигурация "холодный проход/горячий проход": Расположите стойки в ряд так, чтобы впускные отверстия серверов были обращены к “холодному проходу”, а выпускные отверстия - к “горячему проходу”. Это уменьшает смешивание воздуха на 70%.
Контейнерные системы: Закройте холодные или горячие проходы физическими барьерами (панелями, дверями или потолками), чтобы дополнительно изолировать воздушные потоки. Полностью изолированные проходы снижают PUE на 0,1-0,3 и устраняют горячие зоны в 95% случаев.
Заглушки и кабельная разводка: Пустые щели в стойке и беспорядочно уложенные кабели блокируют воздушный поток. Установите заглушки, чтобы закрыть щели, и используйте вертикальные кабельные органайзеры, чтобы освободить проходы - это улучшит воздушный поток на 15-20%.
2. Технологии охлаждения стоек центров обработки данных
Ни одна технология охлаждения не подходит для всех плотностей стоек и случаев использования. Ниже приводится подробный обзор наиболее эффективных решений, сгруппированных по плотности размещения в стойке, с указанием плюсов, минусов и реальных областей применения.
2.1 Прецизионное воздушное охлаждение
Точное воздушное охлаждение является наиболее распространенным решением для охлаждения стойков в корпоративных центрах обработки данных и объектах малого и среднего размера. Оно использует специализированные системы HVAC для подачи охлажденного воздуха напрямую в входы воздушного потока стойков.
Типы прецизионного воздушного охлаждения
- Блоки прямого расширения: Автономные системы, использующие хладагент для охлаждения воздуха. Они устанавливаются над стойками или рядом с ними и идеально подходят для небольших центров обработки данных с низкой и средней плотностью.
- Характеристики: Мощность: 10-50 кВт/единица; точность температуры: ±1°C; диапазон PUE: 1.3-1.6.
- Воздухораспределители охлажденной воды: Централизованные системы, в которых холодная вода циркулирует через воздухораспределители. Используются в гипермасштабных объектах со средней плотностью.
- Характеристики: Мощность: 50-200 кВт/единица; точность температуры: ±0,5°C; диапазон PUE: 1.2-1.5.
Плюсы и минусы
- Плюсы: Низкая первоначальная стоимость, простая установка, минимальное обслуживание, совместимость с большинством конфигураций стоек.
- Конс: Неэффективны для стоек высокой плотности, склонны к образованию горячих точек в плотных системах, более высокое энергопотребление по сравнению с жидкостным охлаждением.
Применение в реальном мире
Финансовая фирма среднего размера в Чикаго установила прецизионное воздушное охлаждение DX для 20 стоек. Благодаря наличию холодных проходов они обеспечили коэффициент полезного действия 1,4 и отсутствие простоев, связанных с охлаждением, в течение 3 лет, что позволило сэкономить $12 000 в год на энергозатратах по сравнению со стандартным ОВКВ.
2.2 Жидкостное охлаждение
Когда плотность тепловыделения стойков превышает 15 кВт, жидкостное охлаждение становится единственным жизнеспособным решением. Оно отводит тепло в 4–10 раз эффективнее, чем воздушное охлаждение, обеспечивая точный контроль температуры даже для стойков мощностью 50 кВт и выше.
Типы жидкостного охлаждения для стоек
- Охлаждение непосредственно на кристалле: Холодные пластины крепятся к процессорам, графическим процессорам и другим высоконагревающимся компонентам. Диэлектрическая жидкость или водно-гликолевая смесь циркулирует по пластинам, поглощая тепло и передавая его в теплообменник.
- Характеристики: Мощность: 20-50 кВт на стойку; температура теплоносителя: 20-30°C; диапазон PUE: 1.1-1.3.
- Лучшее для: Стойки AI/HPC, помещения для размещения объектов со стойками смешанной плотности.
- Погружное охлаждение в стойке: Серверы погружаются в непроводящую диэлектрическую жидкость в резервуаре размером со стойку. Жидкость поглощает тепло, а затем циркулирует во встроенном теплообменнике.
- Характеристики: Мощность: 50-100 кВт на стойку; температура жидкости: 30-45°C; диапазон PUE: 1.08-1.2.
- Лучшее для: Стойки сверхвысокой плотности, майнинг криптовалют, специализированные кластеры HPC.
Плюсы и минусы
- Плюсы: Устранение горячих точек, снижение энергопотребления вентиляторов на 70%, значительное снижение PUE, масштабируемость для будущего увеличения плотности.
- Конс: Более высокая первоначальная стоимость, требует управления жидкостью, специализированного обслуживания.
Применение в реальном мире
Исследовательская лаборатория искусственного интеллекта NVIDIA в Калифорнии установила жидкостное охлаждение прямо на чип для 200 стоек с GPU. Результат: PUE снизился с 1,5 до 1,2, потребление энергии вентиляторами сократилось на 75%, а количество отказов оборудования уменьшилось на 40%.
2.3 Модульное охлаждение
Модульные системы охлаждения состоят из автономных, совместимых со стойкой блоков, которые работают параллельно. Управляемые искусственным интеллектом системы управления регулируют количество активных блоков в зависимости от тепловой нагрузки на стойку в режиме реального времени, что делает их идеальными для центров обработки данных с переменной рабочей нагрузкой или растущим количеством стоек.
Основные характеристики
- Вместимость: 10-40 кВт на модуль; масштабируется от 2-20 модулей на стойку.
- Резервирование: Конструкция N+1 гарантирует отсутствие простоев в случае выхода из строя одного из блоков.
- Средства управления: Интегрируется с инструментами DCIM для согласования мощности охлаждения с нагрузкой, снижая потери энергии на 30-40%.
Плюсы и минусы
- Плюсы: Модель с оплатой по мере роста, встроенное резервирование, простая установка без простоя объекта, совместимость с воздушным и жидкостным охлаждением.
- Конс: Более высокая первоначальная стоимость по сравнению с немодульными системами воздушного охлаждения, требует интеллектуальной интеграции системы управления.
Применение в реальном мире
В центре обработки данных AWS в регионе Огайо используется модульное жидкостное охлаждение для 500+ стоек с переменной плотностью. Система масштабируется от 2 до 6 модулей на стойку, сокращая затраты на электроэнергию на 35% и снижая PUE до 1,25.
2.4 Свободное охлаждение
Система естественного охлаждения использует холодный наружный воздух или воду для сокращения времени работы механического охлаждения, что позволяет снизить энергопотребление на 50-70% в умеренном или холодном климате. В качестве дополнительной системы оно часто используется в паре с прецизионным воздушным или жидкостным охлаждением.
Виды свободного охлаждения
- Экономия на стороне воздуха: Всасывает отфильтрованный наружный воздух в центр обработки данных, минуя механическое охлаждение. Регуляторы смешанного воздуха поддерживают безопасную температуру на входе в стойки.
- Лучшее для: Умеренный климат, где температура наружного воздуха держится на уровне ≤20°C в течение 6+ месяцев/год.
- Экономия на воде: Использует холодную наружную воду для охлаждения контура охлажденной воды, сокращая время работы чиллера.
- Лучшее для: Гипермасштабные центры обработки данных с доступом к источникам холодной воды.
Плюсы и минусы
- Плюсы: Значительно снижает затраты на электроэнергию и выбросы углекислого газа, дополняет существующие системы охлаждения, не требует особого обслуживания.
- Конс: Зависит от климата, требует фильтрации воздуха/воды.
Применение в реальном мире
В центре обработки данных Google в Финляндии 11 месяцев в году используется воздушное естественное охлаждение. Система снижает потребление энергии на охлаждение стоек на 65%, способствуя тому, что показатель PUE в целом по объекту составляет 1,1 - один из самых низких в отрасли.
2.5 Пассивное охлаждение
Пограничные центры обработки данных часто имеют низкую плотность стоек и ограниченное энергопотребление, что делает пассивное охлаждение идеальным выбором. Пассивные системы используют радиаторы, естественную конвекцию и изолированные корпуса для отвода тепла без использования вентиляторов или насосов.
Основные характеристики
- Вместимость: ≤5 кВт на стойку; диапазон температур: 18-30°C.
- Использование энергии: 0 кВтч; диапазон PUE: 1.0-1.1.
- Обслуживание: Минимум.
Плюсы и минусы
- Плюсы: Нулевая энергия охлаждения, низкая стоимость обслуживания, компактный дизайн.
- Конс: Ограничена стеллажами низкой плотности, неэффективна в жарком климате.
Применение в реальном мире
Глобальная сеть продуктовых магазинов развернула систему пассивного охлаждения для 150 краевых стоек в сельских магазинах США. Решение позволило сократить расходы на охлаждение граничных стоек на 100% и обеспечить время безотказной работы 99,99% в течение 2 лет. .
3. Факторы, влияющие на эффективность охлаждения стоек центров обработки данных
3.1 Компоновка и размещение стоек
Избегайте горячих зон: Не размещайте стойки вблизи источников тепла. Исследование Uptime Institute, проведенное в 2023 году, показало, что стойки, расположенные рядом с окнами, имеют в 2 раза больше горячих точек.
Требования к уровню допуска: Обеспечьте 2-3 фута свободного пространства вокруг охлаждающих устройств и воздухозаборников/вытяжных отверстий стойки. Заблокированные вентиляционные отверстия уменьшают поток воздуха на 30-40%.
3.2 Конфигурация оборудования и плотность стоек
Расположение ИТ-оборудования в стойке и общая плотность размещения компонентов напрямую влияют на эффективность охлаждения. Плохо сконфигурированные стойки создают препятствия для воздушных потоков и концентрируют тепло, даже при использовании современных систем охлаждения.
Ориентация сервера и расстояние по вертикали: Серверы должны быть установлены с одинаковым расстоянием по вертикали, чтобы обеспечить равномерную циркуляцию холодного воздуха. Избегайте “штабелирования” высоконагревательных устройств в одной вертикальной секции - это создает локальные тепловые очаги. В руководстве ASHRAE 2023 Thermal Guidelines подчеркивается, что вертикальное расстояние не менее 3U между мощными серверами уменьшает образование горячих точек на 60%.
Заглушки и заполняющие панели: Пустые слоты в стойках являются основным источником утечки воздушного потока - холодный воздух выходит через щели, а не поступает в воздухозаборники серверов. Исследование Uptime Institute показало, что 42% центров обработки данных обходятся без заглушек, что приводит к снижению эффективности охлаждения на 15-20%. Инвестиции в заглушки $20-$50 для всех пустых слотов - одна из самых высокорентабельных оптимизаций охлаждения.
Аппаратные средства защиты высокой плотности: Сверхплотные компоненты генерируют концентрированное тепло, которое может перегрузить стандартное охлаждение. Для таких систем следует использовать стойки с “термозависимым” дизайном: размещать высоконагреваемые устройства в нижней или средней части стойки и использовать их в паре с прямым охлаждением чипов. Исследование, проведенное Шмидтом и др., показало, что стойка с учетом теплового режима снижает пиковую температуру в стойке на 4-6 °C в установках мощностью 50 кВт на стойку.
Размещение блока распределения питания: Блоки PDU создают 2-5% общей тепловой нагрузки в стойке. Устанавливайте PDU сбоку стойки, чтобы не перекрывать воздушный поток, и выбирайте высокоэффективные PDU, чтобы минимизировать тепловыделение.
Пример из практики: Поставщик услуг по размещению в Далласе изменил конфигурацию 100 стоек со смешанной плотностью размещения, используя тепловые расстояния, заглушки и PDU с боковым креплением. Без модернизации систем охлаждения они сократили количество горячих точек на 75% и повысили общую эффективность охлаждения стоек на 22%, что позволило им добавить еще 10% серверов на стойку без превышения пределов ASHRAE.
3.3 Техническое обслуживание и уход за системой охлаждения
Даже самые современные системы охлаждения со временем теряют эффективность без надлежащего обслуживания. По данным Uptime Institute, 30% отказов систем охлаждения центров обработки данных вызваны пренебрежением техническим обслуживанием, а плохо обслуживаемые системы работают на 60-70% от своей первоначальной эффективности.
Замена фильтра: Воздушные фильтры прецизионных холодильных агрегатов и систем защиты задерживают пыль, пыльцу и мусор. Засоренные фильтры снижают воздушный поток на 30-40% и заставляют системы охлаждения работать интенсивнее, увеличивая потребление энергии на 25-30%. Заменяйте фильтры каждые 1-3 месяца и используйте высокоэффективные фильтры, чтобы защитить как оборудование, так и охлаждающие змеевики.
Очистка катушки: На змеевиках испарителя и конденсатора в воздухоохладителях скапливается пыль и грязь, что снижает эффективность теплообмена. Исследование Американского общества инженеров по отоплению, охлаждению и кондиционированию воздуха, проведенное в 2024 году, показало, что загрязненные змеевики увеличивают потребление энергии на охлаждение на 18-22%. Ежеквартально очищайте змеевики с помощью сжатого воздуха или профессиональных средств для очистки змеевиков.
Проверка хладагента и жидкостей: В системах жидкостного охлаждения и воздушных блоках DX низкий уровень хладагента или загрязненная жидкость снижают холодопроизводительность. Проверяйте уровень хладагента каждые 6 месяцев и тестируйте жидкости для жидкостного охлаждения, чтобы предотвратить коррозию или отказ насоса. Одна финансовая фирма в Нью-Йорке потеряла $50 000 в результате простоя из-за медленной утечки хладагента в DX-блоках, которую можно было обнаружить только при регулярных проверках давления.
Тестирование избыточности: Резервирование N+1 или 2N бесполезно, если резервные блоки охлаждения выходят из строя в нужный момент. Ежеквартально тестируйте системы резервирования, имитируя отказ основного блока - это гарантирует, что резервные блоки активируются в течение 2-3 секунд. Исследование Uptime Institute "Глобальный обзор центров обработки данных 2023" показало, что только 58% объектов регулярно тестируют резервирование, что делает 42% уязвимыми к перебоям в работе системы охлаждения.
3.4 Контроль окружающей среды помимо температуры
Хотя температура привлекает наибольшее внимание, влажность и качество воздуха не менее важны для эффективности охлаждения стойки и долговечности оборудования.
Регулирование влажности: Как отмечалось ранее, влажность, выходящая за пределы рекомендованного ASHRAE диапазона, повреждает оборудование, но также ухудшает эффективность охлаждения. Высокая влажность увеличивает плотность воздуха, затрудняя вентиляторам циркуляцию холодного воздуха и снижая эффективность теплообмена на 10-15%. Низкая влажность увеличивает статическое электричество, которое может повредить компоненты сервера и нарушить воздушный поток, притягивая пыль. Современные системы охлаждения с двухступенчатой системой увлажнения/осушения поддерживают оптимальную относительную влажность воздуха, но калибровка является ключевым моментом - дрейф датчиков может привести к неправильным значениям влажности. Ежеквартально калибруйте датчики с помощью измерителя влажности, прошедшего поверку NIST.
Качество воздуха и фильтрация: Пыль, ворсинки и частицы воздуха забивают вентиляционные отверстия серверов и охлаждающие змеевики, снижая воздушный поток и теплоотдачу. Инвестируйте в воздушные фильтры MERV 13+ для центра обработки данных и предварительные фильтры на уровне стоек для систем с высокой плотностью размещения. Исследование Data Center Institute показало, что улучшенная фильтрация воздуха снижает затраты на обслуживание серверов на 28% и продлевает срок службы системы охлаждения на 3-5 лет. Для центров обработки данных, расположенных в промышленных или пыльных регионах, следует рассмотреть возможность использования электростатических фильтров для удаления мелких частиц.
3.5 Мониторинг, автоматизация и интеграция искусственного интеллекта
Прошли времена систем охлаждения по принципу “поставил и забыл”. Современные центры обработки данных полагаются на мониторинг и автоматизацию в режиме реального времени для оптимизации охлаждения стоек - особенно по мере того, как плотность и рабочие нагрузки становятся все более динамичными.
Мониторинг на уровне стоек: Для отслеживания локальных условий недостаточно установить датчики температуры на входе, выходе и в горячих зонах стойки. Используйте инструменты DCIM для агрегирования данных и установки предупреждений о скачках температуры или отклонениях влажности. Исследование Gartner, проведенное в 2023 году, показало, что в центрах обработки данных с мониторингом на уровне стоек на 40% меньше отключений, связанных с охлаждением.
Предсказательное охлаждение на основе искусственного интеллекта: Передовые DCIM-платформы интегрируют алгоритмы машинного обучения для прогнозирования тепловой нагрузки на основе моделей рабочей нагрузки и погодных условий. ИИ проактивно регулирует мощность охлаждения - например, усиление охлаждения перед запланированным заданием по обучению ИИ повышает плотность размещения стоек. В центрах обработки данных Azure компании Microsoft охлаждение с помощью искусственного интеллекта позволило снизить энергопотребление на 25%, а искусственный интеллект DeepMind компании Google сократил расходы на охлаждение на 40% за счет оптимизации воздушного потока и заданных значений температуры.
Динамическая регулировка охлаждения: Автоматизация позволяет системам охлаждения адаптироваться к изменениям в реальном времени. Например, модульные блоки охлаждения могут активироваться/деактивироваться в зависимости от нагрузки на стойку, а вентиляторы с переменной скоростью вращения могут регулировать воздушный поток в соответствии с потребностями сервера. Это позволяет сократить потери энергии на 30-40% по сравнению со статическими системами охлаждения.
3.6 Синергия питания и охлаждения
Охлаждение и энергетическая инфраструктура неразрывно связаны друг с другом - игнорирование их синергии приводит к неэффективности и увеличению затрат.
Управление тепловой нагрузкой ИБП: Источники бесперебойного питания создают 5-10% общей тепловой нагрузки в центре обработки данных. Размещайте блоки ИБП в отдельных зонах охлаждения, чтобы избежать перегрева стоек. Выбирайте высокоэффективные системы ИБП, чтобы минимизировать тепловыделение - только это может снизить общий показатель PUE объекта на 0,05-0,1. .
Интеграция динамического управления питанием: Инструменты DPM регулируют энергопотребление сервера в зависимости от рабочей нагрузки. В сочетании с автоматизацией охлаждения DPM позволяет сократить расходы на электроэнергию и охлаждение на 15-20%. Например, в непиковые часы DPM переводит простаивающие серверы в режим пониженного энергопотребления, снижая тепловую нагрузку и позволяя системам охлаждения снизить нагрузку.
Возобновляемая энергия и охлаждение Выравнивание: Для центров обработки данных, использующих энергию солнца или ветра, следует согласовать время работы системы охлаждения с возобновляемыми источниками энергии. Например, использовать естественное охлаждение в периоды низкой солнечной активности и полагаться на механическое охлаждение, дополняемое солнечной энергией в пиковые дневные часы. Эта стратегия помогла центру обработки данных Google в Оклахоме достичь показателя PUE 1,12 при использовании 80% возобновляемой энергии.

4. Преодоление проблем с охлаждением стоек высокой плотности
Стойки высокой плотности представляют собой уникальную проблему охлаждения - концентрированная тепловая нагрузка, ограниченный воздушный поток и необходимость предельной точности. Ниже приведены проверенные стратегии решения этих проблем, подкрепленные отраслевыми примерами.
4.1 Пределы воздушного охлаждения для стеллажей высокой плотности
Воздушное охлаждение становится неэффективным для стоек мощностью более 15 кВт на стойку, поскольку низкая теплоемкость воздуха не позволяет достаточно быстро рассеивать сконцентрированную тепловую энергию. Исследование, проведенное в 2022 году компанией Data Center Dynamics, показало, что в стойках высокой плотности с воздушным охлаждением горячие точки возникают в 3 раза чаще, чем в стойках с жидкостным охлаждением, а энергопотребление при охлаждении выше на 40-60%.
Ключевой момент: Для стоек мощностью более 15 кВт жидкостное охлаждение - не просто “лучший” вариант, а необходимость. Охлаждение непосредственно на кристалле может работать с 20-50 кВт на стойку, а охлаждение погружением - с 100 кВт+ на стойку.
4.2 Стратегии для стеллажей сверхвысокой плотности
Стойки со сверхвысокой плотностью требуют специальных решений по охлаждению и конструктивных особенностей:
Двухфазное погружное охлаждение: Эта технология погружает серверы в диэлектрическую жидкость, которая испаряется, поглощая тепло. Пар конденсируется в жидкость на охлаждающих катушках, создавая замкнутую систему с практически идеальным теплообменом. Двухфазное погружное охлаждение позволяет достичь коэффициента полезного действия (PUE) на уровне 1,05 и полностью устранить горячие точки - даже в системах мощностью 100 кВт на стойку.
Пример из практики: На предприятии по добыче криптовалют в Техасе было установлено двухфазное иммерсионное охлаждение для 50 стоек. Система сократила потребление энергии на охлаждение на 55% по сравнению с воздушным охлаждением, а срок службы серверов увеличился на 30% благодаря стабильному тепловому режиму.
Контуры жидкостного охлаждения для монтажа в стойку: В кластерах HPC интегрированные в стойку контуры жидкостного охлаждения подают охлажденную жидкость непосредственно к холодным пластинам каждого сервера. Эти контуры масштабируются, резервируются и совместимы со стандартными серверными стойками, что делает их идеальными для модернизации существующих высокоплотных систем.
Интеграция тепловых накопителей: Для стоек с переменной тепловой нагрузкой системы термоаккумулирования поглощают избыточное тепло во время пиков, снижая нагрузку на системы охлаждения. Лаборатория высокопроизводительных вычислений Стэнфордского университета использовала фазообменные материалы, чтобы справиться со скачками мощности в 30 кВт при установке 40 кВт на стойку, что позволило избежать необходимости модернизации системы охлаждения.
4.3 Модернизация существующих стеллажей для повышения их плотности
Многие центры обработки данных нуждаются в увеличении плотности размещения стоек без перестройки инфраструктуры охлаждения. Вот как это сделать с минимальными затратами:
Добавьте охлаждение непосредственно к чипу в стойки с воздушным охлаждением: Модернизируемые комплекты холодных пластин могут быть установлены на существующие серверы, чтобы справиться с повышенной тепловой нагрузкой. Это позволяет увеличить мощность стоек с 10 кВт до 25 кВт без замены основной системы воздушного охлаждения.
Модернизируйте системы удержания: Замените частичную изоляцию полностью герметичными холодными проходами и заслонками с переменным объемом воздуха. Это повышает эффективность воздушного потока на 25-30%, обеспечивая более высокую плотность при существующем охлаждении.
Внедрите зонное охлаждение: Добавьте небольшие охлаждающие устройства, монтируемые в стойку, для локализации горячих точек в плотных стойках. Эти дополнительные системы стоят $5k-$10k за единицу и продлевают срок службы существующей инфраструктуры охлаждения.
Пример из практики: Медицинский центр обработки данных во Флориде модернизировал 30 стоек с воздушным охлаждением, оснастив их холодными пластинами с прямым подключением к чипу и полностью герметичными холодными проходами. Они увеличили плотность до 22 кВт на стойку без модернизации системы охлажденной воды, сэкономив $200 тысяч на расходах на инфраструктуру охлаждения. .
5. Тенденции в охлаждении стоек центров обработки данных
Будущее охлаждения стоек центров обработки данных определяется тремя ключевыми факторами: увеличением плотности размещения стоек, глобальными требованиями к экологичности и развитием технологий. Ниже представлены наиболее важные тенденции, за которыми стоит следить.
5.1 Автономное охлаждение на основе искусственного интеллекта
ИИ не ограничится предиктивными корректировками, а перейдет к полностью автономным системам охлаждения, которые будут самооптимизироваться в режиме реального времени. Эти системы будут интегрировать данные от серверов, охлаждающих устройств, прогнозов погоды и энергосетей, чтобы принимать решения, обеспечивающие баланс между эффективностью, производительностью и стоимостью. Например, автономная система может переключать охлаждение на возобновляемые источники энергии во время пиковых нагрузок, регулировать температуру в стойках на основе данных о состоянии оборудования и самостоятельно диагностировать проблемы с охлаждением до того, как они повлияют на работу. По прогнозам Gartner, к 2026 году 60% гипермасштабных центров обработки данных будут оснащены автономными системами охлаждения, что позволит сократить потребление энергии на 30%.
5.2 Экологичное и безуглеродное охлаждение
По мере приближения к цели "нетто-ноль" центры обработки данных переходят на решения для охлаждения с нулевым выбросом углекислого газа:
Охлаждение с нулевым расходом воды: Сухие охладители и чиллеры с воздушным охлаждением заменяют водоемкие градирни, решая проблему нехватки воды. Такие компании, как Coolcentric, предлагают безводные системы жидкостного охлаждения, в которых используются теплообменники с воздушным охлаждением, что полностью исключает использование воды.
Пассивное охлаждение для стоек средней плотности: Достижения в области дизайна радиаторов и фазообменных материалов делают пассивное охлаждение жизнеспособным для 10-15 кВт на стойку. Это позволит краевым центрам обработки данных и небольшим объектам достичь показателя PUE <1,2 без механического охлаждения.
Жидкостное охлаждение с использованием возобновляемых источников энергии: Насосы и теплообменники, работающие на солнечной или ветровой энергии, интегрируются в системы жидкостного охлаждения, создавая полностью возобновляемые контуры охлаждения.
5.3 Погружное охлаждение нового поколения
Погружное охлаждение будет становиться все более популярным по мере совершенствования технологии жидкостей и снижения их стоимости:
Экологически чистые диэлектрические жидкости: Жидкости на биооснове, нетоксичные и пригодные для вторичной переработки, заменяют жидкости на нефтяной основе, снижая воздействие на окружающую среду.
Системы погружения Open-Rack: Новые конструкции позволяют получать доступ к серверам без слива жидкости, что упрощает обслуживание и сокращает время простоя.
Погружное охлаждение для краевых стеллажей: Компактные погружные резервуары размером со стойку разрабатываются для периферийных центров обработки данных, позволяя проводить вычисления высокой плотности в удаленных местах с ограниченной мощностью.
5.4 Сбор тепловой энергии
Отработанное тепло от охлаждения стоек можно будет использовать в других целях, превращая центры обработки данных в “центры тепловой энергии”. Например, тепло из контуров жидкостного охлаждения можно использовать для обогрева офисных зданий, теплиц или городского водоснабжения. Один из центров обработки данных в Стокгольме уже использует 80% своего отработанного тепла для обогрева 10 000 домов, и ожидается, что к 2030 году эта тенденция распространится на 40% европейских центров обработки данных.
6. Заключение
Охлаждение стоек центров обработки данных больше не является вспомогательной функцией - это стратегический актив, влияющий на производительность, стоимость, устойчивость и надежность. Поскольку плотность размещения стоек продолжает расти, а глобальные требования к энергопотреблению ужесточаются, ключ к успеху лежит в следующем:
- Начните с основ: Расчет точных тепловых нагрузок, оптимизация расположения стоек и воздушных потоков, а также инвестиции в надлежащую изоляцию.
- Соответствие технологии охлаждения плотности: Для низкой и средней плотности используется воздушное охлаждение, для высокой плотности - жидкостное охлаждение непосредственно на кристалле, а для сверхвысокой плотности - иммерсионное охлаждение.
- Приоритетное обслуживание и мониторинг: Регулярное обслуживание и мониторинг в режиме реального времени предотвращают снижение эффективности и простои.
- Принятие инноваций: Внедрение автоматизации на основе искусственного интеллекта, экологичных решений для охлаждения и перспективных технологий, таких как погружное охлаждение.
Следуя этим принципам, операторы центров обработки данных могут создавать системы охлаждения стоек, которые не только отвечают сегодняшним потребностям, но и масштабируются для решения задач завтрашнего дня - будь то стойки AI мощностью 100 кВт на стойку, цели с нулевым уровнем выбросов углерода или распределенные вычисления на границах.
Самые успешные центры обработки данных будут не просто охлаждать свои стойки - они будут использовать охлаждение стоек как конкурентное преимущество, снижая затраты, повышая надежность и лидируя в области устойчивой цифровой инфраструктуры.
Чтобы получить индивидуальную оценку охлаждения стоек с учетом плотности, бюджета и целей устойчивого развития вашего объекта, обратитесь к сертифицированному специалисту по охлаждению центров обработки данных и убедитесь, что ваша стратегия устойчива к будущему.
Ссылки:
- ASHRAE. (2021). Тепловые рекомендации для сред обработки данных (ТК 9.9)
- Динамика центров обработки данных. (2023). Обзор систем охлаждения стоек высокой плотности
- Gartner. (2023). Прогнозы развития центров обработки данных на 2023-2026 годы
- Международное энергетическое агентство. (2023). Перспективы энергопотребления в центрах обработки данных
- Microsoft. (2023). Отчет об устойчивом развитии
- Шмидт, Дж. и др. (2022). Жидкостное охлаждение для центров обработки данных сверхвысокой плотности. Журнал "Источники энергии
- Uptime Institute. (2023). Глобальный обзор центров обработки данных
- Google. (2023). Отчет об устойчивом развитии

















