Системы охлаждения для центров обработки данных: Хватит гадать - выбирайте подходящую систему для вашего объекта

В цифровую эпоху центры обработки данных являются основой глобальной связи, обеспечивая работу всего — от облачного хранилища до приложений искусственного интеллекта. По мере экспоненциального роста объемов данных и плотности серверов системы охлаждения центров обработки данных становятся критически важными для обеспечения надежности оборудования, снижения энергопотребления и поддержания оптимальной производительности.

Неправильно спроектированная система охлаждения может привести к перегреву, выходу из строя оборудования и резкому увеличению эксплуатационных расходов, поэтому важно понимать различные типы решений для охлаждения, их идеальные варианты использования, новые тенденции и то, как выбрать идеальный вариант для вашего объекта.

Типы систем охлаждения центров обработки данных и их идеальные сценарии

Не все системы охлаждения центров обработки данных одинаковы. Правильный выбор зависит от таких факторов, как размер центра обработки данных, плотность размещения серверов, местоположение и цели энергоэффективности. Ниже представлены наиболее распространенные типы, а также их ключевые особенности и идеальные области применения.

1. Системы воздушного охлаждения: Традиционные и экономически эффективные

Системы воздушного охлаждения - это наиболее распространенные решения для охлаждения, использующие воздух в качестве основной среды для отвода тепла от ИТ-оборудования. Они делятся на две основные подкатегории:

• Кондиционеры для компьютерных комнат (CRAC): Эти устройства используют охлаждение хладагентом прямого расширения для отвода тепла из среды центра обработки данных. Системы CRAC компактны, просты в установке и экономически эффективны для малых и средних объектов. Они идеально подходят для центров обработки данных с низкой или умеренной плотностью серверов (≤10 кВт на стойку) и ограниченным пространством для сложной инфраструктуры охлаждения, таких как небольшие центры размещения или локальные помещения для хранения данных. Однако они менее эффективны для крупных объектов из-за более высокого энергопотребления.
• Воздухораспределители для компьютерных помещений (CRAH): В отличие от блоков CRAC, системы CRAH используют охлажденную воду от внешнего чиллера для охлаждения воздуха, что делает их более масштабируемыми и эффективными для больших центров обработки данных. Они предпочтительны для гипермасштабных объектов, центров размещения и центров обработки данных с высокой нагрузкой на охлаждение, поскольку могут работать с более высокой плотностью серверов (до 15 кВт на стойку) и легко интегрируются с централизованными системами охлажденной воды. Блоки CRAH также способствуют повышению энергоэффективности по сравнению с системами CRAC, особенно в сочетании с технологиями естественного охлаждения.

Системы воздушного охлаждения также включают охлаждение на уровне помещения (PUE 1,6-2,0), локализацию холодного канала (PUE 1,4-1,6) и теплообмен на уровне рядов/задней двери (PUE 1,3-1,4), которые оптимизированы для различных потребностей в плотности - от традиционных ЦОД низкой плотности до корпоративных центров обработки данных средней плотности.

2. Системы жидкостного охлаждения: Высокая эффективность при высокой плотности нагрузки

По мере того, как искусственный интеллект и высокопроизводительные вычисления (HPC) приводят к увеличению плотности серверов до 50 кВт на стойку и выше, системы жидкостного охлаждения становятся оптимальным решением для экстремальных тепловых нагрузок. Жидкости обладают гораздо большей теплоемкостью, чем воздух (теплоемкость воды в три раза выше, чем воздуха), что делает их гораздо более эффективными при отводе тепла от плотного ИТ-оборудования. К основным типам относятся:

• Холодная плита жидкостного охлаждения: Это наиболее распространенное решение с жидкостным охлаждением, в котором используются специальные холодные пластины, прикрепленные к процессорам, GPU и другим высоконагревающимся компонентам. Охлаждающая жидкость циркулирует по холодным пластинам, поглощая тепло и передавая его в теплообменник. Системы с холодными пластинами идеально подходят для центров обработки данных средней и высокой плотности (30-50 кВт на стойку), таких как кластеры искусственного интеллекта, интеллектуальные вычислительные центры и IDC среднего размера. Они совместимы со стандартными серверами, легко модернизируются и обеспечивают баланс эффективности и рентабельности (PUE 1,05-1,15).
• Погружное охлаждение: В этом решении серверы полностью погружаются в непроводящую диэлектрическую охлаждающую жидкость, которая непосредственно охлаждает все компоненты. Погружное охлаждение подразделяется на однофазное (минеральное масло или синтетические углеводороды) и двухфазное (низкокипящие фторированные жидкости), причем последнее обеспечивает еще более высокую эффективность. Это оптимальное решение для объектов сверхвысокой плотности (≥50 кВт на стойку), таких как суперкомпьютерные центры, кластеры для обучения искусственному интеллекту и специализированные кластеры Nvidia Rubin. Погружное охлаждение устраняет горячие точки, снижает уровень шума (до <50 дБ), продлевает срок службы оборудования на 30% и позволяет достичь PUE на уровне 1,03-1,06.
• Гибридное жидкостно-воздушное охлаждение: Сочетает в себе технологии воздушного и жидкостного охлаждения, используя воздушное охлаждение для зон с низкой плотностью, а жидкостное - для зон с высокой плотностью. Это идеальный вариант для центров обработки данных смешанного назначения (например, общие вычисления + рабочие нагрузки искусственного интеллекта) и старых объектов, подвергающихся модернизации, поскольку он обеспечивает плавный переход и оптимизирует энергоэффективность при различных нагрузках (PUE 1,15-1,25).

3. Системы испарительного охлаждения: Экологичность для умеренного климата

Системы испарительного охлаждения используют естественный процесс испарения воды для охлаждения воздуха, что делает их очень энергоэффективными и экологичными. Они часто используются в качестве вторичного охлаждения или в сочетании с системами охлажденной воды. Типичная система испарительного охлаждения включает в себя градирню, где конденсаторная вода переносит тепло от чиллера и отводит его в атмосферу путем испарения. Эти системы идеально подходят для центров обработки данных, расположенных в сухом, умеренном климате (например, в некоторых регионах Северной Америки, Европы и Азии), где наружный воздух прохладный и сухой. Они снижают энергопотребление за счет использования естественного охлаждения, но требуют тщательного управления водой для поддержания эффективности, которая измеряется эффективностью использования воды (WUE).

4. Пограничные системы охлаждения центров обработки данных: Компактные и адаптивные

Пограничные центры обработки данных, представляющие собой небольшие распределенные объекты, расположенные вблизи конечных пользователей, сталкиваются с уникальными проблемами охлаждения из-за их компактных размеров, высокой плотности и разнородного оборудования. Такие решения, как CoolEdge+ - система водяного охлаждения на уровне компонентов, - позволяют динамически регулировать температуру воды на входе и использовать холодные пластины на основе паровой камеры для уменьшения горячих точек. Эти системы предназначены для граничных устройств мощностью от десятков до сотен киловатт и позволяют снизить потребление энергии на охлаждение до 27,19% по сравнению с традиционными крупномасштабными стратегиями охлаждения.

Будущие тенденции развития систем охлаждения центров обработки данных

Будущее систем охлаждения центров обработки данных определяется тремя ключевыми приоритетами: энергоэффективностью, устойчивостью и адаптивностью к новым технологиям, таким как искусственный интеллект и периферийные вычисления. Ниже представлены наиболее важные тенденции, определяющие развитие отрасли:

1. Доминирование жидкостного охлаждения в средах высокой плотности

Поскольку рабочие нагрузки ИИ и HPC продолжают увеличивать плотность серверов до 100 кВт на стойку и выше, жидкостное охлаждение станет стандартом для высокопроизводительных центров обработки данных. По данным HPE, жидкостное охлаждение позволяет сократить выбросы углекислого газа на 87% и эксплуатационные расходы на 86% по сравнению с воздушным охлаждением. Кроме того, высокотемпературное жидкостное охлаждение (45-60℃ воды на входе) будет набирать обороты, поскольку оно увеличивает период свободного охлаждения на 80% и максимизирует потенциал рекуперации отработанного тепла.

2. Интеллектуальное охлаждение на основе искусственного интеллекта

ИИ и машинное обучение преобразуют управление системами охлаждения. Системы предиктивного управления, объединяющие данные датчиков IoT с нейронными сетями с подкреплением (RL) и LSTM, позволяют оптимизировать работу системы охлаждения в режиме реального времени. Эти системы прогнозируют потребность в охлаждении, динамически регулируют расход воздуха и заданные значения температуры и снижают потребление энергии на охлаждение на 15-25% по сравнению с традиционными системами управления, основанными на правилах. ИИ также помогает отслеживать "горячие точки", прогнозировать отказы оборудования и оптимизировать PUE (эффективность использования энергии) - ключевой показатель энергоэффективности ЦОД (идеальный показатель PUE составляет 1,0, и ведущие предприятия приближаются к этому значению).

3. Утилизация тепла отходов и энергетический симбиоз

Центры обработки данных превращаются из “энергопотребителей” в “энергетические центры” благодаря рекуперации отработанного тепла. Системы жидкостного охлаждения генерируют теплую воду (45-65℃), которая может быть использована для централизованного отопления, промышленных процессов, сельскохозяйственных теплиц и даже разведения рыбы. Например, NREL рекуперирует 90% отработанного тепла суперкомпьютера HPE Cray с жидкостным охлаждением для обогрева офисов и лабораторий, а компания QScale планирует использовать отработанное тепло для питания теплиц размером со 100 футбольных полей. Эта тенденция не только снижает выбросы углекислого газа, но и создает новые источники дохода для операторов центров обработки данных.

4. Инновации в области краевого охлаждения

В связи с быстрым ростом вычислений на границах (по прогнозам, к 2032 году их объем достигнет $182 млрд) решения для охлаждения граничных центров обработки данных станут более компактными, адаптивными и энергоэффективными. Охлаждение на уровне компонентов, например CoolEdge+, и модульные системы охлаждения будут доминировать, поскольку они могут работать с разнородным оборудованием и динамическими рабочими нагрузками, вписываясь в ограниченное пространство. Пограничное охлаждение будет также интегрировано с возобновляемыми источниками энергии (например, солнечной, ветровой) для обеспечения автономной работы в удаленных районах.

5. Зеленое охлаждение и углеродная нейтральность

Устойчивое развитие будет оставаться главным приоритетом, и операторы центров обработки данных будут стремиться к углеродной нейтральности. Это включает в себя использование возобновляемых источников энергии для питания систем охлаждения, применение экологичных охлаждающих жидкостей (например, нетоксичных, биоразлагаемых фторированных жидкостей) и оптимизацию WUE для снижения потребления воды. Правительства и регулирующие органы также настаивают на ужесточении стандартов эффективности, что стимулирует внедрение "зеленых" технологий охлаждения во всей отрасли.

Как правильно выбрать систему охлаждения для центра обработки данных

Выбор подходящей системы охлаждения центра обработки данных требует целостной оценки потребностей, целей и ограничений вашего объекта. Следуйте этим шагам, чтобы принять обоснованное решение:

Шаг 1: Оцените свои основные требования

• Плотность серверов: В помещениях с низкой плотностью (≤10 кВт на стойку) можно использовать блоки CRAC или базовое воздушное охлаждение. Для объектов средней плотности (10-30 кВт на стойку) выгодны системы CRAH или жидкостное охлаждение холодных пластин. Высокая плотность (≥30 кВт на стойку) требует погружного охлаждения или гибридных жидкостно-воздушных решений. Установки для ИИ и высокопроизводительных вычислений (≥50 кВт на стойку) должны в первую очередь использовать погружное охлаждение.
• Размер и расположение объекта: Небольшие центры обработки данных или периферийные объекты лучше всего обслуживаются компактными, легко устанавливаемыми системами (CRAC, жидкостное охлаждение на уровне компонентов). Крупные гипермасштабные или колокейшн-центры выигрывают от масштабируемых систем CRAH или централизованных систем жидкостного охлаждения. Климат также имеет значение - испарительное охлаждение идеально подходит для сухих регионов, в то время как жидкостное охлаждение лучше подходит для жарких и влажных районов, где воздушное охлаждение неэффективно.
• Цели в области энергоэффективности: Если снижение PUE является приоритетом, выбирайте жидкостное охлаждение (PUE 1,03-1,15) или испарительное охлаждение. Системы управления на основе искусственного интеллекта могут дополнительно оптимизировать энергопотребление на 15-25%. Для обеспечения углеродной нейтральности отдавайте предпочтение системам, совместимым с рекуперацией отработанного тепла и возобновляемыми источниками энергии.

Шаг 2: Анализ стоимости и жизненного цикла

Хотя системы с воздушным охлаждением имеют более низкую первоначальную стоимость, системы с жидкостным охлаждением обеспечивают долгосрочную экономию за счет снижения затрат на электроэнергию и обслуживание. Например, центр обработки данных с 10 000 серверов с жидкостным охлаждением может ежегодно экономить около $2,1 миллиона долларов на эксплуатационных расходах по сравнению с серверами с воздушным охлаждением. При сравнении решений учитывайте первоначальные затраты на установку, текущие счета за электроэнергию, требования к обслуживанию и срок службы оборудования. Иммерсионное охлаждение имеет более высокие первоначальные затраты, но более низкие долгосрочные расходы, в то время как системы CRAC дешевле изначально, но менее эффективны с течением времени.

Шаг 3: Учитывайте совместимость и масштабируемость

Убедитесь, что система охлаждения совместима с существующим ИТ-оборудованием и инфраструктурой. Для устаревших объектов жидкостное охлаждение с холодными пластинами легче модернизировать, чем погружное охлаждение. Если вы планируете расширить свой центр обработки данных или увеличить плотность размещения серверов, выбирайте масштабируемое решение (CRAH, гибридное охлаждение или модульное жидкостное охлаждение), которое может расти вместе с вашими потребностями. Избегайте систем, которые привязывают вас к одному поставщику или требуют капитального ремонта инфраструктуры для обновления.

Шаг 4: Приоритет надежности и технического обслуживания

Системы охлаждения центров обработки данных должны работать круглосуточно, чтобы предотвратить выход оборудования из строя. Выбирайте системы с проверенной надежностью (например, решения HPE для жидкостного охлаждения с более чем 50-летним опытом) и простым обслуживанием. Системы с воздушным охлаждением требуют регулярной замены фильтров и обслуживания вентиляторов, а системы с жидкостным охлаждением нуждаются в мониторинге охлаждающей жидкости и обнаружении утечек. Погружное охлаждение требует меньших затрат на обслуживание благодаря меньшему количеству движущихся частей и меньшему накоплению пыли.

Шаг 5: Согласование со стандартами соответствия и устойчивого развития

Убедитесь, что система охлаждения соответствует местным нормам и отраслевым стандартам (например, рекомендациям ASHRAE по температурному режиму в центрах обработки данных). Для обеспечения устойчивости выбирайте системы, которые снижают выбросы углекислого газа, минимизируют потребление воды (оптимизируют WUE) и поддерживают рекуперацию отработанного тепла. Ищите экологически чистые охлаждающие жидкости и энергоэффективные компоненты, чтобы соответствовать корпоративным целям устойчивого развития и нормативным требованиям.

Системы охлаждения центров обработки данных больше не являются просто “вспомогательной функцией” - они представляют собой стратегические инвестиции, влияющие на надежность, эффективность и устойчивость. Понимая различные типы решений для охлаждения, их идеальные варианты использования и новые тенденции, вы сможете выбрать систему, соответствующую потребностям и долгосрочным целям вашего объекта. Независимо от того, эксплуатируете ли вы небольшой центр обработки данных, предприятие среднего размера или крупный гипермасштабный кампус, правильно выбранная система охлаждения поможет вам сократить расходы, минимизировать воздействие на окружающую среду и обеспечить пиковую производительность вашего ИТ-оборудования.