Сборный контейнерный центр обработки данных: Как с помощью теплового дизайна добиться снижения коэффициента полезного действия

поделиться с:

В этом подробном руководстве подробно рассматриваются тепловые проблемы, характерные для сборный контейнерный центр обработки данных, проверенные на практике решения для их преодоления и практические шаги по настройке сборного контейнерного центра обработки данных для достижения оптимальной эффективности - все это подкреплено отраслевыми стандартами, реальными данными и передовым инженерным опытом.

Оглавление

Что такое сборный контейнерный центр обработки данных?

Сборный контейнерный центр обработки данных - это полностью интегрированный, автономный модуль ЦОД, построенный в грузовом контейнере стандарта ISO (обычно длиной 20 или 40 футов), в котором размещены все критически важные компоненты ИТ и инфраструктуры. В отличие от модульных центров обработки данных, которые могут собираться на месте из отдельных модулей, контейнерные центры обработки данных полностью проектируются, интегрируются и тестируются в контролируемой заводской среде перед отправкой на место развертывания.

Основные компоненты включают в себя IT-стойки высокой плотности, системы ИБП, резервные генераторы, прецизионные холодильные установки, системы пожаротушения, средства мониторинга окружающей среды и решения для прокладки кабелей - все они предварительно сертифицированы на соответствие отраслевым стандартам, таким как TIA-942 и требованиям Uptime Institute Tier II/III.

Сборный контейнерный центр обработки данных

Такая заводская интеграция обеспечивает согласованность, сокращает время установки на месте до 7-14 дней и делает контейнерные центры обработки данных идеальным решением для ограниченных по площади городских районов, удаленных промышленных площадок, периферийных вычислительных центров и временных ИТ-проектов.

Критические тепловые проблемы сборных контейнерных центров обработки данных

Уникальная конструкция и сценарии развертывания сборных контейнерных центров обработки данных создают особые тепловые проблемы, которых нет в традиционных центрах обработки данных. Эти проблемы напрямую влияют на коэффициент полезного действия, надежность оборудования и общую эффективность работы, что делает управление тепловым режимом наиболее важным моментом при любом развертывании. Ниже приведены три основные болевые точки теплового режима, подтвержденные отраслевыми данными и реальными наблюдениями:

Ограниченный внутренний воздушный поток и смешивание воздуха

Компактный стальной корпус контейнерного центра обработки данных оставляет мало места для оптимизации воздушных потоков. В отсутствие продуманного дизайна холодный приточный воздух от охлаждающих устройств и горячий вытяжной воздух от серверов свободно смешиваются, снижая эффективность охлаждения на 30% и более. Такое смешивание воздуха заставляет системы охлаждения работать интенсивнее, что приводит к повышению коэффициента полезного действия (PUE) до 1,6-1,8 в неоптимизированных блоках - намного выше, чем 1,2-1,3 в хорошо спроектированных PCDC.

Суровое воздействие внешней среды

Большинство из них размещаются вне помещений, где они сталкиваются с резкими перепадами температур (от -40℃ в холодном климате до +55℃ в жарких регионах), высокой влажностью, пылью и даже коррозийными элементами (в прибрежных или промышленных районах). Такие условия создают нагрузку на системы охлаждения, повышают риск образования конденсата (который может повредить ИТ-оборудование) и требуют надежной конструкции корпуса для поддержания термостабильности. Например, скопление пыли на охлаждающих змеевиках может со временем снизить эффективность теплообмена на 15-20%, что еще больше повышает PUE.

Высокоплотные ИТ-нагрузки

Современные контейнерные центры обработки данных все чаще используются для поддержки ИИ, машинного обучения и высокопроизводительных вычислений (HPC), для которых требуются стойки с высокой плотностью GPU/CPU. Такие стойки могут потреблять 20-50 кВт мощности на стойку, что значительно превышает возможности традиционных систем воздушного охлаждения. Без специализированных тепловых решений такие высокие нагрузки приводят к локальным горячим точкам, дросселированию серверов и незапланированным простоям, которые могут стоить организациям тысячи долларов в час.

Проверенные на практике тепловые системы для сборных контейнерных центров обработки данных

Для решения уникальных тепловых проблем контейнерных центров обработки данных отраслевые эксперты и производители разработали трехслойные, проверенные на практике тепловые системы, которые обеспечивают постоянное и поддающееся проверке повышение эффективности. Эти решения соответствуют тепловым нормам ASHRAE 2023 для центров обработки данных и были проверены при коммерческом развертывании в различных отраслях, от телекоммуникаций до энергетики и здравоохранения.

Закрытый проход + оптимизированный с помощью CFD воздушный поток

Закрытый проход является основой тепловой модернизации сборных контейнерных центров обработки данных с воздушным охлаждением, поскольку он исключает смешивание холодного и горячего воздуха и обеспечивает поступление 100% охлаждающего воздуха к входным отверстиям серверов. Эта конструкция предусматривает герметизацию холодного прохода с помощью физических перегородок, дверей стоек с прокладками и потолочных панелей, создавая специальное пространство для распределения холодного воздуха. Для дальнейшей оптимизации воздушных потоков при проектировании фабрики используется моделирование с помощью вычислительной гидродинамики, позволяющее составить схему воздушных потоков, выявить потенциальные "горячие точки" и расположить охлаждающие устройства и стойки для достижения максимальной эффективности.

Среди ключевых технических решений - вентиляторы EC с переменной скоростью вращения, которые в режиме реального времени регулируют скорость вращения в зависимости от тепловой нагрузки на стойку, что снижает потребление энергии при низком спросе на охлаждение. Кроме того, в защитной зоне установлены датчики давления для контроля перепада давления, обеспечивающие поддержание в холодном проходе небольшого положительного давления (обычно 5-10 Па), чтобы предотвратить просачивание горячего воздуха. Измеренное улучшение этой системы значительно: потребление энергии на охлаждение сократилось на 25-35%, а показатель PUE снизился примерно с 1,7 до 1,4 без каких-либо других изменений. Это решение также соответствует рекомендуемому ASHRAE диапазону температуры на входе сервера 18-27℃, что позволяет сбалансировать эффективность охлаждения и надежность оборудования.

Экономия воздуха + двухцикловое охлаждение с помощью фторопластового насоса

Одно из самых больших преимуществ сборных контейнерных центров обработки данных - возможность использовать бесплатное охлаждение из внешней среды, которое традиционные центры обработки данных, расположенные внутри помещений, часто не могут использовать в полной мере. Экономия воздушного потока в сочетании с двухцикличной системой охлаждения Fluoropump позволяет максимально использовать потенциал естественного охлаждения, сохраняя при этом мобильность контейнерного ЦОДа (не требуется установка охлаждающей воды).

Система работает по простой и эффективной логике: когда температура наружного воздуха ниже 21℃, система охлаждения контейнерного центра обработки данных втягивает и фильтрует наружный воздух, используя его для непосредственного охлаждения ИТ-оборудования. Когда температура окружающей среды поднимается выше 21℃, активируется система охлаждения Fluoropump, обеспечивающая прецизионное охлаждение. В системах Fluoropump используется нетоксичный, эффективный хладагент, который быстро переносит тепло, устраняя необходимость в большом контуре охлажденной воды. В регионах с умеренным климатом этот двухцикличный подход обеспечивает 3 000-4 500 бесплатных часов охлаждения в год, снижая общий коэффициент полезного действия до 1,2-1,25. Для организаций, развертывающих контейнерные центры обработки данных в более холодном климате (например, в Северной Европе или Северной Америке), эта система может снизить затраты на охлаждение до 50% по сравнению с традиционными блоками воздушного охлаждения.

Гибридное жидкостное охлаждение для высокоплотных рабочих нагрузок ИИ

Для контейнерных центров обработки данных, поддерживающих высокую плотность рабочих нагрузок AI, GPU или HPC (25 кВт на стойку и выше), воздушное охлаждение достигает практического предела. Гибридное жидкостное охлаждение - единственное надежное решение для поддержания тепловой стабильности и достижения лучшего в отрасли показателя PUE в таких сценариях. Эта система сочетает в себе лучшее от жидкостного и воздушного охлаждения: жидкостное охлаждение справляется с большей частью тепловой нагрузки (до 90%), а резервная система воздушного охлаждения обеспечивает резервирование и защищает от сбоев жидкостной системы.

Две наиболее распространенные архитектуры гибридного жидкостного охлаждения для контейнерных центров обработки данных - это теплообменники на задней панели и блоки распределения охлаждающей жидкости в стойках. Задние теплообменники устанавливаются на задней стенке ИТ-стоек, где они забирают горячий отработанный воздух и передают тепло в контур с жидким теплоносителем. С другой стороны, встроенные в стойку блоки распределения охлаждающей жидкости подают охлажденную жидкость на серверные холодильные панели или погружные системы охлаждения. Обе архитектуры устанавливаются и тестируются на заводе, что обеспечивает совместимость с общим дизайном контейнерного центра обработки данных. Подтвержденная производительность гибридного жидкостного охлаждения впечатляет: PUE составляет 1,05-1,15, а мощность отвода тепла повышена на 50% по сравнению с чисто воздушным охлаждением. Это решение идеально подходит для развертывания пограничных систем искусственного интеллекта, опорных сетей 5G и удаленных центров высокопроизводительных вычислений, где строительство специализированного центра с жидкостным охлаждением нецелесообразно или нецелесообразно по стоимости.

Практическая настройка теплового режима для сборного контейнерного центра обработки данных

Даже при наличии правильных тепловых систем правильная настройка необходима для достижения и поддержания оптимальной эффективности контейнерного центра обработки данных. Ниже приведен повторяющийся, легко выполнимый 4-этапный рабочий процесс, который может быть реализован ИТ-отделом и командой специалистов, с четкими показателями для отслеживания прогресса и обеспечения успеха:

Составление карты тепловых нагрузок и оптимизация расположения стоек

Начните с проведения комплексной оценки тепловой нагрузки всего ИТ-оборудования в контейнерном ЦОДе. Пометьте каждую стойку с указанием ее плотности мощности (в кВт/стойку) и расположите стойки с наибольшей нагрузкой ближе всего к выходам охлаждающих устройств. Это минимизирует расстояние, которое холодный воздух проходит до высоконагретого оборудования, снижая риск возникновения горячих точек. Например, если у вас есть две стойки с графическими процессорами мощностью 40 кВт, разместите их прямо перед вентиляционными отверстиями блока охлаждения, чтобы обеспечить максимальный поток воздуха.

Загерметизируйте все утечки воздуха

Даже небольшие утечки воздуха в корпусе или системе защиты контейнерного центра обработки данных могут снизить эффективность охлаждения на 5-10%. Осмотрите все кабельные вводы, зазоры в стойках, дверные уплотнители и потолочные панели на предмет утечек. Используйте высококачественные прокладки, герметик и кабельные муфты для заделки этих зазоров. Уделите особое внимание местам ввода кабелей в контейнер, так как они являются общими местами утечки. Регулярные осмотры (ежемесячные при развертывании на открытом воздухе) помогут выявить и устранить новые утечки до того, как они повлияют на эффективность.

Установка кривых интеллектуального вентилятора

Избегайте использования фиксированных скоростей вентиляторов для блоков охлаждения и серверных вентиляторов - вместо этого привяжите скорость вентиляторов к данным о температуре в реальном времени. Для охлаждающих устройств устанавливайте кривые вентиляторов в зависимости от температуры на входе в сервер (ориентируйтесь на 18-27℃), а не на фиксированную скорость вращения. Для серверных вентиляторов используйте настройки BIOS или средства удаленного управления для регулировки скорости вращения вентиляторов в зависимости от температуры CPU/GPU. Это гарантирует, что вентиляторы потребляют только необходимое количество энергии, снижая общее энергопотребление и уменьшая коэффициент полезного действия.

Обеспечьте круглосуточный мониторинг и обслуживание

Разверните комплексную систему мониторинга окружающей среды для круглосуточного отслеживания ключевых тепловых показателей, включая дельта-Т (разницу температур) на входе и выходе сервера, давление в защитной оболочке, время работы охлаждающего устройства и температуру/влажность окружающей среды. Настройте оповещения об аномальных значениях (например, температура на входе выше 27℃ или давление в защитной оболочке ниже 5 Па), чтобы вовремя заметить дрейф производительности. Кроме того, запланируйте регулярное техническое обслуживание: очищайте охлаждающие змеевики и воздушные фильтры каждые 3-6 месяцев, проверяйте контуры жидкостного охлаждения на наличие утечек и ежемесячно тестируйте резервные системы охлаждения для обеспечения резервирования.

Почему оптимизация теплового режима определяет ценность сборных контейнерных центров обработки данных

Терморегуляция - это не второстепенная функция сборного контейнерного ЦОДа, а основной отличительный фактор, превращающий быстровозводимый переносной корпус в надежное, экономически эффективное и долгосрочное инфраструктурное решение. Скорость развертывания, мобильность и масштабируемость контейнерных центров обработки данных ценны только в том случае, если они способны поддерживать низкий коэффициент полезного действия, защищать ИТ-оборудование и обеспечивать постоянное время безотказной работы. Благодаря использованию закрытых проходов, экономии воздуха с охлаждением фторопластовой помпой и гибридному жидкостному охлаждению в сочетании с 4-этапным процессом настройки организации могут стабильно достигать PUE 1,15-1,3, сохраняя все основные преимущества контейнерных ЦОД.

Для команд, уделяющих первостепенное внимание пограничным вычислениям, удаленной инфраструктуре, рабочим нагрузкам искусственного интеллекта или временным ИТ-мощностям, сборный контейнерный центр обработки данных с оптимизированным тепловым режимом является наиболее практичным и экономичным решением на сегодняшний день. Он обеспечивает скорость и гибкость, необходимые для того, чтобы идти в ногу с цифровой трансформацией, а оптимизированная тепловая конструкция гарантирует долгосрочную надежность и эффективность.

Об авторе

Гэвин

Гэвин - менеджер по операциям в компании, специализирующейся на вспомогательном оборудовании для центров обработки данных. Он разбирается в источниках бесперебойного питания для центров обработки данных, прецизионных кондиционерах и решениях для центров обработки данных. Он может помочь вам лучше понять эти продукты и выбрать различные решения.

Похожие посты