Модернизация сегодня является самым быстрым реалистичным ответом на отвод тепла в центрах обработки данных, поскольку более 70% мировых мощностей ЦОД размещены в зданиях, рассчитанных на стойки с воздушным охлаждением мощностью 5–15 кВт. Строительство новых объектов занимает от трёх до пяти лет, а платформы GPU обновляются с 18-месячным циклом, поэтому ожидание нового строительства означает потерю конкурентных позиций. Проверенный путь — поэтапная модернизация с прямым подводом к чипу: эта стратегия отвода тепла начинается с оценки, преобразует одну-две пилотные стойки, расширяется ряд за рядом и сохраняет воздушное охлаждение для устаревшего оборудования. При поэтапном выполнении жидкостная модернизация стоит примерно 2 млн долларов за мегаватт против 11 млн за новые мощности и может окупиться за 24–36 месяцев.
Почему модернизация является реальной проблемой отвода тепла в центрах обработки данных?
Развитие систем искусственного интеллекта происходит внутри существующих зданий, а не на новых объектах, которые операторы могли бы проектировать с нуля. В отчете «The Cooling Report» отмечается, что в мире уже существует более 70% мощностей центров обработки данных, большая часть которых рассчитана на плотность заполнения стоек в диапазоне 5–15 кВт. Эти здания никогда не проектировались с расчётом на 100 кВт на стойку, что делает отвод тепла в существующих центрах обработки данных основной инженерной задачей текущего цикла. Экономические соображения подчеркивают срочность решения этой проблемы: по оценкам STL Partners, модернизация с внедрением жидкостного охлаждения обходится примерно в $2 млн на МВт, тогда как строительство новых мощностей с жидкостным охлаждением — в $11 млн на МВт. Компания Tate Global добавляет, что модернизация сокращает капитальные затраты на 20–40% по сравнению со строительством новых объектов и снижает углеродный след на 50%. Для операторов, располагающих доступной электроэнергией и подключением к энергосети, модернизация позволяет за считанные месяцы, а не годы, превратить «застрявшие» активы в мощности, готовые к использованию искусственного интеллекта для отвода тепла из центров обработки данных.
Сколько стоит модернизация системы отвода тепла в центре обработки данных по сравнению со строительством нового объекта?
Затраты на модернизацию варьируются в зависимости от выбранной технологии, и в приведенной ниже таблице представлены реалистичные диапазоны затрат на проекты по модернизации систем отвода тепла в центрах обработки данных, согласно данным интеграторов и аналитиков за 2025–2026 годы. Стоимость указана в расчете на один стойковый шкаф, поскольку окончательная сумма зависит от плотности размещения оборудования, условий в помещении и объема работ; поэтому каждую цифру следует рассматривать как ориентир для планирования, а не как окончательную смету:
| Теплообменник задней двери (RDHx) | $ 8 000–15 000 | Обеспечивает отвод тепла мощностью 15–30 кВт на каждую дверь | Поэтапная модернизация, достаточный объём охлаждённой воды |
| Блок охлаждения, встраиваемый в ряд | $ 20 000–35 000 | 40–100 кВт на единицу | Имеется место в стойке, охлаждение на уровне помещения недостаточное |
| Холодные пластины с прямым подключением к микросхеме | $ 5 000–80 000 | 30–100+ кВт | Стойки с графическими процессорами и ИИ, поэтапное переоборудование |
| Модернизация погружной ванны | $ 15 000–40 000 | более 100 кВт | Новые районы или специальные зоны высокой плотности застройки |
TechInfraHub предупреждает, что затраты на модернизацию на 15–30% превышают затраты на аналогичное развертывание с нуля из-за сложности интеграции и необходимости усиления конструкции. Аналитики Nimble DC сообщают, что типичная стоимость модернизации с прямым подключением к чипу составляет от $5 000 до $20 000 за стойку, в то время как полевые данные Introl по полной конверсии, включая CDU и коллекторы, достигают $50 000–80 000 за стойку при плотности 60 кВт и более.000–80 000 за стойку при плотности 60 кВт и более.
Нагрузка на пол является серьёзным ограничивающим фактором при модернизации систем отвода тепла в центрах обработки данных: холодные пластины увеличивают вес на 15–25 кг на каждый стойку, поэтому перед вложением средств необходимо убедиться в несущей способности конструкции. Этот диапазон отражает масштаб проекта: пилотный проект с одной стойкой обходится в разы дешевле, чем переоборудование всего ряда, поэтому преобладает поэтапное внедрение.
Какие стойки следует модернизировать в первую очередь при модернизации системы отвода тепла в центре обработки данных?
Начинайте с оценки, а не с закупок; проекты по модернизации систем отвода тепла в центрах обработки данных чаще терпят неудачу из-за неготовности инфраструктуры, чем из-за физических ограничений систем охлаждения. Специалисты компании Introl провели оценку более 500 устаревших объектов и отмечают, что объекты, набравшие более 70 баллов по их 100-балльной шкале готовности, достигают успеха примерно в 90% случаев, тогда как оценки ниже 50 баллов обычно указывают на необходимость нового строительства. Оценка, стоимость которой составляет $25 000–50 000, позволяет проверить нагрузку на пол, распределение электроэнергии, мощность системы охлаждения и совместимость систем пожаротушения до того, как будут потрачены какие-либо капитальные средства.
Выбор стоек определяется фактической плотностью, а не номинальными показателями: ряды мощностью менее 15 кВт остаются на воздушном охлаждении; ряды мощностью 25–30 кВт являются идеальными кандидатами для прямого охлаждения чипов; погружное охлаждение окупается только при мощности свыше 60–70 кВт на стойку. Сначала переведите на новую технологию рабочие нагрузки из сферы разработки или тестирования: 2–3 пилотных стойки с непроизводственными вычислительными ресурсами позволят команде накопить опыт без риска для работоспособности систем клиентов, доказав, что контур отвода тепла в центре обработки данных можно безопасно установить, ввести в эксплуатацию и эксплуатировать на вашем объекте.
Как выглядит график поэтапной модернизации системы отвода тепла в центре обработки данных?
Согласно практическому руководству компании Introl, реалистичная модернизация системы отвода тепла в центре обработки данных проходит в четыре этапа и занимает примерно 12–18 месяцев. Этап 1 — подготовка инфраструктуры в течение 1–3 месяцев — включает установку CDU в технических помещениях, прокладку основных контуров по доступным трассам и модернизацию системы распределения электроэнергии; бюджет составляет $500 000–1 500 000 для развертывания 10 стоек без простоев при правильном планировании. Этап 2 — пилотный проект в течение 4–5-го месяцев — предусматривает переоборудование 2–3 стоек за $150 000–300 000, с простоями продолжительностью 4–8 часов на каждую стойку во время переключения.
На этапе 3 (перенос в производственную среду в течение 6–12 месяцев) производится переход на новые стойки партиями по 5–10 штук во время окон технического обслуживания с показателями $100 000–150 000 на стойку. Этап 4, оптимизация в течение 13–18 месяцев, предусматривает повышение температуры охлаждающей воды и настройку систем регулирования расхода по мере выхода системы теплоотвода ЦОД на стабильный режим работы. План действий SAVRN отражает ту же логику: 3–6 месяцев на оценку, 6–12 месяцев на пилотное внедрение на 1–2 стойках высокой плотности, а затем 12–24 месяца на масштабирование.
Как обеспечить безопасность рабочего объекта во время работ по модернизации систем отвода тепла в центре обработки данных?
Модернизация действующего объекта — именно в этом заключается причина репутации таких работ как рискованных. Компания Leviathan Systems модернизирует по одному ряду за ночь в ходе плановых окон технического обслуживания, используя временные ограждения, отдельный блок CDU на каждый ряд и отдельный контур охлаждения жидкостью, в то время как остальная часть зала продолжает работать благодаря воздушному охлаждению. Журнал CIBSE Journal обращает внимание на более тонкий вопрос: старые объекты проектировались с учетом необходимости защиты ИТ-стоек от попадания воды, а соглашения об оказании услуг колокации (SLA) могут запрещать нахождение воды вблизи оборудования, поэтому, возможно, сначала потребуется пересмотреть формулировки контракта.
Защита от утечек является обязательным условием: соединения с двойным уплотнением, запорные клапаны, встроенные датчики обнаружения утечек под каждым блоком CDU и коллектором, а также разъемы «dry-break» для обслуживания серверов с возможностью «горячей» замены без слива жидкости из контура — все это входит в стандартную комплектацию успешных проектов по модернизации систем отвода тепла в центрах обработки данных. Системы пожаротушения также необходимо модернизировать, поскольку жидкостное охлаждение предполагает наличие легковоспламеняющегося хладагента вблизи электронного оборудования; системы с чистыми агентами, такие как Novec 1230, и спринклеры с предварительным срабатыванием заменяют устаревшую систему FM-200 там, где она была установлена. Каждая из этих мер обеспечивает бесперебойную работу центра обработки данных на этапе перехода к новой системе отвода тепла.
Какие элементы инфраструктуры необходимо изменить помимо контура охлаждения?
Контур охлаждения — лишь часть модернизации; электроснабжение, конструкция здания и персонал претерпевают не меньшие изменения, что делает модернизацию системы отвода тепла в центре обработки данных полноценной инфраструктурной программой. Издание «The Cooling Report» предупреждает, что объект, рассчитанный на 10 кВт на стойку, не сможет обеспечить работу стоек мощностью 100 кВт без предварительной модернизации автоматических выключателей, PDU и шинопроводов, которая должна быть выполнена до начала работ по охлаждению, поэтому вопросы электроснабжения и охлаждения необходимо рассматривать в рамках единого проекта. Холодные пластины добавляют 15–25 кг на каждый стойку, вес погружных резервуаров в заполненном состоянии может достигать 2 000 фунтов, а для установки подвесных коллекторов требуется усиление потолка или монтаж напольных каркасов в виде воротных стоек.
Качество хладагента требует соблюдения новых требований: Leviathan предписывает использование пропиленгликоля 30% и деионизированной воды 70% с ингибитором коррозии, проведение тестирования ежеквартально и замену каждые 3–5 лет или при падении удельного сопротивления ниже 1 МОм·см. Кондиционеры (CDU) должны иметь резервирование по схеме N+1, при этом каждый из них должен поддерживать мощность 200–500 кВт. Наименее заметным ограничивающим фактором является кадровый ресурс: инженеры, которые всю свою карьеру работали с кондиционерами с охлаждающей водой, теперь должны балансировать расходные характеристики кондиционеров (CDU) и вводить в эксплуатацию смешанные архитектуры охлаждения — навыки, которыми пока не обладает достаточное количество специалистов.
Как провести ввод в эксплуатацию и проверку модернизированного контура циркуляции жидкости?
Правильное проведение ввода в эксплуатацию определяет успех или неудачу модернизации, а поспешность в этом процессе является основной причиной преждевременных отказов. Процесс начинается с испытания всего контура под давлением, в 1,5 раза превышающим максимальное рабочее давление, с фиксацией любого падения давления до подключения даже одного сервера. Холодные пластины затягиваются с усилием, соответствующим техническим требованиям, по перекрестной схеме с помощью откалиброванных инструментов; чрезмерное усилие приводит к растрескиванию подложек графических процессоров, а недостаточное — к образованию воздушных зазоров, которые создают «горячие точки». После переключения инфракрасная камера проверяет, что температуры всех кристаллов графических процессоров при полной нагрузке находятся в пределах нескольких градусов друг от друга.
Каждый квартал проводится проверка охлаждающей жидкости с помощью портативного измерителя проводимости и счетчика частиц, а при превышении количества частиц размером 0,5 микрона в 1 мл более 100 штук производится промывка контуров. Производственные данные компании Introl демонстрируют результаты качественного ввода в эксплуатацию: охлаждение непосредственно на уровне чипов снижает показатель PUE с 1,58 до 1,15, а компания CoolIT продемонстрировала, что 300 графических процессоров H100 поддерживают температуру перехода 62 °C при температуре поступающей воды 25 °C. Отслеживайте фактические и прогнозируемые показатели PUE, стабильность температуры и затраты на техническое обслуживание в течение как минимум одного квартала, прежде чем расширять внедрение систем отвода тепла в центре обработки данных.
Какова реальная окупаемость модернизации систем отвода тепла в центрах обработки данных?
Финансовые аргументы в пользу модернизации систем отвода тепла в центрах обработки данных заключаются в повышении плотности размещения и скорости работы, а экономия энергии является второстепенным преимуществом. Аналитики Nimble DC сообщают, что большинство операторов окупают затраты на модернизацию с переходом на систему охлаждения «прямо на чип» за 24–30 месяцев благодаря сокращению энергопотребления на охлаждение на 20–40% и снижению общих эксплуатационных расходов объекта на 10–20%. В зале мощностью 5 МВт при нагрузке 80% энергопотребление на охлаждение сокращается на 30–50%, что составляет около $130 000 в год при цене $0,10 за кВт·ч, при этом затраты на модернизацию составляют $500 000–1 000 000, что увеличивает срок окупаемости только за счет экономии энергии до 4–8 лет.
Реальная выгода заключается в плотности: компании, первыми внедрившие эту технологию, получают примерно на 40% более высокую вычислительную плотность, а помещения с жидкостным охлаждением позволяют устанавливать более высокие арендные ставки для арендаторов, работающих в сфере ИИ. По данным компании Introl, технология «direct-to-chip» уже занимает доминирующую долю в 47% на рынке жидкостного охлаждения центров обработки данных для ИИ. Для операторов, оценивающих капиталовложения, модернизация систем отвода тепла в ЦОД является капиталоэффективной, поскольку позволяет быстрее монетизировать имеющиеся энергетические ресурсы и площади, чем любое новое строительство.
Модернизация систем отвода тепла в центрах обработки данных сегодня является общепринятой стратегией, а не экспериментальным исключением. Факты говорят сами за себя: более 70% мощности размещено в зданиях с воздушным охлаждением, модернизация обходится в разы дешевле, чем строительство новых объектов, и может быть выполнена за несколько месяцев, поэтапный переход на прямое охлаждение чипов позволяет свести риски к минимуму, а окупаемость, как правило, достигается в течение 24–36 месяцев с учетом повышения плотности размещения. Ключевым фактором, отличающим успешные проекты, является последовательность действий: оценка готовности, переоборудование сначала тестовых стоек, проверка данных ввода в эксплуатацию, а затем масштабирование ряд за рядом. Операторы, которые будут следовать этой последовательности, преобразят существующие активы в мощности, готовые к использованию искусственного интеллекта, опередив конкурентов, все еще ожидающих разрешений на строительство новых объектов.
