Охлаждение центров обработки данных ИИ в тропиках: пять проектных задач, которые нельзя игнорировать

Как тепло, влажность, ограничения водных ресурсов и внешние условия влияют на проектирование систем охлаждения

Рост плотности размещения серверов сталкивается с реалиями тропической эксплуатации: высокими температурами наружного воздуха, постоянной влажностью и растущим давлением на энергоресурсы и водные ресурсы. В этих условиях проектирование систем охлаждения выходит далеко за рамки простого выбора оборудования.

Система охлаждения, хорошо работающая при умеренных проектных условиях, может терять производительность, потреблять больше энергии или создавать риски конденсации и коррозии при эксплуатации в Сингапуре, Джохоре, Батаме и других тропических регионах. Задача заключается не просто в отводе большего количества тепла. Необходимо обеспечивать предсказуемую тепловую производительность в течение всего года, одновременно защищая ИТ-оборудование, контролируя расход ресурсов и сохраняя удобство технического обслуживания.

Пять проектных аспектов особенно важны для тропической ИИ-инфраструктуры.

1. Проектирование под пиковые условия, а не под среднегодовые значения

Тропические проекты должны проектироваться с учётом часов, создающих наибольшую нагрузку на систему охлаждения, а не только среднегодовой температуры. Наружное оборудование для отвода тепла может терять производительность при росте сухого или мокрого термометрического показателя, в то время как компрессоры, вентиляторы и насосы могут работать ближе к своим предельным возможностям.

Это влияет на выбор и номинальные характеристики чиллеров с воздушным охлаждением, установок с водяным охлаждением, сухих охладителей и адиябатических систем. Агрегат, заявленный в каталоге при стандартных условиях, может не обеспечивать ту же производительность в период максимальной температуры окружающей среды на объекте. Проектным группам следует проверять рабочие характеристики при местных пиковых условиях, ожидаемых температурах теплоносителя, высоте над уровнем моря и частичных нагрузках.

Тепловая цепь также должна быть проверена как единая система. Повышенные температуры воды в инфраструктуре могут повысить эффективность чиллера или сухого охладителя, однако доступная разность температур по-прежнему должна обеспечивать работу CDU, контура стойки и холодных пластин серверов. Запас производительности должен основываться на наиболее неблагоприятном рабочем условии, а не на наибольшем номинальном значении.

2. Контролируйте точку росы, а не только относительную влажность

Высокая влажность изменяет риск конденсации. Только относительная влажность не показывает, будет ли образовываться конденсат на холодных трубах, клапанах, коллекторах или поверхностях оборудования. Точка росы — более важный параметр управления.

Если температура охлаждающей жидкости или охлаждённой воды падает ниже точки росы окружающей среды, конденсация может образоваться даже при кажущейся нормальной комнатной температуре. Это создаёт риски в зонах теплоизоляции трубопроводов, быстросъёмных соединений, сервисных точек и оборудования, которое открывается во время технического обслуживания.

Следовательно, проектирование жидкостного охлаждения для тропического климата должно координировать температуру подаваемой охлаждающей жидкости, точку росы в помещении, толщину теплоизоляции, пароизоляционные барьеры и стратегию контроля влажности. Датчики следует размещать там, где реальный риск действительно существует, а не только в общей точке мониторинга помещения. Рабочие алгоритмы также должны предотвращать подачу излишне холодной жидкости при запуске, работе на низкой нагрузке или временной потере контроля влажности.

Стандарт тропических центров обработки данных Сингапура показывает, что более высокие рабочие температуры могут использоваться безопасно при условии измерения и управления параметрами окружающей среды. Цель — контролируемая оптимизация, а не просто повышение заданных значений.  

3. Сбалансировать энергоэффективность и расход воды

Вариант охлаждения с наименьшим электропотреблением не всегда является оптимальным решением, если он зависит от воды, доступ к которой ограничен, она дорогая или её обслуживание затруднено.

Водяные чиллеры и градирни обеспечивают высокую эффективность в жарком климате, однако требуют расхода воды, её обработки, продувки и управления паровым выбросом. Воздушные чиллеры и сухие охладители снижают прямое потребление воды, однако их энергопотребление и занимаемая площадь могут возрастать при пиковых наружных температурах. Адиабатические системы занимают промежуточное положение: вода используется только тогда, когда сухой режим не позволяет достичь требуемой температуры выходящей жидкости.

Проектные команды должны оценивать как эффективность использования электроэнергии (PUE), так и эффективность использования воды (WUE) в реалистичных условиях годовой эксплуатации. При принятии решения также следует учитывать качество воды, необходимость химической обработки, квалификацию персонала по техническому обслуживанию, местные требования к сбросу сточных вод, а также коммерческую ценность воды в период засухи или ограничений водоснабжения.

Для объектов искусственного интеллекта жидкостное охлаждение тёплой водой расширяет диапазон часов, в течение которых практично применение сухого или гибридного отвода тепла. Однако достижимые температуры зависят от технологии серверов, подхода к температуре CDU и остаточной нагрузки воздушного охлаждения.

4. Защита наружного оборудования от воздействия тропического климата

Наружное охлаждающее оборудование в Юго-Восточной Азии может подвергаться интенсивным осадкам, ультрафиолетовому излучению, воздуху, насыщенному солью, загрязняющим веществам в атмосфере и частым грозам. Эти факторы влияют на долгосрочную производительность и надёжность даже при корректном первоначальном тепловом проектировании.

Коррозия теплообменных змеевиков снижает эффективность передачи тепла и может привести к утечке хладагента или теплоносителя. Электрические корпуса, двигатели вентиляторов, датчики и панели управления требуют соответствующей защиты в зависимости от условий установки. Система водоотвода должна предотвращать скопление стоячей воды вокруг оборудования, а платформы для доступа и зоны обслуживания должны оставаться пригодными для использования во время дождя.

На побережье или в промышленных зонах следует проводить оценку коррозии, охватывающую покрытия рулонов, материалы каркаса, крепёжные элементы, трубопроводы, электрические шкафы и интервалы технического обслуживания. Защитные покрытия должны подбираться с учётом совместимости с эффективностью теплопередачи и процедурами очистки, а не только по общему индексу стойкости к коррозии.

Устойчивость к внешним воздействиям включает также защиту от молний, заземление, ветровые нагрузки, высоту над уровнем возможного затопления и безопасную изоляцию оборудования. Готовность к тропическому климату — это требование проектирования на весь жизненный цикл, а не просто один показатель IP.

5. Планирование гибридных нагрузок и режимов отказа

Жидкостное охлаждение непосредственно на чипе способно отводить значительную часть тепла от GPU, однако большинство центров обработки данных ИИ по-прежнему используют воздушное охлаждение. Память, накопители, сетевые коммутаторы, источники питания и другие компоненты могут продолжать отводить тепло в помещение.

Остаточную нагрузку от воздуха необходимо количественно определить, а не предполагать. Охлаждение по рядам, вентиляторные стены, теплообменники на задней двери шкафов или системы на уровне помещения могут по-прежнему потребоваться в зависимости от архитектуры серверов и доли тепла, захватываемой жидкостным охлаждением. Игнорирование этой нагрузки может привести к локальным «горячим точкам», даже если жидкостный контур обладает достаточной мощностью.

При проектировании также следует учитывать, что происходит при недоступности части цепочки охлаждения. Потеря теплоотвода, мощности CDU, насосной или управляющей электропитания может быстро повысить температуру компонентов в шкафах высокой плотности. Резервирование, термическая «сквозная» работа, реакция на аварийные сигналы и контролируемое выключение ИТ-оборудования должны быть определены в соответствии с требованиями бизнеса.

Гибридное охлаждение, таким образом, требует согласованной работы жидкостных и воздушных систем. Цель состоит не в максимизации возможностей одной технологии, а в обеспечении безопасной эксплуатации всей ИТ-инфраструктуры в нормальных, частичных и аварийных режимах.

Что действительно означает «охлаждение, готовое к тропическому климату»

Охлаждение, готовое к тропическому климату, достигается не за счёт увеличения мощности оборудования или добавления жидкостного охлаждения в традиционную конструкцию. Для его проектирования необходимо комплексно оценить климатические условия площадки, ИТ-нагрузку, стратегию использования воды, метод отвода тепла и рабочий диапазон.

Наиболее надёжные решения основаны на учёте местных пиковых условий, контроле точки росы, балансе энергозатрат и водопотребления, защите наружного оборудования, а также сохранении способности системы охлаждения обеспечивать остаточные воздушные нагрузки и функционировать в аварийных ситуациях. Такие решения следует принимать до окончательного определения размещения стоек, выбора оборудования централизованной системы и согласования интерфейсов площадки.

Для центров обработки данных с ИИ в Юго-Восточной Азии наиболее эффективной системой охлаждения является не та, у которой самое впечатляющее значение номинальной мощности, а та, которая сохраняет высокую эффективность, удобство технического обслуживания и предсказуемость работы в течение всего реального тропического эксплуатационного года.

References

1. Управление информационных коммуникаций и средств массовой информации. SS 697:2023 — Размещение и эксплуатация ИТ-оборудования центров обработки данных в тропическом климате.

2. Управление информационных коммуникаций и средств массовой информации. Дорожная карта «Зелёные центры обработки данных». Сингапур, 2024 г.

3. Управление строительства и городского развития и Агентство по развитию информационно-коммуникационных технологий и средств массовой информации. Зелёная маркировка BCA-IMDA для центров обработки данных, 2024 г.

4. Технический комитет ASHRAE 9.9. Тепловые рекомендации для сред обработки данных. Пятое издание, 2021 г.

5. Технический комитет ASHRAE 9.9. Рекомендации по жидкостному охлаждению для центров оборудования связи. Второе издание, 2014 г.

6. Агентство по развитию инвестиций Малайзии. Руководящие принципы устойчивого развития дата-центров. Малайзия, 2024.

7. Ассоциация телекоммуникационной отрасли. ANSI/TIA-942-C: Стандарт инфраструктуры телекоммуникаций для центров обработки данных. 2024 г.