Чиллеры для ЦОД: когда прецизионного кондиционера недостаточно

Чиллеры для ЦОД - не универсальное решение и не замена прецизионному кондиционеру по умолчанию. Это инженерный ответ на конкретные условия: высокую плотность нагрузки на стойку, большой суммарный масштаб и требования к PUE.

В статье разбираем, чем чиллерная схема отличается от DX-системы, когда переход оправдан экономически, как устроена типовая архитектура и каких ошибок проектирования стоит избегать.

ЦОД на 200 кВт ИТ-нагрузки работал годами: прецизионные кондиционеры держали +18 °С в зале, показатели тревоги не мигали. После расширения серверного парка часть стоек начала уходить в тротлинг по температуре - не из-за отказа оборудования, а из-за того, что существующая схема теплоотвода упёрлась в предел. Докупить ещё один DX-шкаф в этой ситуации - не решение, а отсрочка. Это сигнал: пора считать чиллерную схему.

Отраслевая практика фиксирует сдвиг: типовая плотность ИТ-нагрузки на стойку сместилась с 3–10 кВт к 15–30 кВт и выше - туда, где чиллеры для ЦОД становятся инженерной необходимостью, а не опцией.

Прецизионный кондиционер - это DX-система (Direct Expansion): испаритель стоит в зале, фреоновый контур замыкается на наружном конденсаторном блоке. Компрессор, клапаны, автоматика - всё в одном шкафу или в паре блоков. Шкаф типа CRAC (Computer Room Air Conditioner) работает самостоятельно, не требует центральной обвязки.

Чиллерная схема устроена иначе. Холодильная машина - собственно чиллер, выносится за пределы машинного зала: на кровлю, в технический отсек, на улицу. В зал заводится только охлаждённая вода или водно-гликолевый раствор. Там стоят шкафы CRAH (Computer Room Air Handler) - теплообменники без собственного компрессора, они просто обдувают воздух зала через охлаждённый водяной змеевик.

Общее у обоих классов: оба поддерживают точную температуру и влажность в пространстве зала. Принципиальная разница в масштабировании.

DX-схему можно нарастить только добавлением отдельных шкафов, каждый с собственным контуром. Чиллерная схема позволяет увеличивать холодопроизводительность независимо от числа CRAH-шкафов в зале: ставится чиллер большей мощности или добавляется ещё один в параллель. Это и есть ключевое преимущество там, где нагрузка растёт или плотность на стойку высокая.

При плотности 15+ кВт на стойку DX-системы с подачей холодного воздуха через фальшпол упираются в физику теплопереноса. Чтобы отвести 20 кВт от одной стойки воздухом, нужен такой объём холодного потока, который стандартные перфорированные плитки и распределительная решётка не дадут - появляются горячие карманы в верхней части стойки, процессоры начинают снижать частоту.

Решение - локализовать охлаждение: внутрирядные кондиционеры или жидкостные контуры непосредственно у источника тепла. Для внутрирядного охлаждения чиллерная схема выигрывает практически: вывести водяной контур к каждому ряду значительно проще и дешевле, чем тянуть фреоновый трубопровод с соблюдением требований по уклону и длине трассы.

При суммарной ИТ-нагрузке от 100 кВт чиллерная схема позволяет выстроить резервирование N+1 или 2N дешевле, чем дублирование шкафов DX: один резервный чиллер страхует всю группу, не нужно ставить запасной шкаф на каждый ряд.

Отдельный аргумент - фрикулинг. В климатических условиях средней полосы России наружная температура опускается ниже +8–10 °С в среднем на 3500–4500 часов в году по данным климатических справочников СП 131. В этом окне компрессор чиллера не работает или работает с минимальной нагрузкой: потребление холодильного контура в этом окне падает на 60–75%. На DX-системе режим freecooling реализовать сложнее: фреоновый контур требует иных технических решений и стоит дороже в обвязке.

Вывод для проектировщика: чиллер выгоден именно на пересечении высокой плотности и значительного масштаба. До 50 кВт суммарной ИТ-нагрузки и при плотности ниже 10 кВт/стойка прецизионный кондиционер остаётся технически и экономически оправданным выбором.

Типовая чиллерная система для корпоративного ЦОД включает четыре функциональных блока:

По способу теплосъёма на улице различают два типа: «вода-воздух» - наружный воздух охлаждает фреоновый конденсатор, стандартная схема для площадок до нескольких МВ.; «Вода-вода» - тепло отводится через градирню или сухую охладительную башню, окупается от 3–5 МВт холода за счёт испарительного охлаждения.

При плотности 30+ кВт/стойка к чиллерной обвязке добавляют контуры прямого теплосъёма: rear-door теплообменники на задней двери стойки или direct-to-chip - жидкость подводится прямо к процессорному холодовому коллектору.

Стартовые затраты на чиллерную схему на 30–60% выше, чем на DX-комплекс сопоставимой холодопроизводительности. Разница складывается из стоимости гидромодуля, насосной группы с резервированием, трубопроводной обвязки и монтажа - всего, чего нет в DX-схеме. Для ЦОД на 100 кВт ИТ-нагрузки этот разрыв в CapEx по нашему опыту проектирования составляет 3–7 млн рублей в зависимости от площадки и выбранного оборудования.

По операционным затратам картина обратная. Режим фрикулинга снижает потребление холодильного контура в холодный сезон на 60–75%, что при нагрузке 100 кВт ИТ и PUE 1.6 даёт экономию порядка 400–600 МВт·ч электроэнергии в год. На горизонте 3–5 лет эта экономия перекрывает разрыв в CapEx: проектировщик получает схему, которая и резервируется надёжнее, и дешевле в обслуживании. Для ЦОД менее 50 кВт и без перспективы роста нагрузки экономика чаще остаётся на стороне DX.

Выбор «чиллер с фреоном или водой» - в данном контексте между чиллером воздушного охлаждения и схемой с градирней определяется тремя параметрами: мощность ЦОД, климат площадки, горизонт планирования. На горизонте 7+ лет и при нагрузке от 100 кВт ИТ чиллерная схема с фрикулингом почти всегда выигрывает по совокупной стоимости владения.

Ошибки ниже повторяются в реальных проектах независимо от масштаба - от небольшого корпоративного ЦОД до площадок 500+ кВт:

Выбор между DX и чиллером - инженерное решение с четыремя переменными: плотность на стойку (граница 15 кВт), суммарная ИТ-нагрузка (граница 100 кВт), доступность фрикулинга на площадке, требования к PUE и уровню резервирования.

До 50 кВт суммарной нагрузки и при плотности ниже 10 кВт/стойка прецизионный кондиционер - рабочее решение с меньшими первоначальными вложениями и простой эксплуатацией. Выше этих порогов чиллеры для ЦОД выигрывают по TCO и гибкости масштабирования: фрикулинг снижает PUE с типичных 1.6–1.8 до 1.3 и ниже, резервирование закрывается одной резервной машиной, а наращивать мощность можно, не перекраивая компоновку зала.

Если горизонт планирования 10+ лет с ростом нагрузки, разница в CapEx отбивается на пятом году. Если горизонт 3–4 года и нагрузка стабильна - DX может оказаться экономически точнее.