Когда в счёте за электричество видно, что половина уходит на кондиционеры, а не на серверы - это сигнал, что в серверной что-то не так с потоками воздуха. Простая перестановка стоек по схеме front-to-front и закрытие пустых юнитов заглушками снижают потребление кондиционирования на 20–30% - это эффект от перехода с PUE 1,7–1,8 к 1,4–1,5 без замены холодильного оборудования.
Холодный и горячий коридор - это не «модный термин», а базовая физика: горячий воздух не должен смешиваться с холодным до того, как кондиционеры его охладят. Правильно организованные коридоры снижают PUE с 1,7–2,0 до 1,4–1,6, а с изоляцией до 1,2–1,3.
Стоимость организации коридоров на порядки ниже, чем у апгрейда кондиционирования. Ниже разберём схему, расположение стоек, фальшпол и изоляцию.
Откуда взялась идея коридоров и зачем она нужна
Базовая физика проста. Серверы забирают холодный воздух спереди, выдувают горячий сзади. Если потоки смешиваются, кондиционеры подают уже частично нагретый поток - температура растёт по кругу.
Чем выше плотность стойки, тем критичнее проблема. На 3–5 кВт можно жить и без коридоров, на 10–15 кВт система кондиционирования работает в авральном режиме, и счёт растёт быстрее ИТ-нагрузки.
Сама схема разделения зон появилась в начале 2000-х как ответ на рост плотности серверов. Стало понятно: мощность охлаждения не компенсирует беспорядок в потоках.
Главный показатель эффективности ЦОД - PUE (Power Usage Effectiveness): отношение полной мощности дата-центра к мощности на ИТ-нагрузку. PUE = 1,0 - идеал. Реальные значения: 1,2 - отличный ЦОД, 1,5 - средний, 2,0+ - неэффективный. Правильные коридоры - шаг от 1,7 к 1,4 и ниже.
Как устроена схема холодный/горячий коридор: классика
Базовая схема без изоляции
Если идея коридоров - это правильное разделение потоков, его базовая реализация выглядит так. Шкафы расставляются рядами лицом к лицу (front-to-front). Перед каждым рядом образуется охлаждаемая зона - пространство, в которое подаётся холод от прецизионных кондиционеров.
За шкафами образуется горячая зона: в неё уходит нагретый поток, дальше обратно в кондиционеры. Шкафы в одном ряду стоят back-to-back с соседним. Получается чередование: холодная - ряд - горячая - ряд - холодная.
Охлаждённый воздух подаётся через фальшпол: в плитках над прохладными рядами стоят перфорированные решётки. Горячий поднимается под потолок и забирается возвратными воздуховодами.
Машины CRAC или CRAH ставят в торцах зала или по периметру. Разница между ними принципиальная: CRAC (Computer Room Air Conditioner) - это автономный кондиционер с компрессором и фреоновым контуром внутри, ставится в небольших серверных и средних ЦОД. CRAH (Computer Room Air Handler) - это теплообменник с подводом охлаждённой воды или гликоля от внешнего чиллера, применяется в крупных ЦОД с централизованной системой холодоснабжения. CRAH эффективнее по PUE на больших залах, но требует отдельного контура чиллеров. В современных проектах также применяют in-row - кондиционеры между стойками для близкого охлаждения плотных кластеров.
Изоляция горячего vs изоляция холодного
В базовой схеме без барьеров потоки всё равно частично смешиваются: часть охлаждённого проходит мимо стоек, часть нагретого возвращается обратно. Эффективность снижается.
Изоляция холодного коридора (cold aisle containment) - перекрытие сверху панелями и торцами с дверями. Охлаждённый поток не уходит «в никуда», только в стойки. Изоляция горячего коридора (hot aisle containment) - зеркальный вариант: нагретый поток идёт строго к кондиционерам, не смешиваясь с залом. По эффективности обе схемы близки. Выбор зависит от высоты потолка, наличия пожаротушения и существующей инфраструктуры.
Что нужно для правильной работы коридоров
Охлаждение серверной по схеме коридоров работает только при соблюдении инженерных деталей. Шесть пунктов, без которых эффект сводится к нулю:
- Фальшпол высотой от 60 см под среднюю плотность (5–8 кВт на стойку) и от 90 см под плотные кластеры. ANSI/TIA-942 рекомендует минимум 45 см, но это нижняя граница для стоек до 4 кВт. Для современной плотности 60 см - рабочий минимум, а 90 см и выше - норма под high-density. Под фальшполом идут трассы подачи холода, кабели, электрика.
- Перфорированные плитки в прохладных рядах. Площадь перфорации подбирают под расчётный расход для конкретной стойки: 25% - компромисс, для плотных нужны 56% и выше.
- Заглушки в стойках. Все свободные юниты закрываются глухими панелями. Открытые юниты - это утечки, через которые нагретый воздух возвращается обратно к фронту стоек и снижает эффективность всей схемы на 15–25%. Самая распространённая ошибка в эксплуатации.
- Расстановка стоек чётко front-to-front и back-to-back. Одна стойка с разворотом входа к горячей стороне ломает всю схему.
- Прецизионные кондиционеры CRAC/CRAH с управлением температурой и влажностью и резервированием N+1. Бытовые сплиты не справляются.
- Герметизация. Кабельные вводы, щели между стойками, проходы через фальшпол закрываются щёточными уплотнителями. Утечки воздуха - основная причина расхождения между расчётным и фактическим PUE.
Изоляция коридоров и холодная стена
Холодная стена и другие способы изоляции
Изоляция коридоров ЦОД - отдельная инженерная задача, под которую есть несколько схем разной стоимости и эффективности.
Холодная стена (cold wall) - конструктивное решение, при котором ряд стоек граничит с вертикальным теплообменником. Холод подаётся прямо через стену в стойки, минуя общий зал. Эффективная схема для плотных стоек: PUE 1,15–1,2. Когда плотность стойки переваливает за 10–12 кВт, обычной перфорации в фальшполе уже не хватает - расход воздуха не дотягивает до проектного. В таких случаях разумно сразу закладывать холодную стену для серверной: она подаёт воздух напрямую к стойкам через вертикальный теплообменник, минуя ограничения фальшпола.
Cold aisle containment - более простая схема: над охлаждённой зоной ставится крышка, торцы закрываются дверями. Подходит для средней плотности (5–10 кВт на стойку): дешевле холодной стены, гибче в монтаже.
Hot aisle containment - зеркальный вариант: горячий проход накрывается и подключается воздуховодами к кондиционерам. Подходит, когда потолок низкий или пожаротушение требует изоляции горячих зон.
Что выбрать под плотность:
- До 5 кВт на стойку - можно без изоляции, важна только правильная расстановка и герметизация;
- 5–10 кВт - cold или hot aisle containment, разница в монтаже;
- 10–20 кВт - холодная стена, фальшпол уже не справляется с расходом воздуха;
- Выше 20 кВт - переход на DLC и жидкостное охлаждение, воздух физически не отводит столько тепла.
Эффект: насколько коридоры реально снижают PUE
PUE ЦОД - основная метрика, которая показывает результат коридорной схемы в цифрах. Без коридоров, со смешением потоков, типичный PUE 1,7–2,0: на каждый ватт ИТ-нагрузки тратится почти столько же на охлаждение и инженерку.
С базовыми коридорами без изоляции - правильная расстановка, заглушки, перфорация под нагрузку, PUE падает до 1,4–1,6. Это те самые 25–30% экономии на счёте за кондиционирование, с которых статья начиналась: эффект достигается без замены оборудования, только за счёт расстановки и герметизации.
С полной изоляцией PUE падает до 1,2–1,3 - уровень современных коммерческих ЦОД. С холодной стеной - 1,15–1,2, уровень флагманских площадок. Дальше - только жидкостное охлаждение.
В денежном эквиваленте: для стойки 5 кВт переход с PUE 1,8 до 1,4 даёт экономию около 17 500 кВт·ч в год на стойку. На зал из 50 стоек окупаемость изоляции коридоров в районе 1–2 лет. Все цифры ориентировочные: реальный PUE зависит от климата, проекта и сезонности.
Чего не делать при организации коридоров
Пять антипаттернов, на которых эффект коридоров сводится к нулю:
- Оставлять свободные юниты без заглушек. Каждая «дыра» - это утечка охлаждённого воздуха и заброс нагретого. На зале из 50 стоек с дюжиной открытых юнитов это десятки процентов потерь.
- Разворачивать отдельные стойки «не как все». Одна стойка с разворотом фронта к нагретой стороне переводит весь ряд в авральный режим.
- Игнорировать утечки. Кабельные вводы, проходы через фальшпол, щели - щёточные уплотнители стоят копейки, экономия видна сразу.
- Подавать одинаковый расход воздуха на все ряды. Если в одном ряду плотные ИИ-серверы по 15 кВт, а в другом обычные 5 кВт - расход должен быть разным.
- Закрывать пути возврата воздуха. Если фальшпол высокий, но возвратные воздуховоды узкие, нагретая масса накапливается в зале.
Когда коридоры уже не помогают
При плотности стойки выше 20 кВт отвести столько тепла воздушной схемой можно, но это требует огромного расхода воздуха и шумных вентиляторов. Эффективность падает, шум растёт.
Переход на жидкостное охлаждение - DLC (Direct Liquid Cooling) или иммерсия, становится единственным разумным вариантом. Жидкость отводит тепло в десятки раз эффективнее газовой среды, и при плотности 30+ кВт на стойку альтернатив нет.
Промежуточный гибрид - воздух плюс RDHX (теплообменники задней двери): серверы работают на воздухе, но нагретый поток охлаждается жидкостным радиатором двери. Решение для плотности 15–25 кВт.
Заключение
Правильно организованные холодный и горячий коридоры - самое дешёвое улучшение PUE из всех инженерных решений при условии корректной исходной расстановки стоек и адекватной работы кондиционирования. Если в зале хаотичная расстановка, протекающие фальшполы и старые сплит-системы, ни одна изоляция не вытянет, сначала наводят порядок в базе, потом считают эффект. На правильной базе эффект от организации коридоров - 25–40% по электричеству на охлаждение, окупаемость 1–2 года, без апгрейда оборудования.
Изоляция и холодная стена нужны при росте плотности стойки. Без разделения потоков современный ЦОД уже не строят, но и одной такой схемы на плотности 20+ кВт мало. Когда коридоры спроектированы правильно и плотность в норме, дальше - это вопрос правильно подобранного оборудования для охлаждения ЦОД: прецизионные кондиционеры, чиллеры, теплообменники подбираются под суммарную нагрузку и желаемый PUE, а не покупаются отдельными позициями.
