Серверная комната мощностью 50 кВт выделяет тепла столько же, сколько 50 бытовых электрообогревателей, работающих на полную. Разница в том, что обогреватели можно выключить, а серверы — нет. И если тепло не уходит, оно убивает оборудование. Молча, без предупреждений, через деградацию компонентов и внезапные отказы дисков. Охлаждение ЦОД — это та часть инфраструктуры, на которой нельзя «оптимизировать бюджет». Потому что цена ошибки — не счёт за электричество, а потерянные данные и простой бизнеса.
Давайте разберёмся, как считать тепловыделение, строить воздушные потоки и подбирать кондиционирование так, чтобы серверная работала надёжно, а не превращалась в сауну с дорогим железом.
TDP (Thermal Design Power) каждого компонента указан в спецификациях, но итоговое тепловыделение серверной — это не просто сумма TDP процессоров. Считать нужно всё: CPU, GPU, память, диски, сетевое оборудование, ИБП. Причём паспортный TDP процессора — это тепловой пакет под расчётной нагрузкой, а реальное потребление при турбо-бусте или под AI-нагрузками может превышать номинал на 20–40%.
Формула расчёта полного тепловыделения выглядит так:
Q_total = (Σ P_IT) × 1.2–1.3
Где Σ P_IT — суммарная потребляемая мощность IT-оборудования, а коэффициент 1.2–1.3 — запас на пиковые нагрузки, потери в ИБП и рост парка. Этот запас — не перестраховка, а инженерная норма. ASHRAE TC 9.9 рекомендует закладывать резерв на расширение и учитывать, что реальное потребление серверов под нагрузкой отличается от idle-режима в 2–3 раза. Насколько низким окажется это idle-значение, зависит от режимов простоя процессора - как устроено потребление в простое и что им управляет, разобрано отдельно.
Вот как это работает для типичной серверной:
| Оборудование | Кол-во | Мощность (Вт) | Суммарно (кВт) |
|---|---|---|---|
| 2U серверы (2× Xeon, 512 GB RAM) | 20 | 750 | 15.0 |
| GPU-серверы (4× A100) | 4 | 2500 | 10.0 |
| СХД (дисковые полки) | 3 | 1200 | 3.6 |
| Сетевые коммутаторы | 6 | 350 | 2.1 |
| ИБП (потери) | 2 | 800 | 1.6 |
| Итого |
|
|
32.3 |
| С запасом ×1.25 |
|
|
~40 кВт |
Эти 40 кВт — тепловая нагрузка, которую системе охлаждения нужно отводить. Каждый ватт потреблённой мощности превращается в ватт тепла. Физику не обманешь.
ASHRAE TC 9.9 задаёт два диапазона для серверных помещений класса A1 (а это подавляющая часть корпоративных серверных):
| Параметр | Рекомендуемый | Допустимый |
|---|---|---|
| Температура на входе в сервер | 18–27°C | 15–32°C |
| Относительная влажность | 40–60% | 8–80% |
| Точка росы | — | макс. 17°C |
| Скорость изменения | — | ≤20°C/ч (SSD), ≤5°C/ч (HDD) |
Рекомендуемый диапазон — это зона, в которой оборудование работает с расчётным сроком службы. Допустимый — зона, где сервер не выключится аварийно, но деградация компонентов ускоряется. Разница между 25°C и 35°C на входе в сервер — это не «ну, потеплее немного». Это удвоение скорости старения конденсаторов и рост частоты отказов дисков.
Полные требования к серверной комнате включают не только температуру. Влажность ниже 20% — риск электростатических разрядов. Выше 80% — конденсат на платах. Между этими крайностями — штатная работа, но оптимум для долговечности оборудования лежит в узком коридоре 40–60%.
Идея проста: серверы втягивают воздух спереди и выбрасывают горячий сзади. Если поставить стойки лицом друг к другу — между ними образуется холодный коридор (cold aisle), куда подаётся охлаждённый воздух. Задние стороны стоек тоже смотрят друг на друга, формируя горячий коридор (hot aisle), откуда нагретый воздух возвращается к кондиционерам.
Без этого разделения горячий воздух из задней части стоек перемешивается с холодным, температура на входе в серверы растёт неравномерно, и появляются «горячие точки» — локальные зоны перегрева. Кондиционер работает на пределе, а верхние юниты в стойках всё равно перегреваются.
Организация горячих и холодных коридоров с физическим разделением (containment) — шторками, панелями, дверями — повышает эффективность охлаждения на 30% и выше. По данным Schneider Electric, горячий коридор с containment экономит до 43% затрат на охлаждение относительно холодного коридора, что соответствует снижению PUE на ~15%. Причина — горячий воздух возвращается к кондиционерам с высоким перепадом температур (до 45–47°C), и теплообменник работает эффективнее.
Типичные ошибки при организации коридоров:
Зная тепловую нагрузку, можно подобрать холодильную мощность кондиционера. Формула расчёта кондиционера для серверной привязана к двум параметрам: тепловыделение (Q) и коэффициент энергетической эффективности (COP) выбранной системы.
Q_cooling = Q_total / COP × запас
COP (Coefficient of Performance) показывает, сколько кВт тепла отводит система на каждый потреблённый кВт электроэнергии. У прецизионных кондиционеров COP обычно в диапазоне 2.5–4.0, у чиллерных систем — 3.0–5.0, у фрикулинга зимой COP может достигать 10–20 (тепло отводится «бесплатно» наружным воздухом).
Для серверной с тепловой нагрузкой 40 кВт:
| Система охлаждения | COP | Потребление охлаждения (кВт) |
|---|---|---|
| Прецизионный кондиционер (фреон) | 3.0 | ~13.3 |
| Чиллер + фанкойлы | 4.0 | ~10.0 |
| Фрикулинг (при +5°C снаружи) | 12.0 | ~3.3 |
Резервирование — отдельная тема. Схема N+1 означает, что при выходе из строя любого одного кондиционера оставшиеся справляются с полной нагрузкой. Для серверной на 40 кВт с двумя прецизионными кондиционерами по 40 кВт каждый — один работает, второй в резерве. Или три по 20 кВт, где два работают и один резервный. Второй вариант гибче, но дороже в обвязке. Тот же принцип N+1 работает и внутри самоÐ