Применение методов пассивного охлаждения в серверах высокой плотности
Тепловой вызов в серверах высокой плотности
Современные центры обработки данных упаковывают все больше вычислительной мощности в каждую стойку. Серверы высокой плотности - те, которые превышают 20 кВт на стойку - предлагают исключительную производительность для ИИ, HPC и виртуализированных рабочих нагрузок, но они также генерируют интенсивные тепловые нагрузки. Без эффективного охлаждения горячие точки сокращают срок службы оборудования, вызывают дросселирование производительности и увеличивают счета за электроэнергию. В то время как активные системы охлаждения (блоки CRAC, вентиляторы, жидкие петли) доминируют в современных конструкциях, они потребляют значительное количество электроэнергии и вводят механические точки отказа. Пассивные методы охлаждения обеспечивают дополнительное - и в некоторых случаях первичное - решение, которое использует естественную физику для управления теплом, не полагаясь на движущиеся части.
Пассивное охлаждение опирается на три фундаментальных механизма теплопередачи: проводимость, конвекция и излучение. При продуманной реализации эти методы могут обрабатывать значительную часть тепловой нагрузки, снижая нагрузку на активные системы и обеспечивая более высокую плотность без пропорционального увеличения энергии. В этой статье рассматриваются основные стратегии пассивного охлаждения, их конструктивные соображения, преимущества и практическая реализация для серверных сред высокой плотности.
Понимание пассивного охлаждения против активного охлаждения
Прежде чем погрузиться в конкретные методы, важно отличить пассивное охлаждение от активного. Активное охлаждение использует устройства с питанием - вентиляторы, насосы, компрессоры - для форсирования движения тепла. Пассивное охлаждение, напротив, зависит от естественных температурных градиентов, гравитации и свойств материала. Общие пассивные подходы включают:
- Естественная конвекция: поднимается теплый воздух, остывает прохладный воздух, создавая воздушный поток без вентиляторов.
- Проводимость: тепло перемещается через твердые материалы (теплоотводы, материалы теплового интерфейса).
- Радиация: тепло рассеивается через инфракрасное излучение от поверхностей.
- Изменение фазы: такие материалы, как воск или солевые гидраты, поглощают и выделяют тепло во время плавления / консолидации.
Пассивные методы не являются двоичными — они сосуществуют с активными системами. Хорошо спроектированный центр обработки данных использует пассивные стратегии для минимизации активного использования энергии, часто достигая значений PUE ниже 1,2. Для серверов высокой плотности цель состоит в том, чтобы максимизировать пассивное удаление тепла до привлечения механического охлаждения.
Ключевые стратегии пассивного охлаждения для серверов высокой плотности
1. Горячий проход/холодный проход
Сдерживание горячего прохода/холодного прохода (HACA) является основополагающей пассивной стратегией. Серверные стойки расположены в чередующихся рядах - передние грани (холодные впуски) к одному проходу, задние выхлопы к противоположному проходу. Физические барьеры (двери, шторы, потолочные панели) отделяют горячий проход от холодного прохода, предотвращая смешивание теплого выхлопа с прохладным воздухом впуска. Это простое разделение дает значительные улучшения:
- Температура воздуха в системе подачи может повышаться на 10-15°F без воздействия на условия входа.
- Без сдерживания холодный воздух смешивается с горячим выхлопом, теряя охлаждающую способность. Содержащиеся горячие проходы позволяют возвращать воздух при более высоких температурах, повышая эффективность чиллера.
- Естественная плавучесть приводит к повышению горячего воздуха, который может быть исчерпан через потолочные отверстия снаружи или обратный пленум.
Контейнерные соображения: Сдерживание должно быть полным — зазоры под стойками, между дверями или над потолочной плиткой снижают эффективность. Датчики давления часто контролируют дифференциалы, чтобы гарантировать, что сдерживание не голодает холодные проходы. Для стойок высокой плотности (30+ кВт) обычно предпочтительнее холодное удержание прохода, поскольку оно предотвращает рециркуляции горячего воздуха и обеспечивает адекватное статическое давление при впуске сервера.
2. Естественная вентиляция
Природные вентиляционные упряжки снаружи воздуха, когда окружающие условия прохладнее, чем внутри. Этот метод наиболее эффективен в умеренном климате или в вечерние / ночные часы. Ключевые компоненты:
- Впускные жалюзи: моторизованные или фиксированные отверстия, которые позволяют охлаждать воздух на открытом воздухе.
- Выхлопные отверстия: расположены высоко на стенах или на крыше, чтобы позволить горячему воздуху подниматься и выходить.
- Фильтрация воздуха: необходима для предотвращения попадания пыли и загрязняющих веществ в серверную среду.
Например, горячий проход можно непосредственно вентилировать наружу через дымоход или вентиляционное отверстие крыши, создавая тепловой сифон, который втягивает прохладный воздух в холодный проход. Этот подход иногда называют «экономизацией воздуха», когда он полностью пассивный, хотя многие установки добавляют вентиляторы малой мощности для увеличения потока в неподвижные дни.
Ограничения: Высокая влажность, осадки и экстремальные температуры могут вызывать зависимость от активных систем. Мониторинг точки росы и уровней твердых частиц имеет важное значение. Для серверов высокой плотности естественная вентиляция редко удовлетворяет общий спрос на охлаждение — она дополняет механическое охлаждение, а не полностью заменяет его.
3. Интеграция теплоотвода
Теплоотводы являются наиболее прямым пассивным методом охлаждения на уровне компонентов. Они увеличивают площадь поверхности для конвективной теплопередачи и обеспечивают тепловой путь от процессора, графического процессора или модулей памяти. Для серверов высокой плотности радиаторы должны быть оптимизированы для конкретной среды воздушного потока:
- Геометрия финала: плотные плавники хорошо работают с принудительным воздушным потоком, но могут препятствовать естественной конвекции. Для пассивных или низкотекущих зон более широкое расстояние между плавниками (например, 4-6 мм) снижает сопротивление пограничного слоя.
- Материал: медь (≈400 Вт/м·К) против алюминия (≈200 Вт/м·К). Современные мощные чипы часто используют медную основу с алюминиевыми плавниками для балансировки стоимости и веса.
- Тепловые трубы: встроенные тепловые трубы или паровые камеры могут распространять тепло от небольшой горячей точки до более крупной решетки плавников, что позволяет пассивно рассеивать 200-500 Вт на теплоотвод в неподвижном воздухе.
В дополнение к большим теплоотводам на процессорах пассивные охладители могут применяться к регуляторам напряжения, модулям памяти и устройствам хранения. Для лопаточных серверов с минимальным внутренним потоком воздуха критически важны теплоотводы в паре с теплопроводностью на уровне шасси (например, алюминиевые рамы, действующие как большие теплораспределители).
4. Материалы фазовых изменений (ПХМ)
Материалы фазового перехода поглощают тепло при плавлении (твердый → жидкий) и выделяют тепло при затвердевании. В серверах высокой плотности PCM могут быть интегрированы в серверные корпуса или термальные хранилища уровня стойки. Ключевые приложения:
- Тепловые конденсаторы: одеяло или модуль PCM внутри сервера поглощает временные тепловые всплески (например, во время вычислительных всплесков) и выделяет тепло в периоды низкой нагрузки.
- Уровни стойки PCM: большие контейнеры, заполненные гидратом соли или парафиновым воском, помещенные в горячий проход или выше стойки, могут сглаживать колебания температуры и снижать пиковую потребность в охлаждении.
Критерии выбора: Точка плавления PCM должна быть немного ниже максимально допустимой температуры входа сервера (обычно 25-30 °C). Эффективность определяется скрытой теплоемкостью (кДж/кг) и теплопроводностью (часто плохой, требующей плавников или металлических пенопластов). Текущие исследования направлены на улучшение инкапсуляции для предотвращения утечки и усиления теплопередачи.
5. Дымоход и солнечная вентиляция
Дымоход (или тепловой стек) использует плавучесть теплого воздуха для создания естественного восходящего потока. В центре обработки данных вертикальный воздуховод, подключенный к горячему проходу, простирается над крышей. По мере того, как выхлоп сервера нагревает воздух внутри дымохода, он поднимается и вытягивает больше горячего воздуха из прохода. Это может быть дополнено солнечным дымоходом - темным цветом, выходящим на юг, который нагревается от солнечного света, увеличивая разницу температур и тяну больше воздуха. В то время как солнечный компонент вводит активный солнечный прирост, сам дымоход является пассивным.
Для сред высокой плотности может потребоваться несколько дымоходов для обработки 100 + кВт тепла. Высота и площадь поперечного сечения должны быть измерены для преодоления падения давления через выхлопные пути сервера. Дымоходы лучше всего работают в сочетании с холодным воздухом на низком уровне - классическая конструкция «эффект стека».
Дизайн-проекты для серверных комнат высокой плотности
Внедрение пассивного охлаждения в условиях высокой плотности требует тщательного монтажа и конструкции стойки:
Rack Layout и Airflow Paths
- Размещайте высокотепловые стойки (40-60 кВт) в ряд с достаточным зазором (минимум 4 фута горячего прохода, 4 фута холодного прохода), чтобы обеспечить естественный поток воздуха.
- Избегайте смешивания горячих и холодных проходов, запечатывая все отверстия кабеля, используя щеточные громметы и устанавливая блокировщики плитки пола.
- Рассмотрите поднятый пол по сравнению с плитой. Полы с плитами с воздушным охлаждением могут улучшить естественную конвекцию, если высота потолка достаточна (не менее 10 футов).
- Используйте перфорированную плитку пола только в холодных проходах и убедитесь, что плитка на открытой площадке соответствует требованиям потока воздуха сервера.
Термальная масса и строительная структура
- Бетонные полы и стены обеспечивают тепловую массу, которая ослабляет колебания температуры — структура поглощает тепло во время пиковых нагрузок и высвобождает его в более прохладные периоды.
- Найдите центр обработки данных на стене или под землей, чтобы свести к минимуму увеличение солнечного тепла.
- Изоляция стен и крыш для снижения внешних тепловых нагрузок.
Пассивные усовершенствования уровня компонентов
- Используйте высокопроводящие термоинтерфейсные материалы (TIM) между процессорами и радиаторами — например, графитовые прокладки, TIM с фазовым изменением (например, серия Honeywell PTM).
- Добавьте теплораспределители на память DIMM и SSD. Некоторые серверы высокой плотности используют заполненные жидкостью тепловые трубы, встроенные в материнскую плату, для перемещения тепла в радиатор, установленный на шасси.
- Внедрить теплообменники под полом, предназначенные для естественной конвекции (например, гидронические пассивные охлаждающие панели), которые могут дополнять охлаждение на уровне стойки.
Преимущества и рентабельность пассивного охлаждения для серверов высокой плотности
Применение пассивного охлаждения обеспечивает измеримые преимущества помимо экономии энергии:
- Снижение энергопотребления: уменьшая скорость вращения вентилятора и время работы компрессора, центры обработки данных могут сократить энергию охлаждения на 30-60%. Объект мощностью 1 МВт с использованием пассивных стратегий может сэкономить более 100 000 долларов США в год.
- Меньшее воздействие на окружающую среду: Сокращение потребления электроэнергии означает снижение выбросов углерода. Кроме того, пассивные системы требуют меньше хладагента (если исключить зависимость от чиллера).
- Повышение надежности: Меньшее количество движущихся частей означает меньше отказов. Вентиляторы и насосы являются обычными точками отказа; пассивные подходы могут работать в течение многих лет без обслуживания.
- Снижение шума: Вентиляторы, перемещающиеся по воздуху, являются основным источником шума. При пассивном воздушном потоке уровень шума падает, улучшая условия труда персонала.
- Потенциал большей плотности : Пассивные методы позволяют увеличить плотность стойки до того, как активное охлаждение станет узким местом. Несколько поставщиков облачных услуг достигли 40-50 кВт на стойку с использованием горячего узла с естественной вентиляцией, дополненной вентиляторами очень низкой мощности.
- Упрощенные системы управления: Пассивные подходы имеют меньше переменных точек — они полагаются на физику, снижая сложность программирования BMS.
Шаги реализации: от оценки к операции
Переход на пассивное охлаждение для существующих серверов высокой плотности требует поэтапного подхода.
- Тепловой аудит: Измерение температуры на входах сервера, стоек выхлопных газов и уровней потолка/пола. Выявление горячих точек и зон рециркуляции с использованием моделирования CFD или тепловизионного изображения.
- Модернизация содержания : Установите комплекты для удержания горячего или холодного прохода. Убедитесь, что все зазоры запечатаны. Испытайте дифференциальное давление на удержании.
- Оптимизация воздушного потока: Настройка перфорированных локаций плитки и открытой площади. Удалите неиспользуемые напольные плитки. Добавьте одеяла в стойки. Установите управление кабелем, чтобы избежать блокировки воздушного потока.
- Ввести пассивную вентиляцию: Если позволяет конструкция здания, добавьте впускные жалюзи и выхлопные трубы(ы). Начните с пассивной только в умеренную погоду, затем интегрируйтесь с механической системой.
- Обновление компонентных теплоотводов: Замените стандартные теплоотводы более крупными, пассивно-оптимизированными блоками, если позволяет форм-фактор сервера.
- Включите PCM: Установите модули PCM в зонах с высокой температурой (например, над горячим проходом, внутри серверного шасси для источников питания).
- Монитор и настройка: Постоянно регистрируйте температуры, скорости вентилятора и нагрузки на чиллер.Настройте удержание, вентиляционные отверстия и места PCM на основе сезонных изменений.
Проблемы и смягчения
Пассивное охлаждение не является серебряной пулей, необходимо решить следующие проблемы: