Инновации в жидком охлаждении для энергоблоков высокой мощности
Тепловой вызов в высокоплотных энергетических системах
Высокоэнергетические блоки питания (ПГУ) стали незаменимыми в центрах обработки данных, высокопроизводительных вычислительных кластерах (HPC), фермах по добыче криптовалюты и даже энтузиастских игровых системах. По мере того, как плотность мощности кремния продолжает расти, а стандарты эффективности ужесточаются, тепло, генерируемое современными многокиловаттными ПГУ, опережает возможности традиционного воздушного охлаждения на основе вентиляторов. ПГУ мощностью 3 кВт или 5 кВт, работающее с эффективностью 96%, все еще рассеивает отработанное тепло на уровне 120-200 Вт, что достаточно для повышения внутренней температуры окружающей среды далеко за пределы безопасных эксплуатационных ограничений, если его не остановить. Это тепло, если его не остановить, ускоряет старение электролитических конденсаторов, ухудшает производительность коммутации MOSFET и может даже вызвать тепловые отключения во время пиковых нагрузок. Жидкое охлаждение напрямую устраняет эти ограничения, используя высокую удельную тепловую мощность и теплопроводность жидкостей - обычно воды или инженерных диэлектрических жидкостей - для достижения скорости рассеивания тепла, которая на по
Необходимость передовых решений охлаждения
Почему охлаждение воздуха падает
Обычное воздушное охлаждение зависит от принудительной конвекции: вентиляторы проталкивают воздух через плавники, прикрепленные к горячим компонентам PSU. При уровнях мощности более 2 кВт требуемый объем воздушного потока становится настолько большим, что плотность плавников должна резко увеличиваться, что повышает акустический шум (часто превышающий 60 дБА в серверных комнатах) и требует больших диаметров вентиляторов. Что более важно, воздух имеет низкую теплопроводность (~ 0,026 Вт / м·К) и плохую удельную теплоемкость (~ 1,005 кДж / кг · К); перемещая большие объемы воздуха просто не может удалять тепло так же эффективно, как жидкий охлаждающий агент с теплопроводностью около 0,6 Вт / м·К и удельное тепло 4,18 кДж / кг·К (для воды). Этот фундаментальный физический разрыв заставляет дизайнеров либо чрезмерно увеличивать теплоотводы, либо уменьшать плотность мощности - оба нежелательных компромиссов для современных, ограниченных пространством установок.
Термическая плотность и эффективность
Высокомощные ПГУ в центрах обработки данных часто работают при частичных нагрузках для удовлетворения требований к избыточности (например, N + 1 ). При охлаждении воздуха эти блоки снижают максимальную мощность при повышении температуры окружающей среды выше 40 ° C - обычная реальность в серверных проходах. На каждые 10 ° C повышение температуры окружающей среды надежность алюминиевых электролитических конденсаторов обычно вдвое, а эффективность ПГУ падает на 0,5-1 процентный пункт. Жидкостное охлаждение, напротив, поддерживает температуру компонентов в узком окне (например, 50-60 ° C) независимо от колебаний окружающей среды, сохраняя полную номинальную мощность и максимизируя отдачу от капитальных инвестиций.
Шум и ограничения акустики
В помещениях, где занятость человека является проблемой, таких как исследовательские лаборатории или высококлассные аудиостудии, правила шума часто ограничивают шум вентилятора на 45 дБА. Охлаждение воздуха на 4 кВт PSU достаточно тихо, чтобы соответствовать этому пределу, чрезвычайно сложно без массивных, дорогих радиаторов. Жидкие системы охлаждения, особенно те, которые включают внешние радиаторы или охлажденные водяные петли, могут тихо разгружать тепло, иногда даже без вентиляторов внутри корпуса PSU. Это акустическое преимущество стимулирует принятие в шумочувствительных средах.
Последние инновации в жидком охлаждении для ПГУ
Технологии охлаждения Immersion
Однофазное погружение
Однофазное погружение охлаждает всю ПГУ в диэлектрической жидкости, которая остается в жидком состоянии на протяжении всей работы. Последние инновации включают в себя высокоэффективные инженерные жидкости на основе эфиров, углеводородов или фторуглеродов с теплопроводностью, превышающей 0,2 Вт/мк и высокой диэлектрической прочностью (выше 40 кВ/мм. В отличие от более ранних минеральных масел, современные жидкости сопротивляются окислению при повышенных температурах (до 200 °C) и имеют низкую вязкость, что улучшает естественную конвекцию. Ведущие решения, такие как предлагаемые Submer используют однофазное погружение с интеллектуальными циркуляционными насосами, которые поддерживают температуру соединения ПГУ ниже 85 °C даже при нагрузках 6 кВт. Устранение вентиляторов уменьшает вибрационный отказ в паяльных соединениях и увеличивает среднее время между отказами (MTBF) на 30-50% по сравнению с эквивалентами с воздушны
Двухфазное погружение
Двухфазное погружение еще больше охлаждает, используя диэлектрическую жидкость, которая кипит при рабочей температуре ПГУ. По мере испарения жидкости она поглощает большое количество скрытого тепла (обычно 100-200 кДж / кг), затем конденсируется на охлажденной конденсаторной катушке над ванной. Результатом является самонакачивание, высокооднородный механизм удаления тепла. Недавние достижения в фторокетонах с низким глобальным потеплением (GWP) и фторированных жидкостях сделали двухфазное погружение жизнеспособным для ПГУ в граничных вычислениях и базовых станциях 5G, где ограничена инфраструктура пространства и воды. Фаза пара также устраняет сопротивление пограничного слоя, позволяя тепловые потоки до 100 Вт / см2 - далеко за пределами того, что может управлять воздухом или однофазными жидкостями.
Закрытый цикл и прямое охлаждение жидкостей
Вместо того, чтобы погружать весь блок, системы с замкнутым контуром прикрепляют холодные пластины непосредственно к самым горячим компонентам - обычно первичным боковым MOSFET, выпрямительным диодам и магнитным компонентам.
- Микроканальные холодные пластины с шириной канала до 200 мкм, которые увеличивают отношение поверхности к объему и повышают конвективные коэффициенты теплопередачи. Недавние исследования из Национальной лаборатории Ок-Риджа продемонстрировали, что микроканальные холодные пластины могут снизить термостойкость перехода к жидкости ниже 0,05 °C/W для модуля питания мощностью 3 кВт.
- Миниатюрные диафрагменные насосы с электронно-коммутированными двигателями, которые обеспечивают точные скорости потока (0,5-5 л/мин) при потреблении менее 2 Вт мощности. Эти насосы могут быть интегрированы внутри шасси PSU, обеспечивая автономные контуры жидкостного охлаждения, которые требуют только внешнего радиатора или соединения охлаждаемой воды с оборудованием.
- Умные регуляторы потока и датчики температуры, которые используют алгоритмы PID для модуляции скорости насоса и положения обходного клапана в режиме реального времени. Когда PSU работает в режиме холостого хода, контроллер уменьшает циркуляцию до почти нуля, экономя энергию и продлевая срок службы насоса. При внезапных всплесках нагрузки (например, рендеринг GPU или разрыв базы данных) он увеличивает поток в течение миллисекунд, чтобы предотвратить перерасход тепла.
Также появляются гибридные конструкции, сочетающие погружение основной стороны с воздушным охлаждением конденсаторов вторичной стороны, балансируя стоимость и производительность.
Преимущества современного жидкого охлаждения для ПГУ
Улучшенная производительность под пиковыми нагрузками
Жидкостные ПГУ поддерживают регулирование выходного напряжения и подавление ряби даже во время импульсов нагрузки 100%. Поскольку жидкость содержит большой тепловой резервуар, переходные температурные экскурсии постоянно влажняются - МОПЭТ остаются в пределах своей безопасной рабочей зоны (SOA). Напротив, блоки с воздушным охлаждением часто заглушают обратную мощность (например, от 3 кВт до 2,5 кВт) после нескольких минут полной нагрузки из-за нагрева. Независимые испытания показали, что ПГУ с жидкостным охлаждением 4 кВт может выдерживать 4 кВт неограниченно в среде 45 ° C, тогда как эквивалент с воздушным охлаждением разрушает до 3,2 кВт всего через 90 секунд.
Повышение надежности и продление срока службы
Единственным крупнейшим драйвером отказа ПГУ является тепловой цикл. Каждый перепад температуры 10-20 °C ускоряет усталость припоя и высыхание конденсатора. Жидкое охлаждение сохраняет внутренние температуры стабильными в пределах ± 2 °C заданной точки, даже во время суточных изменений окружающей среды или сброса нагрузки. Данные поля из крупномасштабных центров обработки данных с погружением (таких как те, которые управляются LiquidStack ) показывают, что частота отказа ПГУ падает на 60-70% по сравнению с установками с воздушным охлаждением, а средняя продолжительность жизни простирается от 5 лет до более 10 лет. Кроме того, отсутствие вибрации, вызванной вентилятором, устраняет механический износ соединителей и трансформаторов.
Энергоэффективность и общая стоимость владения
В то время как сама петля жидкого охлаждения потребляет энергию (насосы, чиллеры), общая энергоэффективность установки улучшается по нескольким причинам:
- Инфраструктура охлаждения ЦОД (блоки CRAC, вентиляторы) может быть уменьшена, потому что отработанное тепло PSU захватывается непосредственно у источника и отбрасывается в высокотемпературную жидкостную петлю.
- Насосы намного эффективнее, чем вентиляторы для того же теплоотвода: насос мощностью 10 Вт может перемещать столько же тепловой энергии, сколько 50-100 Вт мощности вентилятора.
- Отработанное тепло может быть восстановлено для отопления здания или горячей воды, повышая значения PUE (эффективность использования энергии) ниже 1,2 во многих развертываниях. На каждые 1 кВт потерь PSU жидкое охлаждение позволяет использовать до 0,8 кВт полезного тепла.
Общая стоимость владения (TCO) в течение 10-летнего горизонта обычно благоприятствует жидкостному охлаждению для установок мощностью более 10 кВт, учитывая экономию на электроэнергии, обслуживании и замене оборудования.
Компактный дизайн и плотность более высокой мощности
Устраняя громоздкие радиаторы и высокоскоростные вентиляторы, жидкостное охлаждение позволяет ПГУ уменьшаться в объеме на 30-50% при одновременном увеличении выходной мощности. Это особенно ценно в лопаточных серверах, модульных системах ИБП и зарядных устройствах электромобилей, где имеет значение каждый кубический дюйм. Жидкостно-охлажденный ПГУ 4,8 кВт от ведущего производителя (]Artesyn Embedded Technologies) занимает тот же 1U высоту, что и блок воздушного охлаждения 2,5 кВт, эффективно удваивая плотность мощности.
Проблемы и смягчения последствий осуществления
Риск утечки и совместимость с жидкостью
Основным барьером для широкого внедрения жидкого охлаждения является предполагаемый риск утечки охлаждающей жидкости, повреждающей электронику. Современные системы решают эту проблему с помощью нескольких слоев защиты: двухстенные трубки, датчики обнаружения утечки и предохранительные клапаны насоса. Диэлектрические жидкости выбираются как непроводящие и не коррозионные; они не вызывают коротких замыканий, даже если они объединяются на платах. Тем не менее, производители должны обеспечить, чтобы все материалы (конструкции, уплотнения, изоляция проводов) совместимы с выбранным охлаждающим веществом - этиленгликоль / смеси воды могут набухать определенные эластомеры, в то время как некоторые эфиры атакуют разъемы поликарбоната. Правильный выбор материала и испытание давления при рабочем давлении 2 × стандартны.
Сложность обслуживания
Системы замкнутого цикла требуют периодических проверок уровня охлаждающей жидкости и периодической замены (каждые 3-5 лет) для поддержания антикоррозионных добавок. Погружение резервуаров нуждается в фильтрации для удаления загрязнения твердыми частицами, а диэлектрическая жидкость может со временем ухудшаться из-за окисления. Однако современные герметичные петли с фильтроваторами и клапанами передышки сокращают интервалы обслуживания до ежегодных или двухгодичных посещений, что сопоставимо с заменой воздушных фильтров в системах с воздушным охлаждением. Некоторые поставщики теперь предлагают автоматические системы пополнения охлаждающей жидкости, которые извлекают из центрального резервуара, еще больше снижая эксплуатационные расходы.
Первоначальные затраты и задачи модернизации
Предварительная премия за жидкостное охлаждение - готовые ПГУ обычно на 20-40% выше, чем эквиваленты с воздушным охлаждением. Для центров обработки данных в зеленом поле эта премия компенсируется экономией в инфраструктуре охлаждения, поднятых полах и электропроводке. Обновление существующих ПГУ, установленных на стойке, сложнее, потому что в корпусе может отсутствовать водопроводные соединения и точки крепления для холодных пластин. Такие решения, как внешние теплообменники с жидкостью в воздух, которые крепятся к задней двери стойки, позволяют постепенно внедрять без замены каждого ПГУ.
Будущие направления
Диэлектрические жидкости следующего поколения
Исследователи активно разрабатывают наножидкости — диэлектрические жидкости, наполненные наночастицами, такими как графен или глинозем, — которые могут повысить теплопроводность на 20-50%, не влияя на электрическую изоляцию. Ранние прототипы из Управления автомобильных технологий Министерства энергетики США показывают перспективы для бортовых источников питания в электромобилях, где ограничения пространства и веса являются экстремальными. Одновременно эфиры биопроизводства из растительных масел тестируются как недорогие, биоразлагаемые альтернативы синтетическим жидкостям.
Оптимизированное для ИИ управление теплом
Алгоритмы машинного обучения могут прогнозировать модели нагрузки (например, ежедневную обработку партии на складе, циклы добычи графического процессора) и предварительно отрегулировать скорость потока охлаждающей жидкости, скорости насоса и кривые вентилятора конденсатора, чтобы минимизировать потребление энергии при сохранении температур в безопасных пределах. Раннее развертывание в гипермасштабных центрах обработки данных продемонстрировало 15-20% дополнительной экономии энергии за пределами управления на основе PID. Интеграция цифровых двойников - виртуальных копий теплового поведения PSU - позволяет имитировать то, что если и проактивное планирование обслуживания.
Стандартизация и принятие промышленности
Такие организации, как Open Compute Project (OCP) (FLT:0) (OCP) (FLT:1) в настоящее время определяют стандартные интерфейсы для PSU с жидкостным охлаждением, включая быстроразъемные фитинги, обычные холодные пластины и протоколы связи для управления насосом / клапаном. Эти стандарты уменьшат затраты на интеграцию и побудят больше производителей предлагать варианты с жидкостным охлаждением. Поскольку гипермасштаберы, такие как Microsoft и Google, продолжают развертывать жидкостное охлаждение в масштабе, вполне вероятно, что жидкостное охлаждение станет по умолчанию для любого PSU с номинальной мощностью выше 3 кВт в течение следующих пяти лет.
Двухфазная прямая инъекция
Новая концепция предполагает введение двухфазной диэлектрической охлаждающей жидкости непосредственно в путь воздушного потока ПГУ в туманной форме. Капли испаряются при контакте с горячими поверхностями, затем пар конденсируется и рециркулируется. Этот подход сочетает в себе простоту жидкой петли с минимальным следом распылительного охлаждения, и ранние прототипы в Институте Фраунгофера сообщают о коэффициентах теплопередачи, превышающих 10 000 Вт / м2 · К - намного выше, чем обычные холодные пластины.
Заключение
Жидкостное охлаждение перешло от нишевого решения для суперкомпьютеров к практическому, все более экономичному методу управления тепловой выходной мощностью мощных ПГУ в центрах обработки данных, промышленном оборудовании и высокопроизводительных вычислительных средах. Достижения в погружениях, микроканальных холодных пластинах, интеллектуальных элементах управления и совместимости материалов устранили многие исторические барьеры для принятия. Результатом является технология охлаждения, которая не только сохраняет производительность и надежность, но и обеспечивает более высокую плотность мощности, более низкий уровень шума и улучшенную общую энергоэффективность. По мере того, как усилия по стандартизации становятся зрелыми и оптимизация на основе ИИ становится обычным явлением, жидкое охлаждение становится стандартной стратегией управления тепловой энергией для любого приложения, где плотность мощности превышает 2 кВт на единицу - погружение в новую эру высокоэффективной, устойчивой доставки энергии.