Жидкостное охлаждение против иммерсионного охлаждения: инженерный разбор для высокоплотных дата-центров и силовой электроники

> Краткий ответ для теплотехников и инженеров инфраструктуры: > При проведении инженерной оценки жидкостного охлаждения против иммерсионного охлаждения для вычислительных систем следующего поколения выбор зависит от баланса между способностью отводить тепловой поток и эксплуатационной ремонтопригодностью. В то время как двухфазное иммерсионное охлаждение и однофазное иммерсионное охлаждение обеспечивают высокий теоретический захват тепла за счёт полного погружения серверных плат, их коммерческое внедрение сдерживается катастрофической стоимостью жидкостей ($/литр), агрессивными экологическими запретами на ПФАС, сложным обслуживанием диэлектрической жидкости и аннулированными гарантиями OEM. Напротив, прямое жидкостное охлаждение кристалла (direct-to-chip) с использованием точно изготовленной микроканальной холодной пластины остаётся прагматичной, доминирующей архитектурой для современных процессоров мощностью 800 Вт–1200 Вт+ (например, NVIDIA H100/B200 и ИИ-ASIC). Direct-to-chip легко интегрируется в стандартные стойки 19 дюймов / OCP ORv3, оптимизирует PUE дата-центра до 1.05–1.12, сохраняет стандартную горячую замену узлов и обеспечивает значительно более низкую совокупную стоимость владения за счёт специализированного производства нестандартных холодных пластин с вакуумной пайкой и нулевой утечкой.

1. Введение: тепловая стена кремния и смерть воздушного охлаждения

Полупроводниковая отрасль официально преодолела термодинамические пределы принудительного воздушного охлаждения.

В современных корпоративных вычислениях, гипермасштабных облачных кластерах и инфраструктуре высокочастотного трейдинга (HFT) расчётная тепловая мощность (TDP) на сокет резко возросла:

• Корпоративные CPU (AMD EPYC™ 9004/9005, Intel® Xeon® 6) стабильно превышают 350–500 Вт TDP.
• Ускорители ИИ/ML (NVIDIA H100/H200 SXM5, Blackwell B200, AMD Instinct™ MI300X) работают на 700–1000 Вт+, с локальными тепловыми потоками в горячих точках, часто превышающими 100–150 Вт/см² на вычислительных кристаллах и стеках памяти с высокой пропускной способностью (HBM3e).
• Многокристальная компоновка следующего поколения (чиплеты) создаёт серьёзные неравномерные профили теплоотвода, где разность температур (ΔT) между соседними кремниевыми кристаллами должна поддерживаться ниже 5–8 °C, чтобы предотвратить физическое расслоение, вызванное термическими напряжениями, и тротлинг тактовой частоты.

При тепловых потоках свыше $80\text{ Вт/см}^2$ принудительное воздушное охлаждение сталкивается с непреодолимыми физическими ограничениями:

1. Акустические пределы и паразитные потери на прокачку: вентиляторы серверных шасси должны вращаться со скоростью 15 000–25 000 об/мин, потребляя до 15–20 % общей мощности сервера только на преодоление перепада давления в плотных рёбрах радиаторов, при этом создавая уровень шума, превышающий 85–90 дБА.
2. Узкое место теплового сопротивления: даже с парокамерами и ультраплотными рёбрами из сколотой меди кондуктивно-конвективное тепловое сопротивление ($R_{th,\text{переход-среда}}$) невозможно снизить ниже $0,08\text{ К/Вт}$, из-за чего температура перехода (T_j) превышает максимально допустимые рабочие пределы ($85^\circ\text{C}-105^\circ\text{C}$) при температуре воздуха в дата-центре ($25^\circ\text{C}-35^\circ\text{C}$).

Чтобы предотвратить катастрофический тепловой тротлинг, архитекторы оборудования должны перейти на жидкостные среды охлаждения. Объёмная теплоёмкость воды примерно в 3500 раз больше, чем у окружающего воздуха ($C_v \approx 4{,}184\text{ Дж/(см}^3\cdot\text{К)}$ против $0{,}0012\text{ Дж/(см}^3\cdot\text{К)}$), что фундаментально меняет уравнение отвода тепла.

Однако решение вопроса как применять жидкость — через холодные пластины Direct-to-Chip (D2C) или ванны полного погружения — представляет собой одно из самых критичных решений в области капитальных затрат и структуры современной инфраструктуры.

2. Определение двух парадигм

Прямое жидкостное охлаждение кристалла (D2C) (архитектура с холодной пластиной)

В архитектурах D2C тепло отводится непосредственно у основных тепловых узких мест (GPU, CPU, высоконагруженные модули памяти и силовые VRM). Высокотеплопроводные металлические теплообменники — холодные пластины — механически прижимаются непосредственно к интегрированному теплораспределителю (IHS) или непосредственно к кремниевым кристаллам через высокоэффективные теплопроводящие интерфейсные материалы (TIM, например, материалы с фазовым переходом или индиевая фольга).

• Контур охлаждающей жидкости: обработанная жидкость (как правило, деионизированная вода с ингибиторами коррозии и антимикробными добавками, например, пропиленгликоль-вода, PGW25/PGW50) прокачивается через внутренние микроканалы внутри холодной пластины, отводя тепло принудительным однофазным конвективным потоком.
• Совместимость с форм-фактором: серверы сохраняют традиционный горизонтальный стоечный форм-фактор (1U, 2U или OCP Open Rack v3). Вторичные источники тепла (маломощные сетевые адаптеры, SSD, конденсаторы) могут охлаждаться либо вторичными мини-холодными пластинами, либо низкоскоростным вспомогательным воздушным потоком в шасси (гибридное воздушно-жидкостное охлаждение).
• Блок распределения охлаждения (CDU): маршрутизация жидкости осуществляется через быстроразъёмные соединения (QDC) и стоечные коллекторы, подключённые к рядному или централизованному CDU.

Иммерсионное охлаждение (однофазное и двухфазное)

Иммерсионное охлаждение полностью устраняет целевые радиаторы и холодные пластины за счёт погружения всей активной электроники непосредственно в электрически непроводящую диэлектрическую жидкость.

• Однофазное иммерсионное охлаждение (1PIC): серверы монтируются вертикально внутри горизонтальных «ванн» или герметичных шасси, заполненных углеводородными маслами или синтетическими жидкостями. Жидкость остаётся в жидком состоянии на протяжении всего цикла, циркулируя насосами через внешние теплообменники.
• Двухфазное иммерсионное охлаждение (2PIC): серверы погружаются в специализированные низкокипящие фторхимические диэлектрические жидкости (например, с температурой кипения $50^\circ\text{C}-60^\circ\text{C}$). Тепло от кремния приводит к кипению жидкости непосредственно на поверхности чипа, при этом пузырьки пара поднимаются к охлаждаемому водой конденсатору, установленному в крышке бака, конденсируются обратно в капли жидкости и стекают в резервуар.

3. Ключевая инженерная сравнительная матрица

Таблица ниже противопоставляет оба подхода по точным механическим, тепловым, эксплуатационным и капитальным метрикам, оцениваемым теплотехниками.

4. Практическая реальность иммерсионного охлаждения: почему его масштабное внедрение в отрасли застопорилось

Несмотря на восторженные маркетинговые заявления о рекордно низких значениях PUE (<1,05), иммерсионное охлаждение постоянно сталкивается с серьёзным эксплуатационным и логистическим трением при переходе от пилотных лабораторных испытаний к коммерческим производственным средам.

4.1 Экономическая и нормативная ловушка диэлектрической жидкости

В однофазных системах стоимость жидкости не столь критична, но в двухфазном иммерсионном охлаждении (2PIC) экономика жидкости становится непомерно высокой:

• Специализированные фторированные жидкости стоят от 250 до 450 долларов за литр. Один вычислительный бак мощностью 50 кВт может потребовать 400–600 литров жидкости — что составляет 100 000–250 000 долларов только за жидкость на один бак.
• Нормативные запреты на ПФАС: регуляторные органы по всему миру (ограничения EU REACH, правила US EPA) систематически запрещают пер- и полифторалкильные вещества (ПФАС) из-за их биологической стойкости. В конце 2022 года компания 3M — доминирующий мировой производитель диэлектрических жидкостей Fluorinert™ и Novec™ — объявила о полном выходе из производства всех жидкостей на основе ПФАС к концу 2025 года. Это поставило будущую цепочку поставок двухфазного охлаждения в полный хаос, оставив дата-центры незащищёнными перед устареванием жидкостей и неконтролируемым ростом затрат на обслуживание.
• Потери на испарение: несмотря на сложные паровые прокладки, каждое вскрытие бака 2PIC при обслуживании приводит к выбросу пара. При стоимости в сотни долларов за килограмм даже незначительная дегазация или ухудшение паровых уплотнений означает десятки тысяч долларов незапланированных годовых эксплуатационных расходов.

4.2 Обслуживание и эргономика диэлектрической жидкости: проблема «макания и капель»

Операции в дата-центрах строятся на среднем времени ремонта (MTTR), измеряемом минутами. Однако реалии обслуживания диэлектрической жидкости вносят серьёзное трение в повседневные сервисные задачи:

• При прямом жидкостном охлаждении кристалла отказавший вычислительный блейд изолируется с помощью быстроразъёмных соединений с нулевой протечкой (blind-mate), выдвигается из стойки горизонтально, обслуживается на чистом антистатическом верстаке и заменяется без влияния на соседние слоты.
• В иммерсионных баках извлечение одного блейда требует использования моторизованного кран-балки. По мере подъёма блейда из горизонтального бака он должен висеть на «капельной стойке» 30–60 минут, пока углеводородное масло стекает с компонентов. Затем технический специалист должен работать с покрытыми маслом радиаторами, печатными платами и разъёмами, что создаёт риски скольжения, требует специальной промывки растворителями и высокий риск загрязнения.

4.3 Несовместимость материалов и целостность высокочастотного сигнала

Погружение материнской платы в жидкость влияет не только на температуру:

• Вымывание материалов: Некоторые диэлектрические жидкости химически вымывают пластификаторы из ленточных кабелей, растворяют эластомерные прокладки и снимают клеевые соединения с оптических приёмопередатчиков.
• Деградация высокоскоростного сигнала: Диэлектрическая жидкость изменяет диэлектрическую проницаемость ($\epsilon_r$) вокруг высокоскоростных дифференциальных линий PCIe 5.0/6.0 и Ethernet 800G. Волновые сопротивления линий, рассчитанные на 85\text{ }\Omega в воздухе, значительно падают при заполнении диэлектрическими жидкостями (\epsilon_r \approx 1{,}8 - 2{,}2$), вызывая отражения сигнала, закрытие глазковой диаграммы и увеличение коэффициента битовых ошибок (BER), если материнские платы не спроектированы с нуля для иммерсионного охлаждения.

5. Почему микроканальное охлаждение Direct-to-Chip (D2C) доминирует в высокоплотных вычислениях

Для подавляющего большинства гиперскейлеров, провайдеров колокации и высокоплотных корпоративных сред жидкостное охлаждение Direct-to-Chip (D2C) представляет собой абсолютный инженерный оптимум между тепловой эффективностью и прагматичной эксплуатацией.

5.1 Тепловая плотность свыше 1 000 Вт

Усовершенствованные микроканальные холодные пластины обходят ограничения объёмной конвекции жидкости, прогоняя охлаждающую жидкость через микронные массивы рёбер непосредственно над источником тепла.

Уменьшая ширину рёбер до $150\text{ }\mu\text{m} - 250\text{ }\mu\text{m}$ и каналов рёбер до $200\text{ }\mu\text{m}$ с соотношением сторон от $10:1$ до $15:1$, площадь смачиваемой поверхности увеличивается на порядок. Ламинарный пограничный слой постоянно разрушается, достигая коэффициентов конвективного теплообмена (h$), превышающих:

Такая производительность позволяет холодным пластинам легко удерживать температуру перехода современных GPU мощностью 1 000 Вт+ ниже $65^\circ\text{C}$ при использовании тёплых контуров водоснабжения объекта (32^\circ\text{C}-45^\circ\text{C}$, стандарты ASHRAE W3/W4), устраняя необходимость в энергоёмких чиллерах и обеспечивая корпоративный PUE от 1,05 до 1,10.

5.2 Капиталовложения и ретрофит в существующих объектах (Brownfield)

В отличие от иммерсионного охлаждения, которое требует разрывать фальшполы дата-центров, заменять бетонные плиты для выдерживания многотонных резервуаров с жидкостью и выбрасывать существующие системы горячих/холодных коридоров:

• Холодные пластины D2C устанавливаются внутри серверов стандартного форм-фактора.
• Объекты могут выполнять поэтапное развёртывание в существующей инфраструктуре: модернизация 5–10 высокоплотных ИИ-стоек внутри существующего дата-центра с воздушным охлаждением путём простой установки рядных CDU.
• Капитальные затраты (CAPEX) на мегаватт развёрнутых вычислений обычно на 30–55% ниже для D2C по сравнению с иммерсионными установками greenfield.

6. DFM-инсайты: изготовление нестандартных холодных пластин в масштабе

Создать холодную пластину, которая работает на модели симуляции, просто; выполнить серийное изготовление нестандартных холодных пластин для десятков тысяч единиц, которые прослужат 7–10 лет при непрерывной круглосуточной работе внутри мультимиллионных ИИ-суперкомпьютеров, требует жёстких стандартов прецизионного производства.

В Altus Precision наши инженерные и производственные процессы устраняют основные виды отказов высокоплотного жидкостного охлаждения:

6.1 Металлургия: бескислородная электронная медь C10100 (OFE)

Стандартная коммерческая медь (например, C11000 ETP) содержит следы кислорода, что может вызвать водородное охрупчивание во время высокотемпературных циклов пайки, создавая микроскопические граничные пустоты, которые приводят к точечным утечкам.

Altus Precision изготавливает основания холодных пластин из сертифицированной бескислородной электронной меди C10100 / C10200 (теплопроводность $\lambda \ge 391\text{ Вт/(м}\cdot\text{К)}$).

• Базовые пластины проходят прецизионную многоосную обработку поверхности на станках с ЧПУ для достижения плоскостности поверхности $<0{,}01\text{ мм}$ по площади контакта с кристаллом и шероховатости поверхности Ra < 0{,}2\text{ }\mu\text{m}.
• Это устраняет микроскопические воздушные зазоры между холодной пластиной и открытыми кремниевыми кристаллами, минимизируя контактное термосопротивление (R_{interface}) без необходимости чрезмерного давления прижима, которое может привести к трещинам в хрупких корпусах 2.5D/3D.

6.2 Геометрия микроканалов в сравнении с компромиссом по перепаду давления (\Delta P)

Частый конструктивный недостаток сторонних холодных пластин — чрезмерная оптимизация тепловой площади поверхности при создании неприемлемого гидравлического сопротивления. Падение давления свыше 50\text{ кПа} на одной холодной пластине создаёт серьёзные системные недостатки: перегружает насос CDU, увеличивает паразитную мощность на прокачку и создаёт риск дисбаланса потока в многосокетных стойках.

Наша команда термоинженеров использует CFD-управляемое внутреннее коллекторирование с многоструйным импинджмент-профилем:

• Вместо того чтобы прогонять охлаждающую жидкость через всю длину массива рёбер, она поступает через центральный паз, перпендикулярно ударяет по самой горячей центральной области кремния, раздваивается и выходит через параллельные обратные каналы.
• Это сокращает длину гидравлического пути вдвое, снижая общий перепад давления в контуре \Delta P$ на 40–60% при одновременном уменьшении градиентов температуры в горячих точках.

6.3 Вакуумная пайка против контролируемой атмосферы (CAB): императив нулевого флюса

Традиционные изготовители жидкостного охлаждения часто применяют пайку в контролируемой атмосфере (CAB) с использованием коррозионных или некоррозионных химических флюсов. В высокоплотных контурах дата-центра любые остатки флюса катастрофичны: остаточный флюс со временем разрушается, отслаивается в поток жидкости, забивает микроканалы и инициирует локализованную гальваническую питтинговую коррозию.

Стандарт Altus Precision: Мы применяем исключительно высоковакуумную пайку при давлениях от $10^{-5}$ до $10^{-6}\text{ мбар}$ с использованием никелевых (BNi) или серебросодержащих активных припоев:

• 100% без флюса: Нулевые химические загрязнения внутри проточных каналов.
• Превосходная механическая прочность: Прочность паяных соединений на сдвиг превышает 180–220 МПа, превращая крышку и основание холодной пластины в практически монолитный медный компонент.
• Устранение интерметаллической коррозии: Высокая термическая однородность по всей камере пайки предотвращает образование пустот, достигая степени покрытия пайкой >98%$ по всем уплотнительным рёбрам.

6.4 Проверка нулевой утечки: стандарт гелиевой масс-спектрометрии

Гидростатические испытания давлением (например, выдержка пластины при 10 бар в течение 30 минут) необходимы для проверки на разрыв, но совершенно недостаточны для обнаружения микротрещин, допускающих медленную миграцию жидкости в течение годовых термоциклов.

Каждая нестандартная холодная пластина Altus Precision проходит проверку на герметичность гелиевым масс-спектрометром в вакуумной камере:

• Компонент эвакуируется в вакуумной испытательной камере до $<1\text{ Па}$, внутренне создаётся давление гелия чистотой 99,999% и проводится анализ.
• Мы сертифицируем скорости утечки ниже:
  Q_утечка < 1 × 10^-9 мбар·Л/с
• При данном пороге холодная плата потребует более 3 000 лет, чтобы допустить утечку хотя бы одного кубического сантиметра газа, что гарантирует полную герметичность в серверных средах критически важного назначения.

7. Часто задаваемые вопросы (FAQ)

В1: При какой плотности мощности / TDP воздушное охлаждение окончательно перестаёт справляться и становится обязательным жидкостное охлаждение?

Ответ: Принудительное воздушное охлаждение повсеместно упирается в потолок эффективности и акустики, когда TDP отдельного чипсетного корпуса превышает 400–500 Вт, либо когда тепловой поток на уровне корпуса превышает $70 - 80\text{ Вт/см}^2$. За пределами этого порога объём медного оребрения и требуемый расход воздуха (CFM) физически не помещаются в стандартные шасси 1U, 2U или 4U. Для аппаратного обеспечения следующего поколения, такого как NVIDIA B200 (TDP 1000 Вт) или высокоплотные кластеры ASIC, жидкостное охлаждение является абсолютным физическим требованием, а не опциональной модернизацией.

В2: Могут ли существующие стандартные дата-центры с 19-дюймовыми стойками перейти на охлаждение direct-to-chip без капитальной перестройки полов?

Ответ: Да. Это одно из ключевых инженерных преимуществ жидкостного охлаждения D2C. Стандартные серверные стойки (EIA-310 19-дюймовые или OCP ORv3 21-дюймовые) могут быть адаптированы с использованием расколлекторов уровнем стойки и слепых жидкостных разъёмов. Поскольку теплоноситель остаётся замкнутым внутри компактных внутренних трубок и холодных пластин, масса стоек остаётся в пределах типичных для дата-центров нагрузок на бетонное перекрытие (1 000–1 500 кг на стойку). Для сравнения, иммерсионные ванны могут весить от 2 500 до 4 000 кг на одну footprint, что требует сейсмического крепления и конструктивного усиления полов.

В3: Что вызывает гальваническую коррозию в жидкостных контурах и как её снижает прецизионное производство холодных пластин?

Ответ: Гальваническая коррозия возникает, когда разнородные металлы со значительно различающимися электрохимическими потенциалами (например, медь и алюминий) находятся в электрическом контакте в электролите (например, в воде). Алюминий выступает в роли анода и быстро корродирует, образуя точечные сквозные отверстия и шлам, забивающий микроканалы. Altus Precision снижает этот риск, предлагая полностью медные смачиваемые проточные архитектуры (основание C10100/C11000 + медные покровные пластины, спаянные вакуумной пайкой с припоем BNi/Ag) либо нанесение беспористых диффузионных покрытий химического никелирования (ENIG) на смачиваемые алюминиевые сборки для устранения ионного переноса металла в жидкость.

В4: Как двухфазное иммерсионное охлаждение сравнивается с двухфазным direct-to-chip (испарительные холодные пластины)?

Ответ: Двухфазное охлаждение direct-to-chip использует скрытую теплоту парообразования внутри замкнутого герметичного микроканального контура холодной пластины, а не кипячение открытого теплоносителя по всему шасси. Хотя двухфазное D2C обеспечивает обработку огромных тепловых потоков ($>200\text{ Вт/см}^2$), однофазное D2C (вода-гликоль) в сочетании с оптимизированной геометрией микроканалов в настоящее время удовлетворяет $>95%$ коммерческих вычислительных потребностей вплоть до TDP 1200 Вт. Это позволяет избежать высоких рабочих давлений, сложностей с рекуперацией пара и затрат на лицензирование теплоносителя, связанных с двухфазными системами.

8. Заключение: стратегический выбор архитектуры для инженеров-теплотехников

При оценке стратегий терморегулирования для современных высокоплотных вычислительных объектов:

1. Иммерсионное охлаждение остаётся интересным выбором для узкоспециализированных периферийных установок, экстремальных условий эксплуатации (например, сильно запылённые участки без кондиционирования воздуха) или нишевых исследовательских объектов, где долговечность компонентов, скорость обслуживания и стоимость замены теплоносителя вторичны по отношению к полной изоляции корпуса.
2. Жидкостное охлаждение Direct-to-Chip (D2C) остаётся неоспоримым промышленным лидером для коммерческих ИИ-дата-центров, гипермасштабных облачных и корпоративных вычислительных систем. Оно сочетает высокую тепловую производительность (обработка >1 000 Вт+ на сокет), нулевой регуляторный риск, связанный с теплоносителем, совместимость со стандартной стоечной архитектурой и молниеносную сервис-пригодность узлов.

• Критическая переменная в успехе D2C — не вопрос, работает ли жидкостное охлаждение, а вопрос, способен ли ваш производитель холодных пластин обеспечить геометрические допуски, металлургию и герметичность соединений, необходимые для защиты критически важного кремния на протяжении многолетней эксплуатации.

Ускорьте разработку вашей тепловой архитектуры с Altus Precision

Проектируете ли вы системы охлаждения следующего поколения для высокопроизводительных процессоров, GPU или силовой электроники? Не позволяйте тепловому троттлингу или производственным дефектам снижать производительность вашего кремния.

Altus Precision сотрудничает с инженерными командами по теплоотводу по всему миру, предлагая:

• Изготовление микроканальных холодных пластин на заказ: ширина рёбер до $0,15\text{ мм}$, соотношение сторон до $15:1$, допуск плоскостности $<0,01\text{ мм}$.
• Пайка в высоком вакууме без флюса: монолитная прочность соединений без химического загрязнения.
• 100% проверка гелиевым масс-спектрометром: сертифицированные скорости утечки ниже $1 \times 10^{-9}\text{ мбар}\cdot\text{л/с}$.
• Полный DFM-анализ: комплексная тепловая, гидравлическая и конструктивная обратная связь в течение 24 часов после отправки CAD-файла.

👉 Готовы проверить свои тепловые конструкции?
Отправьте свои STP / CAD-чертежи в нашу инженерную группу по теплоотводу сегодня для комплексного DFM-обзора и предложения по изготовлению прототипа:

• Сайт: altusprecision.com
• Инженерные запросы: info@altusprecision.com
• Загрузите CAD для DFM-оценки: Запросить DFM-обзор холодной пластины