Dell PowerEdge XE9680L: 8 GPU в 4U с жидкостным охлаждением

dellnvidiagpu-serversliquid-coolingh200b200

Dell PowerEdge XE9680L — попытка упаковать 8 GPU уровня H200/B200 в 4U-корпус вместо привычных 8U. Для сравнения: Supermicro SYS-821GE-TNHR, который мы разбирали ранее, занимает 8U при аналогичной конфигурации. Вдвое меньший форм-фактор — вдвое больше узлов в стойке. Но есть нюансы.

Как 8 GPU влезли в 4U

Ответ — жидкостное охлаждение. XE9680L доступен исключительно в варианте direct-to-chip liquid cooling. Воздушного охлаждения нет и не будет: при плотности 8 GPU на 4U тепловой пакет слишком велик для воздуха.

Система построена на базе платформы NVIDIA HGX. Восемь GPU в формате SXM5 объединены через NVSwitch с полносвязной NVLink-топологией — архитектура та же, что и в 8U-решениях. Dell не жертвует интерконнектом ради компактности.

Процессоры — два Intel Xeon Scalable 5-го поколения (Emerald Rapids) с TDP до 350 Вт. Оперативная память — до 4 TB DDR5 в 32 слотах.

Охлаждение

Direct-to-chip система подводит хладоноситель напрямую к холодным пластинам на GPU и CPU. Это требует инфраструктуры в дата-центре: CDU (Coolant Distribution Unit) с подводом холодной воды, трубопроводы, мониторинг утечек. Dell предлагает собственные CDU серии PowerEdge C6615, интегрированные с iDRAC для единого управления.

Тепловой пакет одного узла — около 12–15 кВт в зависимости от конфигурации GPU. На стойку 42U это потенциально 120+ кВт — территория, где без liquid cooling не обойтись физически.

Хранение и сеть

Дисковая подсистема: до 8 NVMe U.2 SSD (hot-swap) плюс 2 слота M.2 для загрузки. Сетевая часть — 8 слотов PCIe 5.0 x16 low-profile для NVIDIA ConnectX-7/BlueField-3 и выделенный слот OCP 3.0 для management-сети. Суммарная пропускная способность — до 3.2 Tbps при использовании 400GbE адаптеров.

Сравнение: 4U vs 8U

ПараметрDell XE9680L (4U)Supermicro 821GE (8U)
GPU8x SXM58x SXM5
NVLinkДа, полносвязныйДа, полносвязный
ОхлаждениеТолько жидкостноеВоздух или жидкость
Узлов в 42UДо 10До 5
GPU в стойкеДо 80До 40

Двукратная плотность — главное преимущество. При строительстве кластера на 640 GPU это 8 стоек вместо 16, что напрямую влияет на стоимость площади, охлаждения и кабельной инфраструктуры.

Кому подходит

XE9680L — для дата-центров с готовой или планируемой инфраструктурой liquid cooling. Если ДЦ рассчитан на воздушное охлаждение и переоборудование не планируется, 8U-варианты остаются более практичным выбором. Но для нового строительства или модернизации 4U-формат экономически выгоднее за счёт плотности.

Источники: