Фильтры
Сбросить

Можно ли использовать NVIDIA H100 NVL PCIe как одиночный GPU

Опубликовано 18.04.2025
4 мин
2828
Можно ли использовать NVIDIA H100 NVL PCIe как одиночный GPU  Изображение 1

В тот момент, когда решение NVIDIA H100 NVL с 188 ГБ памяти HBM3 впервые появилось на рынке, оно было представлено в промо-материалах как конфигурация с двумя картами и объединённой памятью. Уже тогда отмечалось, что по сути это две PCIe-карты, соединённые через мост NVLink. Позже, на OCP Summit 2024 (OCP Summit - ежегодное мероприятие, на котором обсуждаются последние достижения в области IT-оборудования и программного обеспечения) была показана система уже с четырьмя картами - NVIDIA H200 NVL. 

Можно ли использовать NVIDIA H100 NVL PCIe как одиночный GPU Изображение 2

При этом, в материалах профильных изданий вновь неоднокартно подчёркивалось, что карты NVL были установлены с мостами NVLink. Таким образом, возникает логичный вопрос - а могут ли эти GPU работать по отдельности, и есть ли в этом смысл? Давайте выясним.

Для AI
Новый
Gigabyte G593-ZD2-AAX1 8SFF/NVNe
CPU:
2× AMD EPYC 9005/9004 (Socket SP5 / LGA6096, cTDP до 400W, при 25°C - до 500W)
RAM:
6144GB (DDR5 ECC REG)
GPU:
8 x NVIDIA H100
Цена:

от 49 426 592 ₽

1 717 574 ₽/мес в лизинг

от 40 513 600 ₽

+ 8 912 992 НДС

Для AI
Новый
Supermicro ARS-221GL-NR 4NVMe
CPU:
2x NVIDIA Grace
RAM:
960GB (LPDDR5x)
GPU:
2 x NVIDIA H100
Цена:

от 18 864 616 ₽

655 545 ₽/мес в лизинг

от 15 462 800 ₽

+ 3 401 816 НДС

Для AI
Новый
NVIDIA DGX H100
CPU:
2x Intel Xeon Platinum 8480C (56C 105M Cache 2.00 GHz)
RAM:
32x 64GB DDR5 4800MHz
RAID:
9560-16iRAID
HDD:
8x3.84T NVMe PCIe/ 2x960Gb NVMe M.2
GPU:
NVIDIA DELTA-NEXT Vulcan SXM5 8xNVIDIA H100 640G
Цена:

от 53 156 327 ₽

1 847 182 ₽/мес в лизинг

от 43 570 760 ₽

+ 9 585 567 НДС

Для AI
Новый
Gigabyte G593-SD0-AAX1 8SFF/NVMe
CPU:
2x LGA4677 и процессоры Intel Xeon Scalable 4/5-го поколения, а также Intel Xeon CPU Max Series (dual CPU, TDP до 350W)
RAM:
8192GB (DDR5 ECC REG)
GPU:
8 x NVIDIA H100
Цена:

от 51 734 344 ₽

1 797 768 ₽/мес в лизинг

от 42 405 200 ₽

+ 9 329 144 НДС

Характеристики NVIDIA H100

Изначально версия NVIDIA H100 PCIe предлагалась с 80 ГБ памяти HBM2e. На этой карте также присутствуют разъёмы для мостов NVLink. Затем, вместе с выходом H200, PCIe-карта была обновлена до версии NVIDIA H100 NVL с 94 ГБ памяти HBM3. Это важный момент, поскольку SXM-версия H100 до сих пор ограничена 80 ГБ. Как мы упоминали выше, H100 NVL почти всегда рекламировалась как минимум в парной конфигурации. В частности, хорошим примером может служить таблица с техническими характеристиками H100.

Можно ли использовать NVIDIA H100 NVL PCIe как одиночный GPU Изображение 3

Обратите внимание: H100 NVL представлена в таблице как сразу две карты, и в подавляющем большинстве случаев её можно увидеть именно в такой конфигурации с мостами NVLink.

NVIDIA H100 NVL как одиночный GPU

Тем не менее, кажется вполне логичным, что одиночный GPU может быть весьма полезен (в особенности благодаря своей производительности) в небольшом сервере формата 1U/2U, где физически поместится одна двухслотовая PCIe-карта, но точно не сразу две с мостами. Мы решили проверить эту гипотезу, и запустить H100 NVL как одиночный GPU. В результате, мы получили вот такой вывод NVIDIA SMI (интерфейс системного управления):

Можно ли использовать NVIDIA H100 NVL PCIe как одиночный GPU Изображение 4

Всё работает именно так, как и ожидалось. Для тех, кто планирует приобрести сервер с одним GPU, версия H100 NVL точно даст значительный прирост памяти по сравнению с не-NVL версией H100. В некоторых сценариях, например, когда дело касается пропускной способности памяти или MIG-инстансов, NVL-версия даже способна превзойти SXM-версию карты при меньшем уровне энергопотребления.

Заключение

Стоит также вспомнить, что во время презентации NVIDIA GTC 2025, CEO компании Дженсен Хуанг заявил, что поколение Hopper больше не стоит покупать (в связи с развитием более мощных решений). Это может означать, что GPU семейства H100 станут доступнее на вторичном рынке, особенно с выходом обновлённой H200 NVL с 141 ГБ памяти, которой H100 уже не может составить конкуренцию. Для тех, кто ищет PCIe-карту для использования в качестве единственного GPU, H100 NVL может стать превосходным вариантом — как прямо сейчас, так и в будущем, в котором на первый план выйдет Blackwell.

Подводя итог, ещё раз упомянем, что в сети настолько много материалов, где эти карты демонстрируются исключительно в парной конфигурации, что мы решили внести ясность относительно возможности работы H100 NVL в одиночку.

Источник


Автор

СЕРВЕР МОЛЛ

Поделиться
Комментарии
(0)
Ещё не добавлено ни одного комментария
Написать комментарий
Поля, отмеченные *, обязательны для заполнения
client consultations icon-delivery discount icon-facebook franchise icon-google_plus it-solutions icon-jivosite icon-menu icon-up icon-message payment icon-recall shops-local shops-network icon-solutions icon-support tasks icon-twitter Group 8 icon-user icon-viber icon-vk icon-watsup icon-watsup-2
Мы используем файлы 'cookie', чтобы обеспечить максимальное удобство пользователям.