NVIDIA H200 NVL

NVIDIA H200 NVL — 141 Гб HBM3e, 16 896 ядер, GPI 63,6

Загружаемся...

Оценка производительности

GPU от NVIDIA на процессоре GH100. NVIDIA H200 NVL содержит 141 Гб видеопамяти HBM3e. Шина 6144 бит, пропускная способность 4.89 TB/s. NVIDIA H200 NVL имеет 16896 CUDA ядер. 5 nm техпроцесс в TSMC. Выпущена 18.11.2024.

A100 A100
H200 H200
MI325X MI325X

NVIDIA H200 NVL

63,6

NVIDIA H200 NVL

63,6

Память

Объем памяти

141 GB

Тип памяти

Пропускная способность памяти

4.89 TB/s

Ширина шины памяти

6 144 бит
8 192 бит
(AMD Radeon Instinct MI325X)

ML-производительность

FP16 (half)

241,3 TFLOPS

BF16

Нет TFLOPS
311,84 TFLOPS
(NVIDIA A800 SXM4 80 GB)

TF32

Нет

Вычислительная мощность

FP32 (float)

60,32 TFLOPS

FP64 (double)

30,16 TFLOPS
1 166 000,0 TFLOPS
(XFX XFX QICKSILVER MagAir RX 7800 XT)

CUDA ядра

RT ядра

Архитектура и совместимость

Архитектура GPU

SM (Streaming Multiprocessor)

PCIe версия

PCIe 5.0 x16

Программная поддержка ML

CUDA версия

Частоты и производительность

Base Clock

1 365

Boost Clock

Memory Clock

1 593

Энергопотребление

Рекомендуемый БП

Разъём питания

8-pin EPS

TDP/TGP

600 W
unknown
(NVIDIA CMP 70HX)

Рендеринг

Текстурные блоки (TMU)

L2 Cache

50 MB

Бенчмарки

MLPerf, llama2-70b-99.9 (fp4)

7 436 tokens/s

MLPerf, llama3.1-405b (fp4)

130.5 tokens/s

MLPerf, deepseek-r1 (fp4)

2 327 tokens/s

Дополнительно

Слоты

Dual-slot
SXM Module
(NVIDIA B300)

Дата выпуска

18 ноября 2024 г.
12 марта 2026 г.
(Intel Arc B770)

Дисплейные порты

No outputs
Portable Device Dependent
(NVIDIA GeForce RTX 5090 Mobile)

Часто задаваемые вопросы

Для каких задач подходит NVIDIA H200 NVL?

NVIDIA H200 NVL предназначена для обработки больших объемов данных и сложных вычислений, таких как машинное обучение (ML), искусственный интеллект (AI), научные вычисления и рендеринг высокого качества. Она также может быть полезна для разработчиков и исследователей, работающих с большими наборами данных.

С какими конкурентами сравнить и чем отличается NVIDIA H200 NVL?

NVIDIA H200 NVL можно сравнить с конкурентными решениями от AMD, такими как Radeon Instinct MI250X или более недавними моделями NVIDIA, такими как A100. H200 NVL отличается более высокой пропускной способностью памяти и GPU Performance Index, что делает ее более эффективной для задач с большим объемом данных и высокими требованиями к производительности.

Достаточно ли питания и охлаждения для этой карты?

Для NVIDIA H200 NVL требуется значительное питание и мощное охлаждение. Она потребляет до 600 Вт, поэтому вам потребуется блок питания с высокой мощностью. Для охлаждения рекомендуется использовать систему с жидким охлаждением или мощную воздушную систему с несколькими вентиляторами. Убедитесь, что ваш корпус поддерживает такие решения и обеспечивает достаточное пространство для установки видеокарты.

Стоит ли брать эту карту в 2025-2026 году?

В 2025-2026 годах NVIDIA H200 NVL будет актуальной для организаций и исследовательских центров, которые требуют высокой производительности для обработки больших объемов данных. Однако стоит учитывать, что рынок быстро развивается, и новые модели могут появиться. Если вам необходима самая передовая технология сейчас, то H200 NVL будет отличным выбором. Если же вы ожидаете новых анонсов, возможно, стоит подождать и рассмотреть более новые модели.

Рекомендации

Эта видеокарта идеально подходит для задач машинного обучения и искусственного интеллекта из-за большого объема памяти (141 ГБ HBM3e) и высокой пропускной способности (4.89 TB/s). Также она хорошо справляется с рендерингом сложных графических моделей благодаря мощной архитектуре Hopper и большому количеству ядер (16896).

Арендовать дешевле, чем покупать