NVIDIA H200 SXM 141 GB

NVIDIA H200 SXM 141 GB — 141 Гб HBM3e, 16,896 ядер, GPI 67.4

Loading...

Performance Rating

The H200 SXM 141 GB is a professional graphics card by NVIDIA, launched on November 18th, 2024. Built on the 5 nm process, and based on the GH100 graphics processor, the card does not support DirectX. Since H200 SXM 141 GB does not support DirectX 11 or DirectX 12, it might not be able to run all the latest games. The GH100 graphics processor is a large chip with a die area of 814 mm² and 80,000 million transistors. It features 16896 shading units, 528 texture mapping units, and 24 ROPs. Also included are 528 tensor cores which help improve the speed of machine learning applications. NVIDIA has paired 141 GB HBM3e memory with the H200 SXM 141 GB, which are connected using a 6144-bit memory interface. The GPU is operating at a frequency of 1500 MHz, which can be boosted up to 1980 MHz, memory is running at 1593 MHz.

A100 A100
H200 H200
MI325X MI325X

NVIDIA H200 SXM 141 GB

67.4

NVIDIA H200 SXM 141 GB

67.4

Memory

Memory Size

141 GB

Memory Type

Memory Bandwidth

4.89 TB/s

Memory Bus Width

6,144 бит

ML Performance

FP16 (Half Precision)

267.6 TFLOPS

BF16 (Brain Float)

No TFLOPS
311.84 TFLOPS
(NVIDIA A800 SXM4 80 GB)

TF32 (TensorFloat)

Compute Power

FP32 (Single Precision)

66.91 TFLOPS

FP64 (Double Precision)

33.45 TFLOPS

CUDA Cores

Architecture & Compatibility

GPU Architecture

SM (Streaming Multiprocessor)

PCIe Version

PCIe 5.0 x16

ML Software Support

CUDA Version

Clocks & Performance

Base Clock

Boost Clock

Memory Clock

Power Consumption

Recommended PSU

Power Connector

8-pin EPS

TDP/TGP

700 W
unknown
(NVIDIA CMP 70HX)

Rendering

Texture Units (TMU)

L2 Cache

50 MB

Benchmarks

MLPerf, llama2-70b-99.9 (UNSET)

3 534 tokens/s
1 983 tokens/s
(AMD Radeon Instinct MI300X)

MLPerf, llama2-70b-99.9 (fp16)

3 553 tokens/s
1 740 tokens/s
(AMD Radeon Instinct MI300X)

MLPerf, llama2-70b-99.9 (fp8)

2 444 tokens/s
2 106 tokens/s
(NVIDIA H100 SXM5 94 GB)

MLPerf, llama3.1-405b (fp16)

40.8 tokens/s
34.8 tokens/s
(AMD Radeon Instinct MI300X)

MLPerf, llama3.1-405b (fp8)

25.3 tokens/s

MLPerf, llama3.1-8b (fp8)

5 161 tokens/s

MLPerf, deepseek-r1 (fp8)

1 113 tokens/s

MLPerf, mixtral-8x7b (fp8)

7 132 tokens/s
6 975 tokens/s
(AMD Radeon Instinct MI325X)

Additional

Slots

SXM Module
SXM Module
(NVIDIA B300)

Release Date

Nov. 18, 2024
March 12, 2026
(Intel Arc B770)

Display Outputs

No outputs
Portable Device Dependent
(NVIDIA GeForce RTX 5090 Mobile)

FAQ

Для каких задач подходит NVIDIA H200 SXM 141 GB?

Видеокарта NVIDIA H200 SXM 141 GB предназначена для высокопроизводительных вычислений, машинного обучения и искусственного интеллекта. Она отлично подходит для задач, требующих обработки больших объемов данных и высокой пропускной способности, таких как тренировка глубоких нейронных сетей, моделирование и анализ больших датасетов.

С какими конкурентами сравнить и чем отличается эта видеокарта?

Например, можно сравнить NVIDIA H200 SXM 141 GB с NVIDIA A100 80GB. H200 отличается более высокой пропускной способностью и большей количеством ядер, что делает его более подходящим для сложных вычислительных задач. Однако A100 может быть более экономически эффективным решением для менее интенсивных задач, особенно если речь идет о более узкой специализации.

Достаточно ли питания и охлаждения для этой карты?

Видеокарта требует мощности 700 Вт, что является высоким уровнем потребления энергии. Для обеспечения стабильной работы рекомендуется использовать блок питания не менее 1000 Вт с высокой эффективностью. В отношении охлаждения, видеокарта поддерживает жидкостное охлаждение, но также хорошо функционирует с качественным воздушным охлаждением. Убедитесь, что ваш корпус имеет достаточное количество вентиляционных отверстий для эффективного отвода тепла.

Стоит ли брать эту карту в 2025-2026 году?

Конечно, стоит рассмотреть приобретение NVIDIA H200 SXM 141 GB, особенно если вы планируете работать с задачами высокой сложности в области машинного обучения и AI. К 2025-2026 годам технологии будут развиваться, но H200 будет оставаться актуальным решением для многих задач. Однако важно учитывать, что новые поколения видеокарт могут предложить улучшенные характеристики и более доступные цены, поэтому стоит следить за рынком и новыми анонсами.

Recommendations

Эта видеокарта идеально подходит для обработки больших объемов данных в машинном обучении и AI, а также для высокопроизводительного рендеринга. Её мощные характеристики делают её незаменимой для задач, требующих обработки больших наборов данных и высокой пропускной способности.

Renting is cheaper than buying