Performance Rating
NVIDIA H200 SXM 141 GB
Expert Comparison
Видеокарта NVIDIA H200 SXM значительно превосходит AMD Stream Processor по многим параметрам. У нее больше памяти (141 ГБ против 1024 МБ), шина памяти шире (6144 бит против 256 бит), пропускная способность выше (4.89 ТБ/с против 41.47 ГБ/с) и большая мощность (700 Вт против 165 Вт). H200 SXM также имеет более современную архитектуру Hopper и высокую производительность в FP32 (66.91 ТФЛПС). AMD Stream Processor более старый и менее эффективный вариант для современных задач, таких как глубокое обучение и вычисления на GPU.
Contents:
Memory ML Performance Compute Power Architecture & Compatibility ML Software Support Clocks & Performance Power Consumption Rendering Benchmarks AdditionalMemory
Memory Size
141
ГБ
Memory Type
Memory Bandwidth
4.89 TB/s
Memory Bus Width
ML Performance
FP16 (Half Precision)
267.6
TFLOPS
BF16 (Brain Float)
TF32 (TensorFloat)
Compute Power
FP32 (Single Precision)
66.91
TFLOPS
FP64 (Double Precision)
33.45
TFLOPS
CUDA Cores
16,896
RT Cores
Architecture & Compatibility
GPU Architecture
SM (Streaming Multiprocessor)
132
PCIe Version
ML Software Support
CUDA Version
CUDA Toolkit (first supported)
CUDA Toolkit status
Clocks & Performance
Base Clock
1,500
Boost Clock
1,980
Memory Clock
+146%
1,593
Power Consumption
Recommended PSU
-59%
450 W
Power Connector
TDP/TGP
-76%
165 W
Rendering
Texture Units (TMU)
+3,200%
528
ROP
L2 Cache
50 MB
Benchmarks
MLPerf, llama2-70b-99.9 (UNSET)
MLPerf, llama2-70b-99.9 (fp16)
MLPerf, llama2-70b-99.9 (fp8)
MLPerf, llama3.1-405b (fp16)
MLPerf, llama3.1-405b (fp8)
MLPerf, llama3.1-8b (fp8)
MLPerf, deepseek-r1 (fp8)
MLPerf, mixtral-8x7b (fp8)
Additional
Slots
SXM Module
Release Date
Display Outputs
Rent on Intelion Cloud
Available for rent on Intelion Cloud
