Performance Rating
AMD Radeon Instinct MI325X outperforms NVIDIA RTX 5000 Mobile Ada Generation by 466.57% in the overall GPU ARK performance rating
NVIDIA RTX 5000 Mobile Ada Generation
Expert Comparison
AMD Radeon Instinct MI325X имеет значительно более мощные характеристики, такие как большее количество ядер (19456 против 9728), большая память (288 ГБ HBM3e против 16 ГБ GDDR6) и гораздо большую пропускную способность (10.3 ТБ/с против 576 ГБ/с). Этот GPU лучше подходит для вычислительных задач и больших дата-центров. В то время как NVIDIA RTX 5000 Mobile Ada Generation, хотя и мощный, значительно уступает по параметрам и больше подходит для мобильных устройств или среднего уровня графических задач.
Contents:
Memory ML Performance Compute Power Architecture & Compatibility ML Software Support Clocks & Performance Power Consumption Rendering Benchmarks AdditionalMemory
Memory Size
+1,700%
288
ГБ
Memory Type
Memory Bandwidth
10.3 TB/s
Memory Bus Width
ML Performance
FP16 (Half Precision)
+1,489%
653.7
TFLOPS
BF16 (Brain Float)
TF32 (TensorFloat)
Compute Power
FP32 (Single Precision)
+99%
81.72
TFLOPS
FP64 (Double Precision)
+12,609%
81.72
TFLOPS
CUDA Cores
+100%
19,456
RT Cores
76
Architecture & Compatibility
GPU Architecture
SM (Streaming Multiprocessor)
76
PCIe Version
ML Software Support
CUDA Version
CUDA Toolkit (first supported)
CUDA Toolkit status
Clocks & Performance
Base Clock
+42%
1,425
Boost Clock
+1%
2,115
Memory Clock
+12%
2,525
Power Consumption
Recommended PSU
Power Connector
TDP/TGP
-88%
120 W
Rendering
Texture Units (TMU)
+300%
1,216
ROP
76
L2 Cache
+300%
64 MB
Benchmarks
MLPerf, llama2-70b-99.9 (Dummy)
MLPerf, llama2-70b-99.9 (fp8)
llama.cpp, llama-2-7b-Q4_0
MLPerf, mixtral-8x7b (fp8)
Additional
Slots
Release Date
Display Outputs
Renting is cheaper than buying
H100 80Gb SXM (80GB)
NVIDIA
Флагманская GPU на архитектуре Hopper с 80 ГБ памяти HBM3 в форм-факторе SXM. Создана для обучения и инференса больших языковых моделей, HPC задач. Поддерживает FP64, FP32, TF32, FP16, BF16, FP8 и INT8 вычисления с Tensor Cores 4-го поколения.
from 299.11 RUB/hour
