Performance Rating
AMD Stream Processor
Expert Comparison
AMD Radeon Instinct MI325X значительно выигрывает по многим параметрам от старого AMD Stream Processor. MI325X имеет более мощную архитектуру CDNA 3.0, больше памяти (288 ГБ HBM3e против 1024 ГБ GDDR3), большую пропускную способность (10.3 ТБ/с против 41.47 ГБ/с) и гораздо более высокий TDP (1000 Вт против 165 Вт). MI325X также предназначен для современных задач AI и вычислений, в то время как Stream Processor устарел и лучше подходит для более простых задач.
Contents:
Memory ML Performance Compute Power Architecture & Compatibility ML Software Support Clocks & Performance Power Consumption Rendering Benchmarks AdditionalMemory
Memory Size
288
ГБ
Memory Type
Memory Bandwidth
10.3 TB/s
Memory Bus Width
ML Performance
FP16 (Half Precision)
653.7
TFLOPS
BF16 (Brain Float)
TF32 (TensorFloat)
Compute Power
FP32 (Single Precision)
81.72
TFLOPS
FP64 (Double Precision)
81.72
TFLOPS
CUDA Cores
19,456
RT Cores
Architecture & Compatibility
GPU Architecture
SM (Streaming Multiprocessor)
PCIe Version
ML Software Support
CUDA Version
CUDA Toolkit status
Clocks & Performance
Base Clock
1,000
Boost Clock
2,100
Memory Clock
+290%
2,525
Power Consumption
Recommended PSU
-68%
450 W
Power Connector
TDP/TGP
-84%
165 W
Rendering
Texture Units (TMU)
+7,500%
1,216
ROP
L2 Cache
16 MB
Benchmarks
MLPerf, llama2-70b-99.9 (Dummy)
MLPerf, llama2-70b-99.9 (fp8)
llama.cpp, llama-2-7b-Q4_0
MLPerf, mixtral-8x7b (fp8)
Additional
Slots
Release Date
Display Outputs
Renting is cheaper than buying
H100 80Gb SXM (80GB)
NVIDIA
Флагманская GPU на архитектуре Hopper с 80 ГБ памяти HBM3 в форм-факторе SXM. Создана для обучения и инференса больших языковых моделей, HPC задач. Поддерживает FP64, FP32, TF32, FP16, BF16, FP8 и INT8 вычисления с Tensor Cores 4-го поколения.
from 299.11 RUB/hour
