Performance Rating
AMD Radeon Instinct MI325X outperforms NVIDIA L4 by 639.64% in the overall GPU ARK performance rating
NVIDIA L4
Expert Comparison
AMD Radeon Instinct MI325X значительно выигрывает по многим параметрам. У нее больше ядер, большая пропускная способность памяти и гораздо более высокий индекс производительности (GPI). Эта видеокарта подходит для мощных вычислений и AI-задач. NVIDIA L4, хотя и новее, но в целом слабее по характеристикам и подходит для менее требовательных задач.
Contents:
Memory ML Performance Compute Power Architecture & Compatibility ML Software Support Clocks & Performance Power Consumption Rendering Benchmarks AdditionalMemory
Memory Size
Memory Type
Memory Bandwidth
Memory Bus Width
ML Performance
FP16 (Half Precision)
BF16 (Brain Float)
TF32 (TensorFloat)
Compute Power
FP32 (Single Precision)
FP64 (Double Precision)
CUDA Cores
RT Cores
Architecture & Compatibility
GPU Architecture
SM (Streaming Multiprocessor)
PCIe Version
ML Software Support
CUDA Version
CUDA Toolkit (first supported)
CUDA Toolkit status
Clocks & Performance
Base Clock
Boost Clock
Memory Clock
Power Consumption
Recommended PSU
Power Connector
TDP/TGP
Rendering
Texture Units (TMU)
ROP
L2 Cache
Benchmarks
MLPerf, llama2-70b-99.9 (Dummy)
MLPerf, llama2-70b-99.9 (fp8)
llama.cpp, llama-2-7b-Q4_0
MLPerf, mixtral-8x7b (fp8)
Additional
Slots
Release Date
Display Outputs
Renting is cheaper than buying