NVIDIA Tesla T4

NVIDIA Tesla T4 — 16 Гб GDDR6, 2,560 ядер, GPI 6.4

Loading...

Performance Rating

The Tesla T4 was a professional graphics card by NVIDIA, launched on September 13th, 2018. Built on the 12 nm process, and based on the TU104 graphics processor, in its TU104-895-A1 variant, the card supports DirectX 12 Ultimate. The TU104 graphics processor is a large chip with a die area of 545 mm² and 13,600 million transistors. Unlike the fully unlocked GeForce RTX 2080 SUPER, which uses the same GPU but has all 3072 shaders enabled, NVIDIA has disabled some shading units on the Tesla T4 to reach the product's target shader count. It features 2560 shading units, 160 texture mapping units, and 64 ROPs. Also included are 320 tensor cores which help improve the speed of machine learning applications. The card also has 40 raytracing acceleration cores. NVIDIA has paired 16 GB GDDR6 memory with the Tesla T4, which are connected using a 256-bit memory interface. The GPU is operating at a frequency of 585 MHz, which can be boosted up to 1590 MHz, memory is running at 1250 MHz (10 Gbps effective).

A100 A100
H200 H200
MI325X MI325X

NVIDIA Tesla T4

6.4

NVIDIA Tesla T4

6.4

Memory

Memory Size

16 GB

Memory Type

Memory Bandwidth

320.0 GB/s

Memory Bus Width

256 бит

ML Performance

FP16 (Half Precision)

65.13 TFLOPS

BF16 (Brain Float)

No TFLOPS
311.84 TFLOPS
(NVIDIA A800 SXM4 80 GB)

TF32 (TensorFloat)

Compute Power

FP32 (Single Precision)

8.141 TFLOPS

FP64 (Double Precision)

0.2544 TFLOPS

CUDA Cores

Architecture & Compatibility

GPU Architecture

SM (Streaming Multiprocessor)

PCIe Version

PCIe 3.0 x16

ML Software Support

CUDA Version

Clocks & Performance

Base Clock

Boost Clock

Memory Clock

Power Consumption

Recommended PSU

Power Connector

None

TDP/TGP

70 W
unknown
(NVIDIA CMP 70HX)

Rendering

Texture Units (TMU)

L2 Cache

Benchmarks

LLM Perf, Llama-2-7b-hf (bnb)

8.55 tokens/s

LLM Perf, Llama-2-7b-hf (gptq)

33.6 tokens/s

LLM Perf, Llama-2-7b-hf (unquantized)

16.7 tokens/s

LLM Perf, Llama-3.1-8B-Instruct (awq)

22.0 tokens/s

LLM Perf, Llama-3.1-8B-Instruct (bnb)

7.68 tokens/s

LLM Perf, Llama-3.1-8B-Instruct (gptq)

28.8 tokens/s

LLM Perf, Meta-Llama-3-8B (awq)

22.4 tokens/s

LLM Perf, Meta-Llama-3-8B (bnb)

7.96 tokens/s

LLM Perf, Meta-Llama-3-8B (gptq)

28.8 tokens/s

LLM Perf, Meta-Llama-3-8B-Instruct (awq)

22.3 tokens/s

LLM Perf, Meta-Llama-3-8B-Instruct (bnb)

7.76 tokens/s

LLM Perf, Meta-Llama-3-8B-Instruct (gptq)

29.1 tokens/s

llama.cpp, llama-2-7b-Q4_0

46.4 tokens/s
280.7 tokens/s
(NVIDIA H100 SXM5 96 GB)

LLM Perf, Mistral-7B-Instruct-v0.2 (gptq)

26.4 tokens/s

LLM Perf, Mistral-7B-v0.1 (bnb)

8.01 tokens/s

LLM Perf, Mistral-7B-v0.1 (gptq)

25.7 tokens/s

LLM Perf, Mistral-7B-v0.1 (unquantized)

15.5 tokens/s

Additional

Slots

Single-slot
SXM Module
(NVIDIA B300)

Release Date

Sept. 13, 2018
March 12, 2026
(Intel Arc B770)

Display Outputs

No outputs
Portable Device Dependent
(NVIDIA GeForce RTX 5090 Mobile)

FAQ

Для каких задач подходит NVIDIA Tesla T4?

NVIDIA Tesla T4 подходит для задач машинного обучения (ML), искусственного интеллекта (AI), виртуализации и облачных вычислений. Его производительность и энергоэффективность делают его хорошим выбором для средних нагрузок в данных областях.

С какими конкурентами сравнить и чем отличается Tesla T4?

Tesla T4 можно сравнить с GeForce RTX 2080 Ti или Quadro RTX 8000. Главное отличие Tesla T4 заключается в оптимизации для специфических задач AI и ML, а также более низком энергопотреблении по сравнению с GeForce иQuadro. Однако, он не предназначен для игровых задач.

Достаточно ли питания и охлаждения для этой карты?

Для NVIDIA Tesla T4 достаточно стандартного питания 6-pin PCIe. В плане охлаждения также достаточно простого решения, так как она потребляет всего 70 Вт. Однако, если вы планируете использовать ее в сложных условиях или для интенсивной работы, рекомендуется использовать более эффективное охлаждение и надежный источник питания.

Стоит ли брать эту карту в 2025-2026 году?

В 2025-2026 годах NVIDIA Tesla T4 может стать менее актуальной из-за развития новых моделей, таких как A100 или H100. Тем не менее, если вам нужны определенные функции AI и ML, которые не поддерживаются более современными моделями, то Tesla T4 все еще может быть полезным решением. Важно учитывать, что его цена будет ниже по сравнению с новыми моделями.

Recommendations

Эта видеокарта NVIDIA Tesla T4 идеально подходит для задач машинного обучения (ML) и искусственного интеллекта (AI), а также для рендеринга и вычислений в облаке. Она не предназначена для игр или офисных задач.

Renting is cheaper than buying