NVIDIA H100 PCIe 96 GB vs NVIDIA GeForce RTX 4090

VS

NVIDIA H100 PCIe 96 GB NVIDIA GeForce RTX 4090

AI GPU Abbiamo confrontato una GPU : 96GB VRAM H100 PCIe 96 GB e una GPU Piattaforma desktop: 24GB VRAM GeForce RTX 4090 per vedere quale GPU ha migliori prestazioni nelle specifiche chiave, nei test benchmark, nel consumo energetico, ecc.

Principali differenze

NVIDIA H100 PCIe 96 GB Vantaggi

Rilasciato 6 mesi in ritardo

Più VRAM (96GB vs 24GB)

Banda VRAM più elevata (1681GB/s vs 1008GB/s)

512 core di rendering aggiuntivi

NVIDIA GeForce RTX 4090 Vantaggi

Boost Clock è aumentato del 37% (2520MHz vs 1837MHz)

Potenza termica inferiore (450W vs 700W)

Punteggio

Benchmark

FP32 (virgola mobile)

H100 PCIe 96 GB

62.08 TFLOPS

GeForce RTX 4090 +33%

82.58 TFLOPS

H100 PCIe 96 GB

VS

GeForce RTX 4090

Scheda grafica

mar 2023

Data di rilascio

set 2022

Tesla Hopper

Generazione

GeForce 40

AI GPU

Tipo

Desktop

PCIe 5.0 x16

Interfaccia bus

PCIe 4.0 x16

Velocità di clock

1665 MHz

Clock base

2235 MHz

1837 MHz

Boost Clock

2520 MHz

1313 MHz

Clock memoria

1313 MHz

Memoria

96GB

Dimensione memoria

24GB

HBM3

Tipo di memoria

GDDR6X

5120bit

Bus memoria

384bit

1681GB/s

Larghezza di banda

1008GB/s

Configurazione del rendering

132

Conteggio SM

128

-

Unità di calcolo

-

16896

Unità di ombreggiatura

16384

528

TMUs

512

24

ROPs

176

528

Core Tensor

512

-

Core RT

128

256 KB (per SM)

Cache L1

128 KB (per SM)

50 MB

Cache L2

72 MB

Prestazioni teoriche

44.09 GPixel/s

Tasso di pixel

443.5 GPixel/s

969.9 GTexel/s

Tasso di texture

1290 GTexel/s

248.3 TFLOPS

FP16 (metà)

82.58 TFLOPS

62.08 TFLOPS

FP32 (float)

82.58 TFLOPS

31.04 TFLOPS

FP64 (doppio)

1290 GFLOPS

Processore grafico

GH100

Nome GPU

AD102

-

Variante GPU

AD102-300-A1

Hopper

Architettura

Ada Lovelace

TSMC

Fonderia

TSMC

4 nm

Dimensione del processo

5 nm

80 miliardo

Transistor

76.3 miliardo

814 mm²

Dimensione del dado

609 mm²

Design della scheda

700W

TDP

450W

1100 W

PSU suggerito

850 W

No outputs

Uscite

1x HDMI 2.1 3x DisplayPort 1.4a

8-pin EPS

Connettori di alimentazione

1x 16-pin

Funzionalità grafiche

N/A

DirectX

12 Ultimate (12_2)

N/A

OpenGL

4.6

3.0

OpenCL

3.0

N/A

Vulkan

1.3

9.0

CUDA

8.9

N/A

Modello Shader

6.7

Confronti GPU correlati

1

NVIDIA RTX 6000 Ada Generation vs NVIDIA H100 PCIe 96 GB

2

NVIDIA L40S vs NVIDIA H100 PCIe 96 GB

3

NVIDIA H100 PCIe 96 GB vs NVIDIA RTX 6000 Ada

4

NVIDIA H100 PCIe 80 GB vs NVIDIA H100 PCIe 96 GB

5

NVIDIA H100 SXM5 96 GB vs NVIDIA H100 PCIe 96 GB

6

NVIDIA H100 PCIe 96 GB vs NVIDIA H100 SXM5 80 GB

7

NVIDIA GeForce RTX 4090 vs NVIDIA A100 PCIe 80 GB

8

NVIDIA H100 PCIe 96 GB vs NVIDIA H100 CNX

9

NVIDIA H100 PCIe 96 GB vs NVIDIA H800 SXM5

10

NVIDIA H100 PCIe 96 GB vs NVIDIA A800 PCIe 40 GB