NVIDIA H100 PCIe 96 GB vs NVIDIA GeForce RTX 4090

VS

NVIDIA H100 PCIe 96 GB NVIDIA GeForce RTX 4090

AI GPU Nous avons comparé un GPU : 96GB VRAM H100 PCIe 96 GB et un GPU Plateforme de bureau: 24GB VRAM GeForce RTX 4090 pour déterminer lequel offre de meilleures performances en termes de spécifications clés, de tests de référence, de consommation d'énergie, etc.

Différences principales

NVIDIA H100 PCIe 96 GB Avantages de

Sorti avec un retard de 6 mois

Plus de VRAM (96GB vs 24GB)

Bande passante VRAM plus élevée (1681GB/s vs 1008GB/s)

512 cœurs de rendu supplémentaires

NVIDIA GeForce RTX 4090 Avantages de

Horloge Boost a augmenté de 37% (2520MHz vs 1837MHz)

Consommation d'énergie plus faible (450W vs 700W)

Score

Benchmark

FP32 (flottant)

H100 PCIe 96 GB

62.08 TFLOPS

GeForce RTX 4090 +33%

82.58 TFLOPS

H100 PCIe 96 GB

VS

GeForce RTX 4090

Carte graphique

mars 2023

Date de sortie

sept. 2022

Tesla Hopper

Génération

GeForce 40

AI GPU

Type

Ordinateur de bureau

PCIe 5.0 x16

Interface de bus

PCIe 4.0 x16

Vitesses d'horloge

1665 MHz

Horloge de base

2235 MHz

1837 MHz

Horloge Boost

2520 MHz

1313 MHz

Horloge Mémoire

1313 MHz

Mémoire

96GB

Taille de Mémoire

24GB

HBM3

Type de Mémoire

GDDR6X

5120bit

Bus de Mémoire

384bit

1681GB/s

Bande Passante

1008GB/s

Config de rendu

132

Nombre de SM

128

-

Unités de calcul

-

16896

Unités d'Ombrage

16384

528

TMUs

512

24

ROPs

176

528

Cœurs de Tensor

512

-

Cœurs RT

128

256 KB (per SM)

Cache L1

128 KB (per SM)

50 MB

Cache L2

72 MB

Performance théorique

44.09 GPixel/s

Taux de Pixel

443.5 GPixel/s

969.9 GTexel/s

Taux de Texture

1290 GTexel/s

248.3 TFLOPS

FP16 (demi)

82.58 TFLOPS

62.08 TFLOPS

FP32 (flottant)

82.58 TFLOPS

31.04 TFLOPS

FP64 (double précision)

1290 GFLOPS

Processeur graphique

GH100

Nom du GPU

AD102

-

Variante de GPU

AD102-300-A1

Hopper

Architecture

Ada Lovelace

TSMC

Fonderie

TSMC

4 nm

Taille de processus

5 nm

80 milliard

Transistors

76.3 milliard

814 mm²

Taille de Die

609 mm²

Conception de carte

700W

TDP

450W

1100 W

Alimentation suggérée

850 W

No outputs

Sorties

1x HDMI 2.1 3x DisplayPort 1.4a

8-pin EPS

Connecteurs d'alimentation

1x 16-pin

Fonctions graphiques

N/A

DirectX

12 Ultimate (12_2)

N/A

OpenGL

4.6

3.0

OpenCL

3.0

N/A

Vulkan

1.3

9.0

CUDA

8.9

N/A

Modèle de shader

6.7

Comparaisons GPU liées

1

NVIDIA L40S vs NVIDIA H100 PCIe 96 GB

2

NVIDIA RTX 6000 Ada Generation vs NVIDIA H100 PCIe 96 GB

3

NVIDIA H100 PCIe 96 GB vs NVIDIA RTX 6000 Ada

4

NVIDIA H100 PCIe 96 GB vs NVIDIA H800 SXM5

5

NVIDIA GeForce RTX 4090 vs NVIDIA A100 PCIe 80 GB

6

NVIDIA GeForce RTX 4090 vs NVIDIA Tesla V100 PCIe 32 GB

7

NVIDIA GeForce RTX 4090 vs NVIDIA RTX 6000 Ada

8

NVIDIA H100 PCIe 96 GB vs NVIDIA H100 CNX

9

NVIDIA H100 PCIe 96 GB vs NVIDIA H800 PCIe 80 GB

10

NVIDIA H100 PCIe 96 GB vs H200 SXM