NVIDIA H100 PCIe 96 GB vs NVIDIA GeForce RTX 4090 Ti

VS

NVIDIA H100 PCIe 96 GB NVIDIA GeForce RTX 4090 Ti

AI GPU Nous avons comparé un GPU : 96GB VRAM H100 PCIe 96 GB et un GPU Plateforme de bureau: 24GB VRAM GeForce RTX 4090 Ti pour déterminer lequel offre de meilleures performances en termes de spécifications clés, de tests de référence, de consommation d'énergie, etc.

Différences principales

NVIDIA H100 PCIe 96 GB Avantages de

Plus de VRAM (96GB vs 24GB)

Bande passante VRAM plus élevée (1681GB/s vs 1152GB/s)

NVIDIA GeForce RTX 4090 Ti Avantages de

Horloge Boost a augmenté de 40% (2565MHz vs 1837MHz)

1280 cœurs de rendu supplémentaires

Consommation d'énergie plus faible (600W vs 700W)

Score

Benchmark

FP32 (flottant)

H100 PCIe 96 GB

62.08 TFLOPS

GeForce RTX 4090 Ti +50%

93.24 TFLOPS

H100 PCIe 96 GB

VS

GeForce RTX 4090 Ti

Carte graphique

mars 2023

Date de sortie

Inconnu

Tesla Hopper

Génération

GeForce 40

AI GPU

Type

Ordinateur de bureau

PCIe 5.0 x16

Interface de bus

PCIe 4.0 x16

Vitesses d'horloge

1665 MHz

Horloge de base

2325 MHz

1837 MHz

Horloge Boost

2565 MHz

1313 MHz

Horloge Mémoire

1500 MHz

Mémoire

96GB

Taille de Mémoire

24GB

HBM3

Type de Mémoire

GDDR6X

5120bit

Bus de Mémoire

384bit

1681GB/s

Bande Passante

1152GB/s

Config de rendu

132

Nombre de SM

142

-

Unités de calcul

-

16896

Unités d'Ombrage

18176

528

TMUs

568

24

ROPs

192

528

Cœurs de Tensor

568

-

Cœurs RT

142

256 KB (per SM)

Cache L1

128 KB (per SM)

50 MB

Cache L2

96 MB

Performance théorique

44.09 GPixel/s

Taux de Pixel

492.5 GPixel/s

969.9 GTexel/s

Taux de Texture

1457 GTexel/s

248.3 TFLOPS

FP16 (demi)

93.24 TFLOPS

62.08 TFLOPS

FP32 (flottant)

93.24 TFLOPS

31.04 TFLOPS

FP64 (double précision)

1457 GFLOPS

Processeur graphique

GH100

Nom du GPU

AD102

-

Variante de GPU

AD102-400-A1

Hopper

Architecture

Ada Lovelace

TSMC

Fonderie

TSMC

4 nm

Taille de processus

5 nm

80 milliard

Transistors

76.3 milliard

814 mm²

Taille de Die

609 mm²

Conception de carte

700W

TDP

600W

1100 W

Alimentation suggérée

1000 W

No outputs

Sorties

1x HDMI 2.1 3x DisplayPort 1.4a

8-pin EPS

Connecteurs d'alimentation

2x 16-pin

Fonctions graphiques

N/A

DirectX

12 Ultimate (12_2)

N/A

OpenGL

4.6

3.0

OpenCL

3.0

N/A

Vulkan

1.3

9.0

CUDA

8.9

N/A

Modèle de shader

6.7

Comparaisons GPU liées

1

NVIDIA RTX 6000 Ada Generation vs NVIDIA H100 PCIe 96 GB

2

NVIDIA L40S vs NVIDIA H100 PCIe 96 GB

3

NVIDIA H100 PCIe 96 GB vs NVIDIA GeForce RTX 4090

4

NVIDIA H100 PCIe 96 GB vs NVIDIA RTX 6000 Ada

5

NVIDIA H100 PCIe 80 GB vs NVIDIA H100 PCIe 96 GB

6

H200 SXM vs NVIDIA GeForce RTX 4090 Ti

7

NVIDIA GeForce RTX 4090 Ti vs NVIDIA RTX 5000 Ada Generation

8

NVIDIA H100 PCIe 96 GB vs NVIDIA A800 PCIe 80 GB

9

NVIDIA H100 PCIe 96 GB vs NVIDIA H800 SXM5

10

NVIDIA H100 PCIe 96 GB vs NVIDIA A800 PCIe 40 GB