NVIDIA H100 PCIe 96 GB vs NVIDIA GeForce RTX 4090 Ti

VS

NVIDIA H100 PCIe 96 GB NVIDIA GeForce RTX 4090 Ti

AI GPU 我們比較了定位於的96GB顯存 H100 PCIe 96 GB 與定位於桌面平台的24GB顯存 GeForce RTX 4090 Ti 。您將了解兩者在主要規格、基準測試、功耗等資訊中哪個GPU具有更好的性能。

主要差異

NVIDIA H100 PCIe 96 GB 的優勢

更大的顯存 (96GB vs 24GB)

更大的顯存頻寬 (1681GB/s vs 1152GB/s)

NVIDIA GeForce RTX 4090 Ti 的優勢

最大睿頻提高40% (2565MHz vs 1837MHz)

多出1280個渲染核心

更低的TDP功耗(600W vs 700W)

評分

基準測試

FP32浮點性能

H100 PCIe 96 GB

62.08 TFLOPS

GeForce RTX 4090 Ti +50%

93.24 TFLOPS

H100 PCIe 96 GB

VS

GeForce RTX 4090 Ti

基本信息

2023年3月

發佈日期

未知

Tesla Hopper

產品系列

GeForce 40

AI GPU

類型

桌面

PCIe 5.0 x16

總線介面

PCIe 4.0 x16

時鐘速度

1665 MHz

基礎頻率

2325 MHz

1837 MHz

最大睿頻

2565 MHz

1313 MHz

顯存頻率

1500 MHz

顯存

96GB

顯存容量

24GB

HBM3

顯存類型

GDDR6X

5120bit

顯存位寬

384bit

1681GB/s

顯存帶寬

1152GB/s

渲染規格

132

GPU大核數量

142

-

計算單元

-

16896

流處理器數量

18176

528

紋理單元

568

24

光柵單元

192

528

張量核心

568

-

光追核心

142

256 KB (per SM)

一級緩存

128 KB (per SM)

50 MB

二級緩存

96 MB

理論性能

44.09 GPixel/s

像素填充率

492.5 GPixel/s

969.9 GTexel/s

紋理填充率

1457 GTexel/s

248.3 TFLOPS

FP16性能

93.24 TFLOPS

62.08 TFLOPS

FP32性能

93.24 TFLOPS

31.04 TFLOPS

FP64性能

1457 GFLOPS

圖形處理器

GH100

GPU型號

AD102

-

GPU規格

AD102-400-A1

Hopper

架構

Ada Lovelace

TSMC

晶片廠

TSMC

4 nm

晶片工藝

5 nm

800 億

晶體管數量

763 億

814 mm²

晶片面積

609 mm²

主機板設計

700W

功率消耗

600W

1100 W

建議電源功率

1000 W

No outputs

輸出介面

1x HDMI 2.1 3x DisplayPort 1.4a

8-pin EPS

電源接口

2x 16-pin

圖形特性

N/A

DirectX

12 Ultimate (12_2)

N/A

OpenGL

4.6

3.0

OpenCL

3.0

N/A

Vulkan

1.3

9.0

CUDA

8.9

N/A

Shader Model

6.7

相關GPU比較

1

NVIDIA RTX 6000 Ada Generation vs NVIDIA H100 PCIe 96 GB

2

NVIDIA L40S vs NVIDIA H100 PCIe 96 GB

3

NVIDIA H100 PCIe 96 GB vs NVIDIA GeForce RTX 4090

4

NVIDIA H100 PCIe 96 GB vs NVIDIA RTX 6000 Ada

5

NVIDIA H100 PCIe 80 GB vs NVIDIA H100 PCIe 96 GB

6

H200 SXM vs NVIDIA GeForce RTX 4090 Ti

7

NVIDIA GeForce RTX 4090 Ti vs NVIDIA RTX 5000 Ada Generation

8

NVIDIA H100 PCIe 96 GB vs NVIDIA H100 SXM5

9

NVIDIA H100 PCIe 96 GB vs NVIDIA H100 SXM5 96 GB

10

NVIDIA H100 PCIe 96 GB vs NVIDIA H100 PCIe