NVIDIA H100 PCIe 96 GB vs NVIDIA GeForce RTX 4090 Ti

VS

NVIDIA H100 PCIe 96 GB NVIDIA GeForce RTX 4090 Ti

AI GPU 주요 사양, 벤치마크 테스트, 전력 소비 등을 기준으로 두 개의 GPU와 데스크톱 플랫폼 GPU를 비교했습니다. 96GB VRAM H100 PCIe 96 GB과 24GB VRAM GeForce RTX 4090 Ti 중 어떤 GPU가 성능이 더 우수한지 알아보았습니다.

주요 차이점

NVIDIA H100 PCIe 96 GB 의 장점

더 많은 VRAM (96GB 대 24GB)

더 큰 VRAM 대역폭 (1681GB/s 대 1152GB/s)

NVIDIA GeForce RTX 4090 Ti 의 장점

부스트 클럭 의 성능이 40% 증가했습니다. (2565MHz 대 1837MHz)

1280 개의 추가 렌더링 코어

낮은 TDP (600W 대 700W)

점수

벤치마크

FP32 (float)

H100 PCIe 96 GB

62.08 TFLOPS

GeForce RTX 4090 Ti +50%

93.24 TFLOPS

H100 PCIe 96 GB

VS

GeForce RTX 4090 Ti

그래픽 카드

2023년3월

출시일

알 수 없음

Tesla Hopper

세대

GeForce 40

AI GPU

유형

데스크톱

PCIe 5.0 x16

버스 인터페이스

PCIe 4.0 x16

클럭 속도

1665 MHz

기본 클럭

2325 MHz

1837 MHz

부스트 클럭

2565 MHz

1313 MHz

메모리 클럭

1500 MHz

메모리

96GB

메모리 크기

24GB

HBM3

메모리 타입

GDDR6X

5120bit

메모리 버스

384bit

1681GB/s

대역폭

1152GB/s

렌더링 설정

132

스트림 프로세서 개수

142

-

컴퓨트 유닛

-

16896

새딩 유닛

18176

528

텍스처 매핑 유닛

568

24

렌더 출력 파이프라인

192

528

텐서 코어

568

-

레이 트레이싱 코어

142

256 KB (per SM)

L1 캐시

128 KB (per SM)

50 MB

L2 캐시

96 MB

이론적 성능

44.09 GPixel/s

픽셀 속도

492.5 GPixel/s

969.9 GTexel/s

텍스처 속도

1457 GTexel/s

248.3 TFLOPS

FP16 (반 정밀도)

93.24 TFLOPS

62.08 TFLOPS

FP32 (단 정밀도)

93.24 TFLOPS

31.04 TFLOPS

FP64 (배 정밀도)

1457 GFLOPS

그래픽 프로세서

GH100

GPU 이름

AD102

-

GPU 변형

AD102-400-A1

Hopper

아키텍처

Ada Lovelace

TSMC

파운드리

TSMC

4 nm

제조 공정 크기

5 nm

800 억

트랜지스터

763 억

814 mm²

다이 크기

609 mm²

보드 디자인

700W

TDP

600W

1100 W

권장 전원 공급 장치

1000 W

No outputs

출력 포트

1x HDMI 2.1 3x DisplayPort 1.4a

8-pin EPS

전원 연결자

2x 16-pin

그래픽 기능

N/A

DirectX

12 Ultimate (12_2)

N/A

OpenGL

4.6

3.0

OpenCL

3.0

N/A

Vulkan

1.3

9.0

CUDA

8.9

N/A

쉐이더 모델

6.7

NVIDIA H100 PCIe 96 GB vs NVIDIA GeForce RTX 4090 Ti

주요 차이점

점수

벤치마크

그래픽 카드

클럭 속도

메모리

렌더링 설정

이론적 성능

그래픽 프로세서

보드 디자인

그래픽 기능

관련 GPU 비교