NVIDIA 주문 생산

NVIDIA H200 SXM / NVL

Hopper 세대 — 141GB HBM3e로 대형 모델을 단일 GPU에 적재

H200은 H100 대비 메모리 용량과 대역폭을 크게 늘린 Hopper 세대 GPU입니다. 141GB HBM3e를 탑재해 모델 병렬화 없이도 대형 모델을 단일 GPU에 올릴 수 있어, 추론 파이프라인 구성이 단순해집니다.

SXM 모듈형과 PCIe NVL 폼팩터 모두 공급 가능합니다. 기존 H100 기반 인프라에서 점진적으로 확장하는 경우 NVL 구성이 도입 부담이 적습니다.

사양

아키텍처 NVIDIA Hopper
GPU 메모리 141GB HBM3e
메모리 대역폭 4.8TB/s
NVLink 4세대, 900GB/s 양방향
폼팩터 SXM5 / PCIe (NVL)
MIG 지원 최대 7개 인스턴스 분할
지원 소프트웨어 NVIDIA AI Enterprise, CUDA, TensorRT

주요 용도

LLM 추론 서빙 LLM 학습 멀티테넌트 GPU 풀

구성 상담이 필요하신가요?

NVIDIA H200 SXM / NVL을(를) 포함한 전체 구성을 검토해 드립니다. 워크로드와 예산, 설치 환경을 알려주시면 실제로 동작하는 구성으로 제안합니다.