| 规格 | NVIDIA H100 NVL | NVIDIA GeForce RTX 4090 |
|---|
| 架构 | NVIDIA Hopper | Ada Lovelace (AD102-300, 128 SM) |
| 显存 | 94GB | 24GB GDDR6X |
| 显存类型 | HBM3 | — |
| 显存带宽 | 3.9TB/s | 1008GB/s (21Gbps x 384bit) |
| FP64算力 | 30 teraFLOPs | — |
| FP64 Tensor Core | 60 teraFLOPs | — |
| FP32算力 | 60 teraFLOPs | — |
| FP8算力 | 3,341 teraFLOPS | — |
| FP16算力 | 1,671 teraFLOPS | — |
| INT8算力 | 3,341 TOPS | — |
| 功耗TDP | 350-400W (configurable) | — |
| 互联 | NVIDIA NVLink: 600GB/s | PCIe Gen5: 128GB/s | PCIe Gen4 x16 (不支持NVLink) |
| 形态 | PCIe dual-slot air-cooled | FE三槽 304x137mm, 供电 3x8pin转接或12VHPWR(450W Gen5) |
| MIG切片 | Up to 7 MIGS @ 12GB each | — |
| 编解码器 | 7 NVDEC | 7 JPEG | — |
| 显存位宽 | — | 384bit |
| 算力 | — | FP32 82.6 TFLOPS (官方发布口径, 现页四舍五入标83) / Tensor 1321 AI TOPS (FP8稀疏) / RT 191 TFLOPS |
| CUDA核心 | — | 16384 (128 SM) / Tensor Core 512 (四代) / RT Core 128 (三代) |
| 功耗 | — | 450W TGP (平均游戏315W, 建议系统电源850W) |
| 发布年 | — | 2022 (2022-09-20 GTC发布, 2022-10-12开售, MSRP $1599) |
| 频率 | — | Base 2.23GHz / Boost 2.52GHz |
| 工艺 | — | TSMC 4N, 763亿晶体管, 608.5mm² (AD102 满血144SM, 4090启用128) |
| 媒体引擎 | — | 2x 第八代NVENC / 1x 第五代NVDEC, AV1编解码 |
| 显示输出 | — | HDMI 2.1a x1 + DisplayPort 1.4a x3, 4K240/8K60(DSC) |
| CUDA算力等级 | — | Compute Capability 8.9 |