| 规格 | NVIDIA T4 | NVIDIA A100 |
|---|
| 架构 | Turing (TU104-895) | NVIDIA Ampere (GA100)，第3代 Tensor Core |
| 显存 | 16GB GDDR6 with ECC (默认开启) | 40GB HBM2 / 80GB HBM2e 双版本（80GB 版 2020-11-16 SC20 增发），带 ECC |
| 显存带宽 | 320GB/s (早期一页版datasheet口径300GB/s) | 40GB 版 1,555 GB/s（PCIe/SXM 同）；80GB SXM4 版 2,039 GB/s / 80GB PCIe 版 1,935 GB/s（官方 datasheet 四列分列口径） |
| 显存位宽 | 256bit | 5120bit |
| 算力 | FP32 8.1 TFLOPS / FP16·FP32混合精度 65 TFLOPS / INT8 130 TOPS / INT4 260 TOPS | FP32 19.5 / FP64 9.7 / FP64 Tensor 19.5 TFLOPS；TF32 156(312*) / BF16 312(624*) / FP16 312(624*) TFLOPS / INT8 624(1248*) TOPS——官方 datasheet 四形态（40G PCIe/80G PCIe/40G SXM/80G SXM）算力同口径，*为稀疏加速 |
| CUDA核心 | 2,560 (40 SM) / Tensor Core 320 / RT Core 40 | 6912 FP32 CUDA（108 SM）/ 第3代 Tensor Core |
| 功耗 | 70W (Total board power, 默认) | SXM4 400W（40GB/80GB 同）；PCIe 版 40GB 250W / 80GB 300W |
| 互联 | PCIe Gen3 x16 (支持x8运行, Interconnect BW 32GB/s) | SXM4 版：NVLink 3.0 12链路 600GB/s 双向 + PCIe Gen4 64GB/s；PCIe 版：NVLink Bridge 双卡互连 600GB/s + PCIe Gen4 64GB/s |
| 发布年 | 2018 (Product Brief v01 2018-10-24初版, Dec18版datasheet © 2018 NVIDIA) | 2020（40GB 版 2020-05-14 GTC 发布；80GB 版 2020-11-16 SC20 发布） |
| 形态 | 单槽半高半长 Low-Profile 6.6英寸(长169.53mm), 被动散热, 板重301g | SXM4 模组（HGX A100 4/8/16卡、DGX A100 8卡）/ PCIe 双槽 10.5英寸全长 |
| 时钟 | Base 585MHz / Boost 1590MHz (Base为70W功耗墙下调校) | — |
| 媒体引擎 | 1080p30解码 H.264 32路 / HEVC 44路 / VP9 32路 | — |
| SR-IOV | Supported; 16 VF（支持） | — |
| 工艺 | 12nm FFN, 136亿晶体管, 545mm2 | TSMC 7nm（N7 定制），54.2B 晶体管，826mm² |
| Compute APIs | CUDA, NVIDIA TensorRT, ONNX | — |
| MIG | — | Multi-Instance GPU 最多 7 硬件隔离实例（40GB 版单实例最高 5GB / 80GB 版 10GB） |