| 参数 | NVIDIA H200 NVL | NVIDIA RTX A40-24Q |
|---|---|---|
| 品牌 | NVIDIA | NVIDIA |
| 芯片厂商 | NVIDIA | NVIDIA |
| 架构 | Hopper | Ampere |
| 发布日期 | 2024-11-18 | 2020-10-05 |
| 制程 | 5 nm nm | 8 nm nm |
| 晶体管 | 80,000 million | 28,300 million |
| 核心面积 | 814 mm² | 628 mm² |
| 流处理器 | 16,896 | 10,752 |
| 张量核心 | 528 | 336 |
| 光线追踪核心 | 84 | |
| SM数 | 132 | 84 |
| 基础频率 | 1,365 MHz | 1,305 MHz |
| 加速频率 | 1,785 MHz | 1,740 MHz |
| 显存频率 | 1,593 MHz | 1,812 MHz |
| 显存容量 | 141 GB | 24 GB |
| 显存类型 | HBM3e | GDDR6 |
| 显存位宽 | 6144 bit | 384 bit |
| 总线接口 | PCIe 5.0 x16 | PCIe 4.0 x16 |
| 显存带宽 | 4.89 TB/s | 695.8 GB/s |
| FP16性能 | 241.300 TFLOPS | 37.420 TFLOPS |
| FP32性能 | 60.320 TFLOPS | 37.420 TFLOPS |
| FP64性能 | 30.160 TFLOPS | 0.585 TFLOPS |
| 功耗TDP | 600 W | 300 W |
| 建议电源 | 1,000 W | 700 W |
| 显卡插槽 | Dual-slot | Dual-slot |
| 电源接口 | 8-pin EPS | 8-pin EPS |
| CUDA版本 | 9.0 | 8.6 |
| 是否整卡 | 否 | 是 |