| 参数 | NVIDIA H100 PCIe 96 GB | NVIDIA GeForce RTX 3090 Ti |
|---|---|---|
| 品牌 | NVIDIA | NVIDIA |
| 芯片厂商 | NVIDIA | NVIDIA |
| 架构 | Hopper | Ampere |
| 发布日期 | 2023-03-21 | 2022-01-27 |
| 制程 | 5 nm nm | 8 nm nm |
| 晶体管 | 80,000 million | 28,300 million |
| 核心面积 | 814 mm² | 628 mm² |
| 流处理器 | 16,896 | 10,752 |
| 张量核心 | 528 | 336 |
| 光线追踪核心 | 84 | |
| SM数 | 132 | 84 |
| 基础频率 | 1,665 MHz | 1,560 MHz |
| 加速频率 | 1,837 MHz | 1,860 MHz |
| 显存频率 | 1,313 MHz | 1,313 MHz |
| 显存容量 | 96 GB | 24 GB |
| 显存类型 | HBM3 | GDDR6X |
| 显存位宽 | 5120 bit | 384 bit |
| 总线接口 | PCIe 5.0 x16 | PCIe 4.0 x16 |
| 显存带宽 | 3.36 TB/s | 1.01 TB/s |
| FP16性能 | 248.300 TFLOPS | 40.000 TFLOPS |
| FP32性能 | 62.080 TFLOPS | 40.000 TFLOPS |
| FP64性能 | 31.040 TFLOPS | 0.625 TFLOPS |
| 功耗TDP | 700 W | 450 W |
| 建议电源 | 1,100 W | 850 W |
| 显卡插槽 | Dual-slot | Triple-slot |
| 电源接口 | 8-pin EPS | 1x 16-pin |
| CUDA版本 | 9.0 | 8.6 |
| 是否整卡 | 否 | 否 |