对比 · 同款 GPU，显存翻倍
A100 PCIe 80 GB 还是 A100 PCIe 40 GB？
两者都是独享服务器，都按月计费，开通都无需身份核验。区别在于显存、带宽，以及每月 $699 的价差——而这些差异是否重要，完全取决于您打算运行什么。
- $1,091/moA100 PCIe 80 GB，单卡
- $392/moA100 PCIe 40 GB，单卡
- 80 vs 40 GB每卡显存
- 1.2×带宽差距
简短的答案
该选哪一款，以及何时选
- 选择 A100 PCIe 80 GB
- 当您的模型在单卡上需要超过 40 GB 时。这是一道门槛，而非个人偏好——低于这个门槛，多花的每月 $699 什么也买不到。
- 选择 A100 PCIe 40 GB
- 当 40 GB 就能容纳您的模型时。这样每月能省下 $699，而用不上的显存，也是您掏钱买的显存。
- Neither, if
- 您的模型在任何一款单卡上都装不下。拆分会在每一层都产生同步开销——请参阅 互联指南 购买多 GPU 节点之前。
并排对比
| A100 PCIe 80 GB | A100 PCIe 40 GB | 差异 | |
|---|---|---|---|
| 架构 | Ampere | Ampere | 同一代 |
| 单卡显存 | 80 GB HBM2e | 40 GB HBM2 | 多出 40 GB，优势归 A100 PCIe 80 GB |
| 显存带宽 | 1,935 GB/s | 1,555 GB/s | 1.24×，优势归 A100 PCIe 80 GB |
| 封装形式 | PCIe 插卡 | PCIe 插卡 | 相同 |
| 节点规格 | 1×, 2×, 4×, 8× | 1×, 2×, 4×, 8× | 单节点最高可达 640 GB |
| 起价，每月 | $1,091 | $392 | 相差 $699/月 |
每种节点规格的价格
| 节点 | A100 PCIe 80 GB | A100 PCIe 40 GB | 总显存 | |
|---|---|---|---|---|
| 1 × GPU | $1,091/mo | $392/mo | 80 GB / 40 GB | A100 PCIe 80 GB A100 PCIe 40 GB |
| 2 × GPU | $2,159/mo | $802/mo | 160 GB / 80 GB | A100 PCIe 80 GB A100 PCIe 40 GB |
| 4 × GPU | $4,157/mo | $1,556/mo | 320 GB / 160 GB | A100 PCIe 80 GB A100 PCIe 40 GB |
| 8 × GPU | $7,906/mo | $2,983/mo | 640 GB / 320 GB | A100 PCIe 80 GB A100 PCIe 40 GB |
各自在单卡上能容纳什么
在 8k 上下文下，选用能放得下的最佳精度。真正决定购买与否的是这一差异——而非规格表。
仅 A100 PCIe 80 GB
- Llama 3.3 70B——4-bit (AWQ, GPTQ)，约25 token/秒
仅 A100 PCIe 40 GB
没有。A100 PCIe 80 GB 能容纳 A100 PCIe 40 GB 所能容纳的一切。
两者上运行同一模型：Qwen 3 32B。
在 A100 PCIe 80 GB 上，约为每秒 14 个 token（BF16 / FP16 时）；
在 A100 PCIe 40 GB 上，约为 22。
此数据为单流保守估算——在连续批处理下，两者的总吞吐量都会高出数倍。请把比值而非绝对值当作有参考意义的数字。
每 GB 与每 TB/s 的成本
两项比率，帮您看穿规格表背后的真相：第一项告诉您显存的价格，第二项告诉您速度的价格。
| 显卡 | $/GB 显存，每月 | $/TB 每秒，每月 | 更擅长 |
|---|---|---|---|
| A100 PCIe 80 GB | $13.64 | $564 | 无 |
| A100 PCIe 40 GB | $9.80 | $252 | 两项比率 |
这些比率用于给显卡排序，而不是替您做选择。如果一款显卡每 GB 更便宜，但显存总量根本不足以容纳您的模型，那这种便宜毫无意义——容量是一道门槛，而非一条渐变的曲线。请用这些比率，在两款都能装下您模型的显卡之间做取舍。
A100 PCIe 80 GB 对比 A100 PCIe 40 GB，简而言之
A100 PCIe 80 GB 比 A100 PCIe 40 GB 贵出的部分，值得吗？
每月贵 $699——即 178%——换来 多 40 GB 显存，以及24% 的显存带宽提升。它还能容纳 A100 PCIe 40 GB 无法在单张显卡上容纳的 1 款模型。
在 LLM 推理方面，哪一款更快？
生成速度受限于显存带宽，因为每生成一个 token 都需要重新读取一次激活权重。A100 PCIe 80 GB 的带宽为 1,935 GB/s，而对方为 1,555 GB/s，因此在双方都能容纳的模型上，A100 PCIe 80 GB 的速度大约领先 24%。
两者都提供多 GPU 节点吗？
A100 PCIe 80 GB: 1×, 2×, 4×, 8×. A100 PCIe 40 GB: 1×, 2×, 4×, 8×. 两者都是 PCIe 显卡，通过总线点对点连接，而非通过 NVLink 连接。
这两款我都能在无需身份核验的情况下租用吗？
是的，两款都一样，条件完全相同。无论消费金额多少，都无需证件、无需自拍照、无需电话号码，也无需公司注册信息。付款以加密货币结算，每张账单都有专属地址，首次确认到账后 5 分钟以内 内即可获得 root 权限。