H100 SXM5 o H100 PCIe?
Entrambe sono dedicate, entrambe sono mensili, entrambe si attivano senza verifica d’identità. Ciò che le separa è la memoria, la larghezza di banda e $4,592 al mese — e quale di questi fattori conta dipende interamente da cosa intende eseguire.
- $6,061/moH100 SXM5, una scheda
- $1,469/moH100 PCIe, una scheda
- 80 vs 80 GBmemoria per scheda
- 1.7×differenza di larghezza di banda
La risposta breve
Quale delle due, e quando
- Scegli la H100 SXM5
- quando il throughput conta. Stessi 80 GB, ma il 68% in più di larghezza di banda della memoria — che è ciò che determina la velocità di generazione — per $4,592/mese in più.
- Scegli la H100 PCIe
- quando la H100 SXM5 non le offre nulla di cui ha bisogno. Stessa memoria, larghezza di banda comparabile, $4,592/mese in meno.
- Neither, if
- il suo modello non ci sta su una singola scheda di nessuna delle due. Lo sharding comporta un costo di sincronizzazione a ogni layer — consulti la guida sull’interconnessione prima di acquistare un nodo multi-GPU.
Fianco a fianco
| H100 SXM5 | H100 PCIe | Differenza | |
|---|---|---|---|
| Architettura | Hopper | Hopper | Stessa generazione |
| Memoria per scheda | 80 GB HBM3 | 80 GB HBM3 | Identica |
| Larghezza di banda della memoria | 3,350 GB/s | 2,000 GB/s | 1.68× a favore della H100 SXM5 |
| Fattore di forma | SXM su una board HGX | Scheda PCIe add-in | NVLink contro PCIe tra le schede |
| Dimensioni del nodo | 4×, 8× | 1×, 2×, 4×, 8× | Fino a 640 GB in un nodo |
| A partire da, al mese | $6,061 | $1,469 | $4,592/mese di differenza |
Prezzo per ogni dimensione di nodo
| Nodo | H100 SXM5 | H100 PCIe | VRAM totale | |
|---|---|---|---|---|
| 1 × GPU | $1,469/mo | 80 GB | H100 PCIe | |
| 2 × GPU | $2,892/mo | 160 GB | H100 PCIe | |
| 4 × GPU | $6,061/mo | $5,564/mo | 320 GB / 320 GB | H100 SXM5 H100 PCIe |
| 8 × GPU | $11,509/mo | $10,568/mo | 640 GB / 640 GB | H100 SXM5 H100 PCIe |
Cosa contiene ciascuna su una singola scheda
A un contesto di 8k, la miglior precisione che ci sta. È questa la differenza che decide un acquisto — non la scheda tecnica.
Solo la H100 SXM5
Niente. Ogni modello che la H100 SXM5 contiene su una scheda, lo contiene anche la H100 PCIe — la differenza tra loro è nella velocità, non nella capacità.
Solo la H100 PCIe
Niente. La H100 SXM5 contiene tutto ciò che contiene la H100 PCIe.
Costo per GB e per TB/s
Due rapporti che vanno dritti al punto oltre la scheda tecnica. Il primo indica quanto costa la memoria; il secondo quanto costa la velocità.
| Scheda | $/GB di VRAM, al mese | $/TB al secondo, al mese | Migliore per |
|---|---|---|---|
| H100 SXM5 | $75.76 | $1,809 | Nessuno dei due |
| H100 PCIe | $18.36 | $735 | Entrambi i rapporti |
Questi rapporti classificano le schede; non scelgono al posto suo. Una scheda più economica per gigabyte non serve a nulla se ha troppo pochi gigabyte per contenere il suo modello — la capacità è una soglia, non una pendenza. Li usi per sciogliere un pareggio tra due schede che ci stanno entrambe.
H100 SXM5 contro H100 PCIe, in breve
Vale la pena spendere di più per la H100 SXM5 rispetto alla H100 PCIe?
Quale delle due è più veloce per l’inferenza LLM?
Sono entrambe disponibili come nodi multi-GPU?
Posso noleggiare entrambe senza verifica d’identità?
Altri confronti
Entrambe sono montate in rack e pronte, in tutti i 6 data center.
Qualunque scelga, è mensile, pagato in cripto, attivato senza verifica d’identità e consegnato in in meno di 5 minuti.