比較・Blackwellへの乗り換えは割に合うか?
H100 SXM5かB200 SXM6か?
どちらも専有で、どちらも月額制、どちらも本人確認なしで利用開始できます。両者を分けるのはメモリ、帯域幅、そして月額$5,729の差であり、どれが重要かは何を実行するか次第です。
- $6,061/moH100 SXM5、1枚
- $11,790/moB200 SXM6、1枚
- 80 vs 180 GB1カードあたりのメモリ
- 2.4×帯域幅の差
簡潔な答え
どちらを、いつ選ぶか
- H100 SXM5を選ぶ
- 80GBでモデルが収まる場合。月額$5,729節約でき、使わないメモリは払っただけ無駄になります。
- B200 SXM6を選ぶ
- モデルが1枚のカードで80GBを超えるメモリを必要とする場合。これは好みの問題ではなくしきい値であり、それを下回るなら、追加の月額$5,729には何の意味もありません。
- Neither, if
- どちらのカード1枚にもモデルが収まらない場合。シャーディングには各レイヤーで同期コストが発生します。詳しくは インターコネクトガイド マルチGPUノードを購入する前に。
並べて比較
| H100 SXM5 | B200 SXM6 | 差 | |
|---|---|---|---|
| アーキテクチャ | Hopper | Blackwell | Hopperの方が古い |
| カードあたりのメモリ | 80GBHBM3 | 180GBHBM3e | 100GB分、B200 SXM6が有利 |
| メモリ帯域幅 | 3,350 GB/s | 8,000 GB/s | 2.39倍、B200 SXM6が有利 |
| フォームファクター | HGXボード上のSXM | HGXボード上のSXM | 同じ |
| ノードサイズ | 4×, 8× | 4×, 8× | 1ノードで最大1440GB |
| 月額(〜から) | $6,061 | $11,790 | 月額$5,729の差 |
全ノードサイズの価格
| ノード | H100 SXM5 | B200 SXM6 | 総VRAM容量 | |
|---|---|---|---|---|
| 4 × GPU | $6,061/mo | $11,790/mo | 320 GB / 720 GB | H100 SXM5 B200 SXM6 |
| 8 × GPU | $11,509/mo | $22,351/mo | 640 GB / 1440 GB | H100 SXM5 B200 SXM6 |
それぞれが1枚のカードで保持できる量
8kコンテキストにおいて、収まる範囲で最も高い精度を使用します。購入を決めるのはこの違いであり、スペック表ではありません。
H100 SXM5のみ
ありません。H100 SXM5が1枚のカードで保持できるモデルは、B200 SXM6もすべて保持できます。両者の違いは能力ではなく速度です。
B200 SXM6のみ
- Qwen 3 235B-A22B (MoE)・4-bit (AWQ, GPTQ)、約59 tok/s
- Mixtral 8×22B (MoE)・FP8、約17 tok/s
両方で同じモデル:Llama 3.3 70B。
H100 SXM5では4-bit (AWQ, GPTQ)においておよそ43トークン/秒、
B200 SXM6ではおよそ26です。
いずれもシングルストリームでの、意図的に控えめな数値です。連続バッチ処理を用いれば、両者とも合計スループットは数倍に達します。参考にすべきは絶対値ではなく、この比率です。
GBあたり、TB/秒あたりのコスト
スペック表を読み解く2つの比率です。1つ目はメモリの単価を、2つ目は速度の単価を示します。
| カード | $/GB(VRAM)、月額 | $/TB/秒、月額 | 得意な点 |
|---|---|---|---|
| H100 SXM5 | $75.76 | $1,809 | どちらでもない |
| B200 SXM6 | $65.50 | $1,474 | 両方の比率 |
これらの比率はカードの順位付けに使うものであり、選択そのものを決めるものではありません。1GBあたりの単価が安くても、モデルを保持するのに十分な容量がなければ意味がありません。容量は連続的な指標ではなく、満たすか満たさないかのしきい値です。両方とも要件を満たすカード同士で迷ったときに、これらの比率を使って判断してください。
H100 SXM5対B200 SXM6、要約
H100 SXM5はB200 SXM6より高い分の価値がありますか?
実際には月額$5,729安くなります。B200 SXM6が高いのはメモリまたは帯域幅による差のためであり、その価値があるかどうかは、お使いのモデルがH100 SXM5に収まるかどうか次第です。
LLM推論はどちらが高速ですか?
生成速度はメモリ帯域幅によって制限されます。各トークンの生成のたびに、有効な重みを読み直す必要があるためです。H100 SXM5は3,350GB/s、対する8,000GB/sであるため、両者が保持できるモデルにおいてB200 SXM6がおよそ58%上回ります。
どちらもマルチGPUノードとして提供されますか?
H100 SXM5: 4×, 8×. B200 SXM6: 4×, 8×. SXMカードはHGXボード上に4基または8基で搭載され(2基や10基になることはありません)、PCIeではなくNVLinkで接続されます。
どちらも本人確認なしで借りられますか?
はい、どちらも同じ条件です。身分証明書も自撮り写真も電話番号も法人登記も不要で、支払い額の多寡は関係ありません。支払いは暗号資産で行い、請求書ごとに個別のアドレスが発行され、rootアクセスは最初の承認から5分未満後に利用可能になります。
他の比較
どちらもラックに搭載済みで、6か所すべてのデータセンターで待機しています。
どちらを選んでも、月額制・暗号資産払い・本人確認不要で、5分未満で提供されます。