比較・純粋な速度と低消費電力
RTX 4090かL4か?
どちらも専有で、どちらも月額制、どちらも本人確認なしで利用開始できます。両者を分けるのはメモリ、帯域幅、そして月額$68の差であり、どれが重要かは何を実行するか次第です。
- $193/moRTX 4090、1枚
- $125/moL4、1枚
- 24 vs 24 GB1カードあたりのメモリ
- 3.4×帯域幅の差
簡潔な答え
どちらを、いつ選ぶか
- RTX 4090を選ぶ
- スループットが重要な場合。24GBは同じですが、生成速度を左右するメモリ帯域幅が236%高く、その分月額$68高くなります。
- L4を選ぶ
- RTX 4090が必要なものを何も提供しない場合。メモリは同じ、帯域幅もほぼ同等で、月額$68安くなります。
- Neither, if
- どちらのカード1枚にもモデルが収まらない場合。シャーディングには各レイヤーで同期コストが発生します。詳しくは インターコネクトガイド マルチGPUノードを購入する前に。
並べて比較
| RTX 4090 | L4 | 差 | |
|---|---|---|---|
| アーキテクチャ | Ada Lovelace | Ada Lovelace | 同世代 |
| カードあたりのメモリ | 24GBGDDR6X | 24GBGDDR6 | 同一 |
| メモリ帯域幅 | 1,008 GB/s | 300 GB/s | 3.36倍、RTX 4090が有利 |
| フォームファクター | PCIeアドインカード | PCIeアドインカード | 同じ |
| ノードサイズ | 1×, 2×, 4×, 8× | 1×, 2×, 4×, 8×, 10× | 1ノードで最大240GB |
| 月額(〜から) | $193 | $125 | 月額$68の差 |
全ノードサイズの価格
| ノード | RTX 4090 | L4 | 総VRAM容量 | |
|---|---|---|---|---|
| 1 × GPU | $193/mo | $125/mo | 24 GB / 24 GB | RTX 4090 L4 |
| 2 × GPU | $416/mo | $285/mo | 48 GB / 48 GB | RTX 4090 L4 |
| 4 × GPU | $814/mo | $564/mo | 96 GB / 96 GB | RTX 4090 L4 |
| 8 × GPU | $1,579/mo | $1,106/mo | 192 GB / 192 GB | RTX 4090 L4 |
| 10 × GPU | $1,371/mo | 240 GB | L4 |
それぞれが1枚のカードで保持できる量
8kコンテキストにおいて、収まる範囲で最も高い精度を使用します。購入を決めるのはこの違いであり、スペック表ではありません。
RTX 4090のみ
ありません。RTX 4090が1枚のカードで保持できるモデルは、L4もすべて保持できます。両者の違いは能力ではなく速度です。
L4のみ
ありません。RTX 4090はL4が保持できるものをすべて保持できます。
両方で同じモデル:Qwen 3 32B。
RTX 4090では4-bit (AWQ, GPTQ)においておよそ28トークン/秒、
L4ではおよそ8です。
いずれもシングルストリームでの、意図的に控えめな数値です。連続バッチ処理を用いれば、両者とも合計スループットは数倍に達します。参考にすべきは絶対値ではなく、この比率です。
GBあたり、TB/秒あたりのコスト
スペック表を読み解く2つの比率です。1つ目はメモリの単価を、2つ目は速度の単価を示します。
| カード | $/GB(VRAM)、月額 | $/TB/秒、月額 | 得意な点 |
|---|---|---|---|
| RTX 4090 | $8.04 | $191 | どちらでもない |
| L4 | $5.21 | $125 | 両方の比率 |
これらの比率はカードの順位付けに使うものであり、選択そのものを決めるものではありません。1GBあたりの単価が安くても、モデルを保持するのに十分な容量がなければ意味がありません。容量は連続的な指標ではなく、満たすか満たさないかのしきい値です。両方とも要件を満たすカード同士で迷ったときに、これらの比率を使って判断してください。
RTX 4090対L4、要約
RTX 4090はL4より高い分の価値がありますか?
月額$68高くなります(54%)。それにより、メモリ帯域幅が236%増加します。どちらも1枚のカードで保持できるモデルの範囲は同じであり、違いは能力ではなく速度です。
LLM推論はどちらが高速ですか?
生成速度はメモリ帯域幅によって制限されます。各トークンの生成のたびに、有効な重みを読み直す必要があるためです。RTX 4090は1,008GB/s、対する300GB/sであるため、両者が保持できるモデルにおいてRTX 4090がおよそ236%上回ります。
どちらもマルチGPUノードとして提供されますか?
RTX 4090: 1×, 2×, 4×, 8×. L4: 1×, 2×, 4×, 8×, 10×. どちらもPCIeカードであり、NVLinkではなくバス経由のピアツーピア接続で結ばれています。
どちらも本人確認なしで借りられますか?
はい、どちらも同じ条件です。身分証明書も自撮り写真も電話番号も法人登記も不要で、支払い額の多寡は関係ありません。支払いは暗号資産で行い、請求書ごとに個別のアドレスが発行され、rootアクセスは最初の承認から5分未満後に利用可能になります。
他の比較
どちらもラックに搭載済みで、6か所すべてのデータセンターで待機しています。
どちらを選んでも、月額制・暗号資産払い・本人確認不要で、5分未満で提供されます。