比較・48GBカード2枚、片方はデータセンター向け

# L40SかRTX A6000か？

どちらも専有で、どちらも月額制、どちらも本人確認なしで利用開始できます。両者を分けるのはメモリ、帯域幅、そして月額$428の差であり、どれが重要かは何を実行するか次第です。

- $714/mo L40S、1枚
- $286/mo RTX A6000、1枚
- 48 vs 48 GB 1カードあたりのメモリ
- 1.1× 帯域幅の差

## 簡潔な答え

どちらを、いつ選ぶか

- **L40Sを選ぶ:** スループットが重要な場合。48GBは同じですが、生成速度を左右するメモリ帯域幅が13%高く、その分月額$428高くなります。
- **RTX A6000を選ぶ:** L40Sが必要なものを何も提供しない場合。メモリは同じ、帯域幅もほぼ同等で、月額$428安くなります。
- **Neither, if:** どちらのカード1枚にもモデルが収まらない場合。シャーディングには各レイヤーで同期コストが発生します。詳しくは [インターコネクトガイド](https://gpuserver.io/ja/guides/nvlink-vs-pcie) マルチGPUノードを購入する前に。

## 並べて比較

**L40SとRTX A6000の比較**

|  | [L40S](https://gpuserver.io/ja/gpu/l40s) | [RTX A6000](https://gpuserver.io/ja/gpu/rtx-a6000) | 差 |
|---|---|---|---|
| アーキテクチャ | Ada Lovelace | Ampere | Ada Lovelaceは異なる世代です |
| カードあたりのメモリ | 48GBGDDR6 ECC | 48GBGDDR6 ECC | 同一 |
| メモリ帯域幅 生成速度を予測 | 864 GB/s | 768 GB/s | 1.13倍、L40Sが有利 |
| フォームファクター | PCIeアドインカード | PCIeアドインカード | 同じ |
| ノードサイズ | 1×, 2×, 4×, 8× | 1×, 2×, 4×, 8× | 1ノードで最大384GB |
| 月額（〜から） | $714 | $286 | 月額$428の差 |

## 全ノードサイズの価格

**各ノードサイズにおける両カードの月額料金**

| ノード | L40S | RTX A6000 | 総VRAM容量 |  |
|---|---|---|---|---|
| 1 × GPU | $714/mo | $286/mo | 48 GB / 48 GB | [L40S](https://gpuserver.io/ja/configure?c=l40s-x1) [RTX A6000](https://gpuserver.io/ja/configure?c=a6000-x1) |
| 2 × GPU | $1,427/mo | $597/mo | 96 GB / 96 GB | [L40S](https://gpuserver.io/ja/configure?c=l40s-x2) [RTX A6000](https://gpuserver.io/ja/configure?c=a6000-x2) |
| 4 × GPU | $2,754/mo | $1,163/mo | 192 GB / 192 GB | [L40S](https://gpuserver.io/ja/configure?c=l40s-x4) [RTX A6000](https://gpuserver.io/ja/configure?c=a6000-x4) |
| 8 × GPU | $5,251/mo | $2,239/mo | 384 GB / 384 GB | [L40S](https://gpuserver.io/ja/configure?c=l40s-x8) [RTX A6000](https://gpuserver.io/ja/configure?c=a6000-x8) |

## それぞれが1枚のカードで保持できる量

8kコンテキストにおいて、収まる範囲で最も高い精度を使用します。購入を決めるのはこの違いであり、スペック表ではありません。

### L40Sのみ

ありません。L40Sが1枚のカードで保持できるモデルは、RTX A6000もすべて保持できます。両者の違いは能力ではなく速度です。

### RTX A6000のみ

ありません。L40SはRTX A6000が保持できるものをすべて保持できます。

**両方で同じモデル:Llama 3.3 70B。** L40Sでは4-bit (AWQ, GPTQ)においておよそ11トークン/秒、 RTX A6000ではおよそ10です。 いずれもシングルストリームでの、意図的に控えめな数値です。連続バッチ処理を用いれば、両者とも合計スループットは数倍に達します。参考にすべきは絶対値ではなく、この*比率*です。

## GBあたり、TB/秒あたりのコスト

スペック表を読み解く2つの比率です。1つ目はメモリの単価を、2つ目は速度の単価を示します。

**VRAM 1ギガバイトあたり、および帯域幅1テラバイト/秒あたりのコスト**

| カード | $/GB(VRAM)、月額 | $/TB/秒、月額 | 得意な点 |
|---|---|---|---|
| [L40S](https://gpuserver.io/ja/gpu/l40s) | $14.88 | $714 | どちらでもない |
| [RTX A6000](https://gpuserver.io/ja/gpu/rtx-a6000) | $5.96 | $286 | 両方の比率 |

これらの比率はカードの順位付けに使うものであり、選択そのものを決めるものではありません。1GBあたりの単価が安くても、モデルを保持するのに十分な容量がなければ意味がありません。容量は連続的な指標ではなく、満たすか満たさないかのしきい値です。両方とも要件を満たすカード同士で迷ったときに、これらの比率を使って判断してください。

## L40S対RTX A6000、要約

L40SはRTX A6000より高い分の価値がありますか？

月額$428高くなります(150%)。それにより、メモリ帯域幅が13%増加します。どちらも1枚のカードで保持できるモデルの範囲は同じであり、違いは能力ではなく速度です。

LLM推論はどちらが高速ですか？

生成速度はメモリ帯域幅によって制限されます。各トークンの生成のたびに、有効な重みを読み直す必要があるためです。L40Sは864GB/s、対する768GB/sであるため、両者が保持できるモデルにおいてL40Sがおよそ13%上回ります。

どちらもマルチGPUノードとして提供されますか？

L40S: 1×, 2×, 4×, 8×. RTX A6000: 1×, 2×, 4×, 8×. どちらもPCIeカードであり、NVLinkではなくバス経由のピアツーピア接続で結ばれています。

どちらも本人確認なしで借りられますか？

はい、どちらも同じ条件です。身分証明書も自撮り写真も電話番号も法人登記も不要で、支払い額の多寡は関係ありません。支払いは暗号資産で行い、請求書ごとに個別のアドレスが発行され、rootアクセスは最初の承認から5分未満後に利用可能になります。

## 他の比較

- [A100 PCIe vs L40S  同じ価格帯のHBMとGDDR 比較](https://gpuserver.io/ja/compare/a100-80gb-vs-l40s)

## どちらもラックに搭載済みで、6か所すべてのデータセンターで待機しています。

どちらを選んでも、月額制・暗号資産払い・本人確認不要で、5分未満で提供されます。

[コンフィギュレーターを開く](https://gpuserver.io/ja/configure) [ガイドを読む](https://gpuserver.io/ja/guides)

---

出典: https://gpuserver.io/ja/compare/l40s-vs-rtx-a6000/。このファイルはウェブサイトと同じデータから生成されています。ここに記載された数値がページの内容と異なる場合、ページの内容が正となり、このファイルは古い情報です。正式な出典はhttps://gpuserver.io/です。