L40S vs RTX 4090
L40S と RTX 4090 のメーカー仕様を GPU 1 基あたりで並べて表示します。メーカーが該当モデルについて公開していない値はその旨を表示し、推定はしません。
NVIDIA L40S 48GB
Ada Lovelace
- GPU メモリ
- 48 GB
- メモリ帯域幅
- 864 GB/s
EverXCloud のライブ価格 · GPU 1 時間あたり $0.79〜
NVIDIA GeForce RTX 4090 24GB
Ada Lovelace
- GPU メモリ
- 24 GB
- メモリ帯域幅
- 1,008 GB/s
EverXCloud のライブ価格 · GPU 1 時間あたり $0.33〜
主な違い
- L40S の GPU メモリは RTX 4090 の 2.0× です(48 GB vs 24 GB)。
- RTX 4090 のメモリ帯域幅は L40S の 1.2× です(1,008 vs 864 GB/s)。通常、LLM のトークン生成速度を左右します。
仕様
| 項目 | L40S | RTX 4090 |
|---|---|---|
| GPU メモリ | 48 GB (高い方) | 24 GB |
| メモリの種類 | GDDR6 | GDDR6X |
| メモリ帯域幅 | 864 GB/s | 1,008 GB/s (高い方) |
| FP16 テンソル | 362 TFLOPS | 非公開 |
| BF16 テンソル | 362 TFLOPS | 非公開 |
| FP8 テンソル | 733 TFLOPS | 非公開 |
| 最大消費電力 | 350 W | 450 W |
| アーキテクチャ | Ada Lovelace | Ada Lovelace |
| インターコネクト | PCIe 4.0 | PCIe 4.0 |
各計測項目で高い方の値を太字で示しています。 メーカー仕様、GPU 1 基あたり。テンソル性能はスパース性なしの値です。この正確なモデルについてメーカーが公開していない値は省略しています。
GPU 1 基のメモリに収まるもの
| 用途 | L40S | RTX 4090 |
|---|---|---|
| LLM 推論、16 ビット | ≈ 15B パラメータ | ≈ 9B パラメータ |
| LLM 推論、4 ビット | ≈ 60B パラメータ | ≈ 30B パラメータ |
| フル学習、混合精度 | ≈ 2B パラメータ | ≈ 1B パラメータ |
メモリの 80% をモデルの重みに充てた慎重な目安です。コンテキスト長、バッチサイズ、フレームワークにより実際の上限は変わります。複数の GPU を組み合わせればより大きなモデルを扱えます。
L40S vs RTX 4090:よくある質問
L40S と RTX 4090、メモリが多いのはどちらですか?
L40S の GPU メモリは 48 GB、RTX 4090 は 24 GB です。
LLM 推論が速いのは L40S と RTX 4090 のどちらですか?
トークン生成は通常メモリ帯域幅に制約され、RTX 4090 の帯域幅は L40S の 1.2× です。どのモデルが収まるかはメモリ容量で決まります。大規模な実行の前に、ご自身のモデルで計測してください。
L40S と RTX 4090 は時間単位でレンタルできますか?
はい、販売者が EverXCloud スポット取引所に掲載していれば可能です。ユーロ、米ドル、英ポンドのプリペイド残高から、ライブ価格で GPU 時間を購入します。料金は税抜きで表示され、EverXCloud がすべてのレンタルの販売事業者です。
ローンチ日に備える
今すぐアカウントを作成:マーケットが開いたらすぐに残高をチャージし、用途に合った GPU をレンタルできます。
GPU サーバーをお持ちですか?
法人は EverXCloud Network に参加し、GPU サーバーの時間をスポット取引所で販売できます。
