GeForce RTX 4090：24GB VRAMで動かせるローカルLLMは？
価格を見る
GeForce RTX 4090 は 24GB の GDDR6X メモリと 1,008 GB/s の帯域幅を備えます。中古価格のデータはまだありません。Q4 量子化では最大 32B パラメータのモデルが動き、推定 36 tokens/s です。
GeForce RTX 4090 の詳細スペック
コア16,384
Tensor コア512
アーキテクチャAda Lovelace (AD102)
メモリ24 GB · GDDR6X
バス幅384-bit
帯域幅1,008 GB/s
BF16 / FP8 / INT8330.3 / 660.6 / 660.6
エコシステムCUDA
別名RTX 4090 · 4090
eBay（米国中古）—価格データなし
種別コンシューマ
消費電力450 W
補助電源16-pin 12VHPWR
スロット3
長さ304 mm
インターフェースPCIe 4.0 x16
発売日2022年10月12日
希望小売価格¥249,694
GeForce RTX 4090 で動かせるモデルは？
各ファミリーの主力バージョンを参照モデルとしています| モデル | Q4_K_M | Q8_0 | FP16 | ||||||
|---|---|---|---|---|---|---|---|---|---|
| 収まる | 速度 t/s | コンテキスト | 収まる | 速度 t/s | コンテキスト | 収まる | 速度 t/s | コンテキスト | |
| DeepSeekDeepSeek R1 Qwen3 8B | ✓ | 121.8 | 128K | ✓ | 71.9 | 32K | ✓ | 40.3 | 32K |
| GemmaGemma 4 31B | ✗ | — | — | ✗ | — | — | ✗ | — | — |
| GLMGLM 4.7 Flash | ✓ | 148.9 | 32K | オフロード | 22.2 | — | オフロード | 12.3 | — |
| gpt-ossgpt-oss 20B | ✓ | 139.4 | 128K | ✓ | 103.4 | 8K | オフロード | 9.2 | — |
| KimiKimi Linear 48B A3B | オフロード | 44.3 | — | オフロード | 26 | — | オフロード | 14.5 | — |
| LlamaLlama 3.1 8B | ✓ | 125.1 | 128K | ✓ | 73.7 | 32K | ✓ | 41.2 | 32K |
| MistralMistral 7B v0.3 | ✓ | 135.8 | 32K | ✓ | 80.6 | 32K | ✓ | 45.3 | 32K |
| QwenQwen3 8B | ✓ | 121.8 | 32K | ✓ | 71.9 | 32K | ✓ | 40.3 | 32K |
判定基準：重み + KV キャッシュ + 実行時オーバーヘッド ≤ 利用可能メモリ、1 枚構成。MoE モデルの「オフロード」はエキスパート重みをシステム RAM に置けば動作することを示し（VRAM にはアテンション層と KV キャッシュのみ）、その速度は RAM 帯域幅 70 GB/s を前提に推定。コンテキスト列は収まる最大段階です。
GeForce RTX 4090 の中古価格推移
推移グラフを描くにはデータが足りません。価格の追跡を始めたばかりです。
プラットフォーム別価格
メルカリ中古
出品なし
Amazon.co.jp新品
出品なし
楽天市場新品
出品なし
Yahoo!ショッピング新品
出品なし
購入リンクにはアフィリエイトタグが含まれる場合がありますが、支払額は変わりません。
よくある質問
GeForce RTX 4090 の VRAM 容量は？
GeForce RTX 4090 は 24GB の GDDR6X メモリを搭載し、帯域幅は 1,008 GB/s です。
GeForce RTX 4090 で 70B モデルは動きますか？
1 枚では動きません。Q4_K_M・8K コンテキストで 70B 密モデルには約 43GB が必要で、GeForce RTX 4090 の 24GB を超えます。
GeForce RTX 4090 の中古価格は？
中古価格のデータはまだありません。取得が始まり次第ここに表示します。