GeForce RTX 3090：24GB VRAMで動かせるローカルLLMは？
価格を見る
GeForce RTX 3090 は 24GB の GDDR6X メモリと 936 GB/s の帯域幅を備えます。中古価格のデータはまだありません。Q4 量子化では最大 32B パラメータのモデルが動き、推定 33 tokens/s です。
GeForce RTX 3090 の詳細スペック
コア10,496
Tensor コア328
アーキテクチャAmpere (GA102)
メモリ24 GB · GDDR6X
バス幅384-bit
帯域幅936 GB/s
BF16 / FP8 / INT8142.3 / — / 284.7
エコシステムCUDA
別名RTX 3090 · 3090
eBay（米国中古）—価格データなし
種別コンシューマ
消費電力350 W
補助電源12-pin (Founders Edition)
スロット3
長さ313 mm
インターフェースPCIe 4.0 x16
発売日2020年9月24日
希望小売価格¥234,079
GeForce RTX 3090 で動かせるモデルは？
各ファミリーの主力バージョンを参照モデルとしています| モデル | Q4_K_M | Q8_0 | FP16 | ||||||
|---|---|---|---|---|---|---|---|---|---|
| 収まる | 速度 t/s | コンテキスト | 収まる | 速度 t/s | コンテキスト | 収まる | 速度 t/s | コンテキスト | |
| DeepSeekDeepSeek R1 Qwen3 8B | ✓ | 113.9 | 128K | ✓ | 67.1 | 32K | ✓ | 37.5 | 32K |
| GemmaGemma 4 31B | ✗ | — | — | ✗ | — | — | ✗ | — | — |
| GLMGLM 4.7 Flash | ✓ | 144.4 | 32K | オフロード | 22.1 | — | オフロード | 12.3 | — |
| gpt-ossgpt-oss 20B | ✓ | 134.8 | 128K | ✓ | 98.9 | 8K | オフロード | 9.2 | — |
| KimiKimi Linear 48B A3B | オフロード | 44.1 | — | オフロード | 25.9 | — | オフロード | 14.4 | — |
| LlamaLlama 3.1 8B | ✓ | 117 | 128K | ✓ | 68.7 | 32K | ✓ | 38.4 | 32K |
| MistralMistral 7B v0.3 | ✓ | 127.1 | 32K | ✓ | 75.2 | 32K | ✓ | 42.2 | 32K |
| QwenQwen3 8B | ✓ | 113.9 | 32K | ✓ | 67.1 | 32K | ✓ | 37.5 | 32K |
判定基準：重み + KV キャッシュ + 実行時オーバーヘッド ≤ 利用可能メモリ、1 枚構成。MoE モデルの「オフロード」はエキスパート重みをシステム RAM に置けば動作することを示し（VRAM にはアテンション層と KV キャッシュのみ）、その速度は RAM 帯域幅 70 GB/s を前提に推定。コンテキスト列は収まる最大段階です。
GeForce RTX 3090 の中古価格推移
推移グラフを描くにはデータが足りません。価格の追跡を始めたばかりです。
プラットフォーム別価格
メルカリ中古
出品なし
Amazon.co.jp新品
出品なし
楽天市場新品
出品なし
Yahoo!ショッピング新品
出品なし
購入リンクにはアフィリエイトタグが含まれる場合がありますが、支払額は変わりません。
よくある質問
GeForce RTX 3090 の VRAM 容量は？
GeForce RTX 3090 は 24GB の GDDR6X メモリを搭載し、帯域幅は 936 GB/s です。
GeForce RTX 3090 で 70B モデルは動きますか？
1 枚では動きません。Q4_K_M・8K コンテキストで 70B 密モデルには約 43GB が必要で、GeForce RTX 3090 の 24GB を超えます。
GeForce RTX 3090 の中古価格は？
中古価格のデータはまだありません。取得が始まり次第ここに表示します。