GeForce RTX 4090 能跑什么模型?24GB 显存 · 二手价 · 速度
查价
GeForce RTX 4090 有 24GB GDDR6X 显存,带宽 1,008 GB/s。当前闲鱼二手中位价 ¥22,800。Q4 量化下最大能跑到 32B 参数的模型,预估 36 tokens/s。
GeForce RTX 4090 完整规格
核心16,384
张量核心512
架构Ada Lovelace (AD102)
显存24 GB · GDDR6X
位宽384-bit
带宽1,008 GB/s
BF16 / FP8 / INT8330.3 / 660.6 / 660.6
生态CUDA
别名RTX 4090 · 4090
闲鱼二手¥22,8005 条挂牌 · +3.6%
类型消费卡
功耗450 W
供电接口16-pin 12VHPWR
槽位3
长度304 mm
接口PCIe 4.0 x16
发布日期2022年10月12日
官方定价¥10,759
GeForce RTX 4090 能跑哪些模型?
参考模型取每个家族的主力版本| 模型 | Q4_K_M | Q8_0 | FP16 | ||||||
|---|---|---|---|---|---|---|---|---|---|
| 装得下 | 速度 t/s | 上下文 | 装得下 | 速度 t/s | 上下文 | 装得下 | 速度 t/s | 上下文 | |
| DeepSeekDeepSeek R1 Qwen3 8B | ✓ | 121.8 | 128K | ✓ | 71.9 | 32K | ✓ | 40.3 | 32K |
| GemmaGemma 4 31B | ✗ | — | — | ✗ | — | — | ✗ | — | — |
| GLMGLM 4.7 Flash | ✓ | 148.9 | 32K | 卸载 | 22.2 | — | 卸载 | 12.3 | — |
| gpt-ossgpt-oss 20B | ✓ | 139.4 | 128K | ✓ | 103.4 | 8K | 卸载 | 9.2 | — |
| KimiKimi Linear 48B A3B | 卸载 | 44.3 | — | 卸载 | 26 | — | 卸载 | 14.5 | — |
| LlamaLlama 3.1 8B | ✓ | 125.1 | 128K | ✓ | 73.7 | 32K | ✓ | 41.2 | 32K |
| MistralMistral 7B v0.3 | ✓ | 135.8 | 32K | ✓ | 80.6 | 32K | ✓ | 45.3 | 32K |
| QwenQwen3 8B | ✓ | 121.8 | 32K | ✓ | 71.9 | 32K | ✓ | 40.3 | 32K |
判定口径:权重 + KV cache + 运行开销 ≤ 可用显存,单卡。MoE 模型标「卸载」表示把专家权重放进系统内存后能跑(显存只放注意力层与 KV cache),速度按内存带宽 70 GB/s 估算。上下文列给的是能装下的最大档位。
GeForce RTX 4090 二手价走势
闲鱼二手
2026年9月3日2026年9月3日2026年9月4日2026年9月5日
各平台价格
常见问题
GeForce RTX 4090 有多大显存?
GeForce RTX 4090 有 24GB GDDR6X 显存,带宽 1,008 GB/s。
GeForce RTX 4090 能跑 70B 模型吗?
单卡跑不了。在 Q4_K_M 量化、8K 上下文下,70B 稠密模型约需 43GB,超过 GeForce RTX 4090 的 24GB。
GeForce RTX 4090 二手多少钱?
当前闲鱼二手中位价 ¥22,800。取自平台挂牌价的中位数,每 6 小时更新。