本地部署 Gemma 需要什么显卡?各版本显存需求一览
Gemma 目前有 4 个能本地部署的版本,最小的 Gemma 4 E4B 在 Q4 量化下需要 7GB 显存,最大的 Gemma 4 31B 需要 26GB。最便宜能跑起来的设备是 Tesla V100 16GB,约 ¥2,051。
Gemma 各版本的显存需求
eBay
| 版本 | 发布日期 | 上下文 | |||
|---|---|---|---|---|---|
| Gemma 4 E4B稠密 | 8B | 2026年3月2日 | 128K | 7 | Tesla V100 16GB¥2,051 · 16 GB |
| Gemma 4 12B稠密 | 12B | 2026年5月23日 | 256K | 11 | Tesla V100 16GB¥2,051 · 16 GB |
| Gemma 4 26B A4BMoE | 25.8B(激活 4B) | 2026年3月11日 | 256K | 6另需 13 GB 内存 | Tesla V100 16GB¥2,051 · 16 GB · 专家卸载 |
| Gemma 4 31B稠密 | 31.3B | 2026年3月11日 | 256K | 26 | Tesla V100 32GB¥4,842 · 32 GB |
最低显存 = Q4_K_M 权重 + 8K 上下文 KV cache + 1GB 运行开销,向上取整;最便宜能跑的设备按当前价格基准的中位价升序,取第一台装得下的。
关于 Gemma
Gemma 由 Google DeepMind 发布,许可证为 Apache-2.0。本页收录 4 个版本,参数量从 8B 到 31.3B,结构参数与量化体积依据 Hugging Face 等来源核验后更新。
厂商Google DeepMind
许可证Apache-2.0
Hugging Face 组织google