收录显卡45价格追踪8 天自 2026年9月3日近 24h 价格数据7,191 条24h 降价最多Mac Studio M4 Max 128GB-6.7%24h 涨价最多GeForce RTX 5070 Ti+21.0%更新于

DeepSeek V4.1 Flash 如何本地部署?

DeepSeek V4.1 Flash 是 MoE 模型,总参数 552B,每 token 激活 8 / 16B。Q4 量化整机放显存需要 309GB;把专家放进系统内存后只需 7GB 显存 + 304GB 内存。当前最便宜能跑的显卡是 Mac Studio M3 Ultra 512GB,约 ¥129,900,预估 41.2 tokens/s。卸载模式下最便宜能跑的显卡是 Tesla V100 16GB,预估 9 tokens/s。

DeepSeek V4.1 Flash 版本信息

发布日期2026年9月10日
小版本
许可证MIT
架构MoE
GGUF 仓库
Ollama 标签
Q4 最低显存309 GB · Q4_K_M · 8K
专家卸载7 GB 显存 + 304 GB 内存
参数量552B
MoE8 / 16B
层数40
隐藏维度5,120
KV 头1
头维度512
上下文上限1M
厂商DeepSeek

DeepSeek V4.1 Flash 本地部署需要多少显存?

MoE:总参数 552B 全部要驻留显存,速度按每 token 激活的 16B 算。

量化权重体积GB8K 总显存GB32K 总显存GB128K 总显存GB
1-bit129.6130.6130.6130.7
2-bit205.1206.1206.1206.2
3-bit264.5265.5265.5265.6
4-bit307.7308.7308.7308.8
5-bit372.5373.5373.5373.6
8-bit572.2573.2573.2573.3
FP161,079.61,080.61,080.61,080.7

总显存 = 权重 + KV cache(FP16)+ 1GB 运行开销。标 GGUF 的权重是仓库里的实测文件体积,标「估」的按每参数字节估算。超过这个模型 1M 上下文上限的档位写「—」。各档取仓库里该比特数的任一文件,优先 unsloth 动态量化,所以同一档不同模型对应的文件名可能不同。

什么显卡能跑 DeepSeek V4.1 Flash?

闲鱼
设备显存GB预估 t/s建议上下文
Mac Studio M3 Ultra 512GB512¥129,9006 条挂单41.2128K

判定口径:权重 + KV cache + 运行开销 ≤ 可用显存,单卡。MoE 模型标「卸载」表示把专家权重放进系统内存后能跑(显存只放注意力层与 KV cache),速度按内存带宽 70 GB/s 估算。上下文列给的是能装下的最大档位。

DeepSeek V4.1 Flash 混合推理推荐显卡

闲鱼

专家权重放系统内存,需要 ≥ 304 GB 内存;显存只放注意力层、共享专家和 KV cache,Q4 下最低 7 GB。速度受内存带宽限制(按 70 GB/s 估算),比整机放显存慢得多。

设备显存GB需内存GB预估 t/s
Tesla V100 16GB16¥8803049.1
GeForce RTX 2080 Ti 22GB22¥2,6003048.9
Instinct MI50 32GB32¥2,7253049
Radeon RX 6950 XT16¥2,9993048.5
Radeon RX 7800 XT16¥3,1003048.6
Tesla V100 32GB32¥3,2003049.1
Radeon RX 7900 XT20¥4,2993048.8
GeForce RTX 5060 Ti 16GB16¥4,6883048.6
Arc Pro B6024¥5,2753048.1
Radeon RX 7900 XTX24¥5,8003048.9
Radeon RX 9070 XT16¥6,1003048.6
GeForce RTX 507012¥6,1753048.9
GeForce RTX 408016¥7,7503049
GeForce RTX 309024¥8,1003049.1
Arc Pro B7032¥9,8503048.4
GeForce RTX 5070 Ti16¥9,8993049.1
Radeon AI PRO R970032¥11,0503048.6
CMP 170HX 40GB40¥11,3003049.4
Radeon PRO W780032¥12,4003048.5
GeForce RTX 508016¥12,4503049.1
CMP 170HX 64GB64¥14,0503049.3
RTX PRO 4000 Blackwell24¥15,6503048.9
Instinct MI21064¥18,5003049.2
Radeon PRO W790048¥22,0003048.9
GeForce RTX 409024¥23,5003049.2
GeForce RTX 5090 D V224¥23,9003049.3
RTX PRO 4500 Blackwell32¥25,8503049.1
GeForce RTX 4090 48GB48¥26,6003049.2
A100 40GB PCIe40¥30,9503049.4
Mac Studio M4 Max 128GB128¥32,2003048.5
DGX Spark 128GB128¥32,5003048
GeForce RTX 5090 D32¥32,9003049.4
MacBook Pro M4 Max 128GB128¥35,4003048.5
Mac Studio M5 Max 128GB128¥39,5503048.6
GeForce RTX 509032¥43,8003049.4
RTX PRO 5000 Blackwell 48GB48¥46,8003049.3
MacBook Pro M5 Max 128GB128¥54,8003048.6
RTX PRO 5000 Blackwell 72GB72¥65,0003049.3
RTX PRO 6000D84¥68,0003049.4
RTX PRO 6000 Blackwell96¥123,9003049.4
Arc Pro B65323048.4
GeForce RTX 4080 SUPER 32GB323049
Instinct MI100323049.1
Ryzen AI Max+ 395 128GB1283047.3

用 Ollama / llama.cpp / vLLM 本地部署 DeepSeek V4.1 Flash

Ollama

Ollama 库暂无官方标签。

vLLM

运行前请按部署指南准备适配的运行环境与硬件。

docker run --gpus all --privileged --ipc=host -p 8000:8000 -v ~/.cache/huggingface:/root/.cache/huggingface -e VLLM_ENGINE_READY_TIMEOUT_S=3600 -e VLLM_USE_RUST_FRONTEND=1 vllm/vllm-openai:deepseekv41-flash-0909 deepseek-ai/DeepSeek-V4.1-Flash --tokenizer-mode deepseek_v41 --tensor-parallel-size 8 --tool-call-parser deepseek_v41 --enable-auto-tool-choice --reasoning-parser deepseek_v41 --mm-encoder-tp-mode data

量化文件名以模型库当周抓取为准,口径见数据方法。 数据方法

常见问题

DeepSeek V4.1 Flash 需要多少显存?

在 Q4_K_M 量化、8K 上下文下 DeepSeek V4.1 Flash 约需 309GB 显存,留到 372GB 更稳。

哪张显卡最便宜能跑 DeepSeek V4.1 Flash?

Mac Studio M3 Ultra 512GB,512GB 显存,当前中位价约 ¥129,900,预估 41.2 tokens/s。

DeepSeek V4.1 Flash 能用 Ollama 跑吗?

暂时不能,Ollama 库还没有它的官方标签,也还没有公开的 GGUF 量化。