收錄顯卡41價格追蹤3 天自 2026年9月3日近 24h 價格資料11,753 筆24h 降價最多Radeon RX 7900 XTX-5.6%24h 漲價最多A100 40GB PCIe+48.1%資料更新於 2026年9月5日

Llama 4 Scout 17B 16E 本地部署需要多少記憶體?

看能跑的裝置

Llama 4 Scout 17B 16E 是 MoE 模型,總參數 108.6B,每 token 啟用 17B。Q4 量化整機放顯存需要 64GB;把專家放進系統記憶體後只需 10GB 顯存 + 55GB 記憶體。目前最便宜能跑的顯示卡是 CMP 170HX 64GB (改裝),二手約 NT$60,403,預估 71.5 tokens/s。卸載模式下最便宜能跑的顯示卡是 GeForce RTX 2080 Ti,預估 11 tokens/s。

Llama 4 Scout 17B 16E 版本資訊

發布日期2025年4月2日
小版本
架構MoE
Ollama 標籤llama4:scout
30 天下載174,923
Q4 最低記憶體64 GB · Q4_K_M · 8K
專家卸載10 GB 顯存 + 55 GB 記憶體
參數量108.6B
MoE17B
層數48
隱藏維度5,120
KV 頭8
頭維度128
上下文上限10M
廠商Meta AI

Llama 4 Scout 17B 16E 各量化與上下文的記憶體需求

8K 總記憶體

MoE:總參數 108.6B 全部要常駐記憶體,速度按每 token 啟用的 17B 計算。

量化權重體積GB8K 總記憶體GB32K 總記憶體GB128K 總記憶體GB
Q4_K_M65.4GGUF63.167.685.6
Q5_K_M76.5GGUF75.880.398.3
Q8_0112.6115.1119.6137.6
FP16215.6GGUF215219.5237.5

總記憶體 = 權重 + KV cache(FP16)+ 1GB 執行開銷。標 GGUF 的權重是倉庫裡的實測檔案體積,標「估」的按每參數位元組估算。超過這個模型 10M 上下文上限的檔位寫「—」。

什麼顯示卡能跑 Llama 4 Scout 17B 16E?

Q4_K_M · 8K 上下文 · 依閒魚二手價升序
裝置顯存GB二手價預估 t/s建議上下文
CMP 170HX 64GB (改裝)64NT$60,4034 筆掛牌71.58K
Instinct MI21064NT$86,96217 筆掛牌59.78K
RTX PRO 5000 Blackwell 72GB72NT$291,44011 筆掛牌66.232K
RTX PRO 6000D84NT$329,04619 筆掛牌7432K
RTX PRO 6000 Blackwell96NT$557,02710 筆掛牌81.2128K
DGX Spark 128GB128暫無掛牌17.1128K
Mac Studio M4 Max 128GB128暫無掛牌25.8128K
Mac Studio M5 Max 128GB128暫無掛牌28.6128K
MacBook Pro M4 Max 128GB128暫無掛牌25.8128K
MacBook Pro M5 Max 128GB128暫無掛牌28.6128K
Ryzen AI Max+ 395 128GB128暫無掛牌11.7128K
Mac Studio M3 Ultra 512GB512暫無掛牌36.8128K

判定口徑:權重 + KV cache + 執行開銷 ≤ 可用記憶體,單卡。MoE 模型標「卸載」表示把專家權重放進系統記憶體後能跑(顯存只放注意力層與 KV cache),速度按記憶體頻寬 70 GB/s 估算。上下文欄給的是能裝下的最大檔位。

把專家放進記憶體後還能跑 Llama 4 Scout 17B 16E 的顯示卡

專家權重放系統記憶體,需要 ≥ 55 GB 記憶體;顯存只放注意力層、共享專家和 KV cache,Q4 下最低 10 GB。速度受記憶體頻寬限制(按 70 GB/s 估算),比整機放顯存慢得多。

裝置顯存GB二手價需記憶體GB預估 t/s
GeForce RTX 2080 Ti11NT$7,8975511
Radeon RX 7800 XT16NT$12,2225510.3
Radeon RX 7900 XT20NT$18,7985510.8
Radeon RX 9070 XT16NT$24,5845510.3
Arc Pro B6024NT$24,909559.2
Radeon RX 7900 XTX24NT$25,8545511.2
GeForce RTX 408016NT$35,6785511.2
GeForce RTX 309024NT$37,8365511.7
GeForce RTX 5070 Ti16NT$40,6325511.6
Arc Pro B7032NT$47,0025510
Radeon PRO W780032NT$47,4775510.1
CMP 170HX 40GB (改裝)40NT$50,7675512.3
GeForce RTX 508016NT$54,0575511.7
Radeon AI PRO R970032NT$55,9385510.3
RTX PRO 4000 Blackwell24NT$74,2705511.1
Radeon PRO W790048NT$103,4145511
GeForce RTX 409024NT$107,1755511.8
GeForce RTX 5090 D V224NT$117,5165512.1
GeForce RTX 4090 48GB (改裝)48NT$119,8675511.8
RTX PRO 4500 Blackwell32NT$121,5125511.6
GeForce RTX 5090 D32NT$145,2505512.4
A100 40GB PCIe40NT$180,9755512.3
GeForce RTX 509032NT$186,8515512.4
RTX PRO 5000 Blackwell 48GB48NT$220,9315512.1
Tesla V100 16GB165511.6
Arc Pro B65325510
GeForce RTX 4080 SUPER 32GB (改裝)325511.3
Instinct MI100325511.6
Tesla V100 32GB325511.6

用 Ollama / llama.cpp / vLLM 啟動 Llama 4 Scout 17B 16E

Ollama

Ollama 一行指令拉起,量化檔位由官方標籤決定。

ollama run llama4:scout
llama.cpp

llama.cpp 直接從 Hugging Face 拉 GGUF,-c 是上下文長度。

llama-server -hf unsloth/Llama-4-Scout-17B-16E-Instruct-GGUF:Q4_K_M -c 8192
vLLM

vLLM 跑的是原始精度權重,記憶體需求比 GGUF 高得多,通常要多卡。

vllm serve meta-llama/Llama-4-Scout-17B-16E-Instruct

量化檔名以模型庫當週抓取為準,口徑見資料方法。 資料方法

常見問題

Llama 4 Scout 17B 16E 需要多少記憶體?

在 Q4_K_M 量化、8K 上下文下 Llama 4 Scout 17B 16E 約需 64GB 記憶體,留到 76GB 更穩。

哪張顯示卡最便宜能跑 Llama 4 Scout 17B 16E?

CMP 170HX 64GB (改裝),64GB 記憶體,目前二手中位價約 NT$60,403,預估 71.5 tokens/s。

Llama 4 Scout 17B 16E 能用 Ollama 跑嗎?

能,指令是 ollama run llama4:scout。