收錄顯卡56價格追蹤27 天近 24h 價格資料34,228 筆24h 降價最多A100 80GB PCIe-20.0%24h 漲價最多RTX PRO 5000 48GB+17.5%更新於
NT$ TWD
繁體中文

H100 PCIe 價格與中古行情:能部署哪些大型語言模型?

H100 PCIe 有 80GB HBM2e 顯存,頻寬 2,000 GB/s。暫無價資料。4-bit 量化、8K 上下文下最大能裝約 136B 參數的稠密模型,預估 18 tokens/s。

H100 PCIe 價格走勢

價格更新於 —

資料不足,暫時無法產生走勢

累積足夠的有效報價後,將顯示中位價走勢。

購買連結可能含聯盟標記,不影響你支付的價格。

H100 PCIe 完整規格

  • 顯存80 GB · HBM2e
  • 頻寬2,000 GB/s
  • FP16 / BF16756 TFLOPS
  • FP8 / INT81,513 / 1,513 TOPS
位寬
5,120-bit
架構
Hopper (GH100)
核心
14,592
張量核心
456
生態
CUDA
介面
PCIe 5.0 x16
NVLink
600 GB/s
功耗
350 W
供電介面
16-pin
槽位
2
長度
268 mm
類型
資料中心
發布日期
2022年3月22日

H100 PCIe 能跑哪些模型?

單張 H100 PCIe 能跑哪些 50B 參數以內的模型,只列 2026 年起發布的版本

模型大小能否執行速度 t/s最大上下文
Gemma 4 E4B8B5 GB能跑235.1128K
Qwen3.5 9B9.7B5.7 GB能跑209.8256K
Gemma 4 12B12B7.1 GB能跑172.8256K
Gemma 4 26B A4B25.2B(啟用 3.8B)16.9 GB能跑170.7256K
Qwen3.6 27B27.8B16.8 GB能跑80.6256K
Qwen3.8 27B27.8B16.5 GB能跑81.9256K
GLM 4.7 Flash30B(啟用 3B)18.3 GB能跑185.4198K
Gemma 4 31B30.7B18.3 GB能跑72.7256K
Qwen3.6 35B A3B36B(啟用 3B)22.1 GB能跑188.3256K

能跑權重、KV 快取和執行開銷都裝得進顯存,速度按顯存頻寬估算。

需卸載到記憶體僅 MoE 模型:專家權重放進記憶體,速度按記憶體頻寬 70 GB/s 估算。

跑不了這一檔量化下單卡放不下,借記憶體也不行。

雙卡、四卡、八卡 H100 PCIe 能跑哪些大型語言模型?

2026 年起發布的 50B 以上模型,按 vLLM 張量並行、32K 上下文要幾張卡才裝得下

模型大小需要幾張總價總顯示記憶體速度 t/s總功耗
Qwen3.8 Flash Next176B(啟用 6B)111.3 GB2 張暫無160 GB146700 W
DeepSeek V4 Flash284B(啟用 13B)155.1 GB4 張暫無320 GB112.51,400 W
Hy3295B(啟用 21B)182.2 GB4 張暫無320 GB611,400 W
GLM 5.3 Flash320B(啟用 18B)199.7 GB4 張暫無320 GB851,400 W
GLM 5.3744B(啟用 40B)467.3 GB8 張暫無640 GB45.32,800 W
Hy4 preview770B(啟用 49B)467.3 GB8 張暫無640 GB39.72,800 W
DeepSeek V4.1 Flash763B(啟用 8 / 16B)510.3 GB8 張Engram 放記憶體暫無640 GB75.12,800 W
Kimi K2.7 Code1,000B(啟用 32B)583.7 GB8 張暫無640 GB57.22,800 W

張數取 1 / 2 / 4 / 8 張,每張按 90% 顯存計;速度按單卡頻寬估算,總價只算顯示卡。標「Engram 放記憶體」的另需約 203 GB 系統記憶體。支援 NVLink(600 GB/s)。能否實際執行還要看 vLLM 是否支援。

H100 PCIe 租用價格

H100 PCIe 隨需租用每小時 NT$63 起(RunPod),每天用 8 小時約 NT$15,404/月。

方案價格每天 4 小時每天 8 小時每天 24 小時去查看
RunPod租用40 分鐘前更新NT$63/小時NT$7,702/月NT$15,404/月NT$46,213/月去租
Vast.ai租用40 分鐘前更新NT$82/小時NT$10,019/月NT$20,039/月NT$60,116/月去租

其他市場價格

eBay · 美國
暫無
暫無掛單
去查看
Amazon.jp · 日本
暫無
暫無掛單
去查看

購買連結可能含聯盟標記,不影響你支付的價格。

常見問題

H100 PCIe 能跑多大的模型?

單張 H100 PCIe 有 80GB HBM2e 顯示記憶體,在 4-bit 量化、8K 上下文下最大能裝約 136B 參數的稠密模型,8-bit 下約 73B。

H100 PCIe 能跑 70B 模型嗎?

能。在 4-bit 量化、8K 上下文下,70B 稠密模型約需 43GB,H100 PCIe 的 80GB 裝得下。

H100 PCIe 適合跑哪些大型語言模型?

2026 年發布的模型中,4-bit 下能完整放進顯示記憶體的最大稠密模型是 Gemma 4 31B,預估 72.7 tokens/s。MoE 模型中 Qwen3.6 35B A3B 最快,約 188.3 tokens/s。完整列表見上方「能跑哪些模型」表格。

H100 PCIe 跑大型語言模型每秒多少 token?

按顯示記憶體頻寬估算,4-bit、8K 上下文下:8B 稠密模型約 226.5 tokens/s、14B 稠密模型約 142.8 tokens/s、32B 稠密模型約 68.8 tokens/s、70B 稠密模型約 33.1 tokens/s。MoE 模型每個 token 只讀取啟用參數,會快很多。實測通常在估算值的 70%–100%。

雙卡 H100 PCIe 能跑哪些大型語言模型?

兩張 H100 PCIe(共 160GB)按 vLLM 張量並行、4-bit、32K 上下文,能裝下 Qwen3.8 Flash Next。要在 4-bit、32K 上下文下跑 Kimi K2.7 Code,需要 8 張。

H100 PCIe 多少錢?

暫無價資料,價格接入後會顯示在這裡。

H100 PCIe 租一小時多少錢?

截至 2026年9月29日,RunPod 每小時 NT$63、Vast.ai 每小時 NT$82。皆為單卡隨需價格,不含儲存空間和流量。

H100 PCIe 和 A100 80GB PCIe 跑大型語言模型怎麼選?

A100 80GB PCIe 有 80GB 顯示記憶體、1,935 GB/s 頻寬,H100 PCIe 是 80GB、2,000 GB/s。跑 70B 稠密模型(4-bit)預估 H100 PCIe 約 33.1 tokens/s,A100 80GB PCIe 約 32 tokens/s。