Instinct MI100：32GB VRAMで動かせるローカルLLMは？
価格を見る
Instinct MI100 は 32GB の HBM2 メモリと 1,229 GB/s の帯域幅を備えます。中古価格のデータはまだありません。Q4 量子化では最大 32B パラメータのモデルが動き、推定 31 tokens/s です。
Instinct MI100 の詳細スペック
コア7,680
Tensor コア480
アーキテクチャCDNA (Arcturus)
メモリ32 GB · HBM2
バス幅4,096-bit
帯域幅1,229 GB/s
BF16 / FP8 / INT892.3 / — / 92.3
エコシステムROCm
別名MI100 · AMD MI100 32GB
eBay（米国中古）—価格データなし
種別データセンター
消費電力300 W
補助電源2× 8-pin
スロット2
長さ267 mm
インターフェースPCIe 4.0 x16
発売日2020年11月16日
希望小売価格—
Instinct MI100 で動かせるモデルは？
各ファミリーの主力バージョンを参照モデルとしています| モデル | Q4_K_M | Q8_0 | FP16 | ||||||
|---|---|---|---|---|---|---|---|---|---|
| 収まる | 速度 t/s | コンテキスト | 収まる | 速度 t/s | コンテキスト | 収まる | 速度 t/s | コンテキスト | |
| DeepSeekDeepSeek R1 Qwen3 8B | ✓ | 107.4 | 128K | ✓ | 63.1 | 128K | ✓ | 35.2 | 32K |
| GemmaGemma 4 31B | ✓ | 27.8 | 8K | ✗ | — | — | ✗ | — | — |
| GLMGLM 4.7 Flash | ✓ | 140.5 | 128K | オフロード | 22.1 | — | オフロード | 12.2 | — |
| gpt-ossgpt-oss 20B | ✓ | 130.8 | 128K | ✓ | 95.1 | 128K | オフロード | 9.2 | — |
| KimiKimi Linear 48B A3B | ✓ | 146.3 | 128K | オフロード | 25.7 | — | オフロード | 14.3 | — |
| LlamaLlama 3.1 8B | ✓ | 110.3 | 128K | ✓ | 64.7 | 128K | ✓ | 36 | 32K |
| MistralMistral 7B v0.3 | ✓ | 119.9 | 32K | ✓ | 70.8 | 32K | ✓ | 39.7 | 32K |
| QwenQwen3 8B | ✓ | 107.4 | 32K | ✓ | 63.1 | 32K | ✓ | 35.2 | 32K |
判定基準：重み + KV キャッシュ + 実行時オーバーヘッド ≤ 利用可能メモリ、1 枚構成。MoE モデルの「オフロード」はエキスパート重みをシステム RAM に置けば動作することを示し（VRAM にはアテンション層と KV キャッシュのみ）、その速度は RAM 帯域幅 70 GB/s を前提に推定。コンテキスト列は収まる最大段階です。
Instinct MI100 の中古価格推移
推移グラフを描くにはデータが足りません。価格の追跡を始めたばかりです。
プラットフォーム別価格
メルカリ中古
出品なし
Amazon.co.jp新品
出品なし
楽天市場新品
出品なし
Yahoo!ショッピング新品
出品なし
購入リンクにはアフィリエイトタグが含まれる場合がありますが、支払額は変わりません。
よくある質問
Instinct MI100 の VRAM 容量は？
Instinct MI100 は 32GB の HBM2 メモリを搭載し、帯域幅は 1,229 GB/s です。
Instinct MI100 で 70B モデルは動きますか？
1 枚では動きません。Q4_K_M・8K コンテキストで 70B 密モデルには約 43GB が必要で、Instinct MI100 の 32GB を超えます。
Instinct MI100 の中古価格は？
中古価格のデータはまだありません。取得が始まり次第ここに表示します。