Gemma 4 E4B をローカルに導入するには?
Gemma 4 E4B は、Google が 2026 年 4 月に公開したオンデバイス向けの小型モデルです。画像と 30 秒以内の音声を直接入力でき、8GB の GPU で動きます。名前の E は「実効パラメータ」を指し、層ごとの専用埋め込みテーブルを含めると計 8B ですが、実際に計算に関わるのは約 4.5B です。4-bit と 32K コンテキストで約 6.6 GB、128K をフルに使っても約 8.2 GB で済みます。
Gemma 4 E4B のモデル情報
- 4-bit 最小VRAM7 GB · 8K
- パラメータ数8B
- 最大コンテキスト128K
- アーキテクチャ
- Dense
- ライセンス
- Apache-2.0
- 発売日
- 2026年4月2日
- 提供元
- Google DeepMind
- Hugging Face リポジトリ
- google/gemma-4-E4B-it
- GGUF リポジトリ
- unsloth/gemma-4-E4B-it-GGUF
- NVFP4 リポジトリ(Blackwell)
- unsloth/gemma-4-E4B-it-NVFP4
- MLX リポジトリ(Apple)
- mlx-community/gemma-4-e4b-it-4bit
- Ollama タグ
- gemma4:e4b
- レイヤー数
- 42
- 隠れ層次元
- 2,560
- KV ヘッド数
- 2
- ヘッド次元
- 256
Gemma 4 E4B のローカル実行に必要なVRAMは?
| 量子化 | 重みサイズGB | 8K コンテキストGB | 32K コンテキストGB | 128K コンテキスト(最大)GB |
|---|---|---|---|---|
| 1-bit | 2推定 | 3.2 | 3.6 | 5.3 |
| 2-bit | 3.8GGUF | 5 | 5.4 | 7 |
| 3-bit | 4.6GGUF | 5.8 | 6.2 | 7.8 |
| 4-bit | 5GGUF | 6.2 | 6.6 | 8.2 |
| 5-bit | 5.5GGUF | 6.7 | 7.1 | 8.7 |
| 8-bit | 8.2GGUF | 9.4 | 9.8 | 11.4 |
| BF16/FP16 | 15.1GGUF | 16.3 | 16.7 | 18.3 |
詳しい計算ルールはデータの作り方ページをご覧ください。
Gemma 4 E4B は GPU 1 枚で動く?
単体 GPU ならほぼどれでも動き、考えるべきは量子化の選び方です。4-bit は 8K コンテキスト込みでも約 6 GB と小さく、VRAM がこれだけ余るならわざわざ 4-bit まで削る理由はありません。8-bit で 128K をフルに使っても約 11.4 GB で 12GB カードに収まり、RTX 5060 Ti 16GB で約 39 tokens/s と、人が読む速さを大きく上回ります。16GB カードなら圧縮していないオリジナルも動きますが、コンテキストはフルには使えません。名目上は 8B でも、大きな部分は表を引くだけのパラメータで、1 トークンの計算に実際に関わるのは約 4.5B です。そのため実際の速度は見積もりより速いことが多いです。
| デバイス | 価格 | 速度 t/s | 最大コンテキスト |
|---|---|---|---|
| ¥116,6274 件の出品 | 142.5 | 128K | |
| ¥156,40029 件の出品 | 78.8 | 128K | |
| Radeon RX 7900 XTX24 GB | ¥293,6506 件の出品 | 150 | 128K |
| ¥406,9228 件の出品 | 147 | 128K | |
| Ryzen AI Max+ 395 128GBマシン全体 · 128 GB | ¥688,8588 件の出品 | 47.3 | 128K |
| ¥862,1369 件の出品 | 155.8 | 128K | |
| ¥1,399,9909 件の出品 | 236.9 | 128K | |
| ¥1,511,5715 件の出品 | 125.2 | 128K | |
| 価格なし | 236.9 | 128K | |
| Mac Studio M5 Ultra 96GBマシン全体 · 96 GB | 価格なし | 181.3 | 128K |
| 価格なし | 142.5 | 128K | |
| MacBook Pro M5 Max 128GBマシン全体 · 128 GB | 価格なし | 103.8 | 128K |
| 価格なし | 50.2 | 128K |
| デバイス | 価格 | 速度 t/s | 最大コンテキスト |
|---|---|---|---|
| ¥116,6274 件の出品 | 114.2 | 128K | |
| ¥156,40029 件の出品 | 61.8 | 128K | |
| Radeon RX 7900 XTX24 GB | ¥293,6506 件の出品 | 120.5 | 128K |
| ¥406,9228 件の出品 | 118 | 128K | |
| Ryzen AI Max+ 395 128GBマシン全体 · 128 GB | ¥688,8588 件の出品 | 36.7 | 128K |
| ¥862,1369 件の出品 | 125.5 | 128K | |
| ¥1,399,9909 件の出品 | 196.3 | 128K | |
| ¥1,511,5715 件の出品 | 99.8 | 128K | |
| 価格なし | 196.3 | 128K | |
| Mac Studio M5 Ultra 96GBマシン全体 · 96 GB | 価格なし | 147.3 | 128K |
| 価格なし | 114.2 | 128K | |
| MacBook Pro M5 Max 128GBマシン全体 · 128 GB | 価格なし | 82.1 | 128K |
| 価格なし | 39 | 128K |
| デバイス | 価格 | 速度 t/s | 最大コンテキスト |
|---|---|---|---|
| ¥116,6274 件の出品 | 74.6 | 128K | |
| ¥156,40029 件の出品 | 39.2 | 128K | |
| Radeon RX 7900 XTX24 GB | ¥293,6506 件の出品 | 79.1 | 128K |
| ¥406,9228 件の出品 | 77.3 | 128K | |
| Ryzen AI Max+ 395 128GBマシン全体 · 128 GB | ¥688,8588 件の出品 | 22.9 | 128K |
| ¥862,1369 件の出品 | 82.6 | 128K | |
| ¥1,399,9909 件の出品 | 134.7 | 128K | |
| ¥1,511,5715 件の出品 | 64.7 | 128K | |
| 価格なし | 134.7 | 128K | |
| Mac Studio M5 Ultra 96GBマシン全体 · 96 GB | 価格なし | 98.2 | 128K |
| 価格なし | 74.6 | 128K | |
| MacBook Pro M5 Max 128GBマシン全体 · 128 GB | 価格なし | 52.7 | 128K |
| 価格なし | 24.4 | 128K |
よく使われる GPU とマシンだけを、50B 未満と 50B 以上のモデルで分けて、価格の安い順に掲載しています。
Gemma 4 E4B をローカルで動かす前に知っておきたいこと
E4B の「E」
E4B は層ごとに専用の埋め込みテーブルを持っています。これらのテーブルは大きいものの、生成時には参照されるだけで、1 トークンごとに使われるのはそのうちの数行です。実際に計算に関わるのは約 4.5B だけなので、公式はこれを「実効 4B」と呼んでいます。当サイトの VRAM と速度はどちらも 8B として見積もっているため、実際の生成は表の速度より少し速い可能性があります。
思考は既定でオフ
思考は既定でオフで、システムプロンプトの先頭に
<|think|>を加えるとオンになります(Transformers ではenable_thinking=Trueに相当し、llama.cpp のチャットテンプレートも自動で処理します)。思考をオフにすると直接回答を返し、12B 以上のモデルのように空の思考ブロックを出力することはありません。公式のサンプリングパラメータはすべての用途で共通で、temperature1.0、top_p0.95、top_k64 です。画像と音声の渡し方
画像はテキストの前に、音声はテキストの後ろに置きます。音声は最長 30 秒、動画は毎秒 1 フレームで最長 60 秒です。画像を何トークンで表現するかは 70〜1120 の数段階から選べます。OCR や小さな文字の読み取りには高い設定を、分類や動画の把握には低い設定を使います。llama.cpp は 2026 年 4 月 12 日から Gemma 4 の音声入力に対応しています。
得意なこと、苦手なこと
知識や常識はなかなかのものです。Google のモデルカードでは、E4B の MMLU Pro は 69.4 で、前世代の Gemma 3 27B(思考なし)の 67.6 をわずかに上回ります。しかし難しい推論問題では一回り大きいモデルに明らかに劣り、GPQA Diamond は 58.6 と、12B の 78.8 に及びません。音声の文字起こし、画像についての質疑応答、ノート PC 上の軽量アシスタントといった用途に向いています。
起動コマンド
Ollama
- Windows
- macOS
- Linux
ollama run gemma4:e4bllama.cpp
- NVIDIA
- AMD
- Mac
- CPU
llama-server -hf unsloth/gemma-4-E4B-it-GGUF:Q4_K_M -c 8192
vLLM
- Linux
- NVIDIA
- AMD
vllm serve google/gemma-4-E4B-itBlackwell 世代の GPU(RTX 50 シリーズ、RTX PRO 6000、B200)は NVFP4 の重みをネイティブに扱え、サイズは元の約 3 割です。
vllm serve unsloth/gemma-4-E4B-it-NVFP4MLX
- Apple シリコン
画像を扱うモデルは mlx-vlm で動かします。Mac で pip install mlx-vlm を済ませてから実行すると、Hugging Face から MLX 版の重みを取得してサーバーを起動します。
mlx_vlm.server --model mlx-community/gemma-4-e4b-it-4bitファイル名はその週のモデルライブラリ取得時点のものです。定義はデータ方法を参照してください。 データ方法
Gemma ファミリーのほかのモデル
| モデル | 総パラメータ | アクティブ | 4-bit のサイズ |
|---|---|---|---|
| 12B | 12B | 7.1 GB | |
| 25.2B | 3.8B | 16.9 GB | |
| 30.7B | 30.7B | 18.3 GB |