Q4_K_M · 4Kコンテキスト

Gemma 4 26B-A4B (MoE) 総25.2Bのうちトークンごとに3.8Bが動作するMoEモデル · Q4_K_Mの推定メモリ約16GB

25.2Bパラメータ中のMoEモデルで、トークンごとに3.8Bが活性化されます。256K(262,144)のネイティブコンテキストをサポートし、ロード対比で高速なデコードを提供します。

Q4_K_Mの推定メモリ
約16GB
総パラメータ
25.2B
活性パラメータ
3.8B
ネイティブコンテキスト
256K

モデルから探す

このモデルに合う機器を探す

文書検索も同時に動かすなら

埋め込み・再ランキングモデルを同じGPUまたはユニファイドメモリに置く場合の予備容量です。CPUで別に動かすなら追加なしにしてください。

条件に合う機器 55· 5件を表示

Mac mini M6 24GB

余裕あり · Q4_K_M · 空き 4.4GB

₩2,179,000

13.1 ~ 34.7 tok/s

Mac mini M4 Pro 24GB

余裕あり · Q4_K_M · 空き 4.4GB

₩2,650,000

23.4 ~ 55.8 tok/s

Mac mini M6 32GB

余裕あり · Q4_K_M · 空き 11.4GB

₩2,774,000

13.1 ~ 34.7 tok/s

MBA M5 24GB

余裕あり · Q4_K_M · 空き 4.4GB

₩2,849,500

11.2 ~ 31 tok/s

MBP M3 Pro 36GB

余裕あり · Q4_K_M · 空き 14.4GB

₩2,850,000

11.2 ~ 31 tok/s

価格は範囲の中央値です。GPU単体には基本構成の費用を加えています。速度は同じモデル・4K入力での推定です。

実行ガイド

Gemma 4 26B-A4B (MoE) ローカルサービィング実行レシピ

デバイスを選択すると、量子化、安全なコンテキスト、GPU オフロード、Flash Attention、KVキャッシュおよびバッチ開始値も一緒に変更されます。

デバイス別速度チューニング

デバイスから再選択したい場合

予算、騒音、オペレーティングシステム、および中古許容の有無を基に、モデルが導入される構成をまず絞り込むことができます。