Q4_K_M · 4Kコンテキスト

Qwen3.6 35B-A3B (MoE) 総35Bのうちトークンごとに3Bが動作するMoEモデル · Q4_K_Mの推定メモリ約22GB

35Bパラメータ中のMoEモデルは、トークンごとに約3Bが活性化されます。メモリロードには35Bの容量が必要であり、デコード帯域幅は3Bの活性パラメータに基づいて消費されます。

Q4_K_Mの推定メモリ
約22GB
総パラメータ
35B
活性パラメータ
3B
ネイティブコンテキスト
256K

モデルから探す

このモデルに合う機器を探す

文書検索も同時に動かすなら

埋め込み・再ランキングモデルを同じGPUまたはユニファイドメモリに置く場合の予備容量です。CPUで別に動かすなら追加なしにしてください。

条件に合う機器 51· 5件を表示

Mac mini M4 Pro 48GB

余裕あり · Q4_K_M · 空き 19.7GB

₩3,035,000

19.6 ~ 46.1 tok/s

Mac mini M5 Pro 48GB

余裕あり · Q4_K_M · 空き 19.7GB

₩4,605,000

23.5 ~ 56.3 tok/s

Studio M4 Max 64GB

余裕あり · Q4_K_M · 空き 34.7GB

₩5,091,500

39.2 ~ 81.9 tok/s

Mac mini M4 Pro 64GB

余裕あり · Q4_K_M · 空き 34.7GB

₩5,160,000

19.6 ~ 46.1 tok/s

MBP M5 Pro 48GB

余裕あり · Q4_K_M · 空き 19.7GB

₩5,194,420

23.5 ~ 56.3 tok/s

価格は範囲の中央値です。GPU単体には基本構成の費用を加えています。速度は同じモデル・4K入力での推定です。

実行ガイド

Qwen3.6 35B-A3B (MoE) ローカルサービィング実行レシピ

デバイスを選択すると、量子化、安全なコンテキスト、GPU オフロード、Flash Attention、KVキャッシュおよびバッチ開始値も一緒に変更されます。

デバイス別速度チューニング

デバイスから再選択したい場合

予算、騒音、オペレーティングシステム、および中古許容の有無を基に、モデルが導入される構成をまず絞り込むことができます。