プリフィル・トークン生成速度

Ryzen AI Max+ 395 128GBでのQwen3.8 27B速度:プリフィル・トークン生成

最終更新

256 GB/s
27B
11.2 ~ 12.5 tok/sデコード速度
モデル全体のロード(17.56GB / 96GB)
最初のトークン (TTFT)
46.6 ~ 85.4秒コンテキスト 4,096トークンを含む
プリフィル速度
48 ~ 88 tok/s46.5 ~ 85.3秒 (スペックベース推定)
全体消費時間(E2E)
約62.8 ~ 103.5秒203トークン回答合計
再生ボタンを押すと、文脈プリフィル後に生成が開始されます。
待機中
詳細条件を展開する 4-bit · 4K · 通常のデコード
量子化精度必要 17.56GB
入力文脈長4K トークン
基本
基本
例質問:
203 トークン回答

構成確認

Ryzen AI Max+ 395 128GB · メモリ 128GB

Qwen3.8 27B Q4_K_M の構成です。販売ページのメモリ容量が同じか確認してください。

すでに持っている方は実行設定へ

他のデバイスと並べてみましょうか?

同じモデルでプリフィルから比較したり、トークン生成速度だけを並べて確認できます。

文書が長くなると、どう変わる?入力長ごとの待ち時間・速度・メモリを開く
詳細分析および全体 61ハードウェア比較

代表的な条件

20件をすべて見る