両側同時体験 · 推奨実行設定

DGX Spark 1台対2台によるローカルLLMサービィス比較

2つのノード構成は、256GB単一メモリではなく、2つの128GBノードです。より大きなモデルや処理量の余裕を目的とする場合に有利ですが、単一リクエストの速度がそのまま2倍になるわけではありません。

比較されるデバイスとモデル

比較範囲
比較条件を展開する

同じ 203トークンごとの回答の予想時間です。公開測定があるアクセラレーションのみが自動的に選択され、各結果ではデバイスごとの実行フォーマットが表示されます。

左側

開始前

DGX Spark 128GB

最初のトークン2.7 ~ 4.9秒
プリフィル839 ~ 1,535 tok/s
トークン生成16.7 ~ 23.4 tok/s

開始ボタンを押すと、双方のデバイスが同時に同じ回答を生成します。

llama.cpp · Q4_K_M0.0秒 · 0/203

右側

開始前

2× DGX Spark 256GB

最初のトークン1.7 ~ 4.3秒
プリフィル973 ~ 2,517 tok/s
トークン生成16.7 ~ 33.8 tok/s

開始ボタンを押すと、双方のデバイスが同時に同じ回答を生成します。

4ビット・2ノード構成0.0秒 · 0/203

この条件下では 2× DGX Spark 256GBが 全体の回答を 約 1.2まず、バッチをマジます。

入力処理から203トークン回答完了までを比較します。

自分に合うのはどちら?

回答完了

2× DGX Spark 256GB

推定の中央値では、同じ回答を約1.2倍の速さで完了します。

入力処理

2× DGX Spark 256GB

入力処理速度の推定中央値は1,745 tok/sで、こちらが上回ります。

画像・動画生成

生成モデル別に確認

LLMの速度だけでは判断できません。画像・動画のモデルと解像度を別途選んでください。

実行環境

機器別の設定

llama.cpp · Q4_K_M / 4ビット・2ノード構成。実行環境が異なる場合、速度差にはソフトウェアやモデル形式の違いも含まれます。

推定消費電力

DGX Spark 128GB

LLM使用中の推定消費電力は約190Wで、こちらが低くなります。騒音と本体サイズは別途確認が必要です。

価格差の判断

2× DGX Spark 256GBの参考価格は中央値で約991万ウォン高く、推定回答時間は約15%短くなります。

購入前に確認しておきたい項目

比較基準DGX Spark 128GB2× DGX Spark 256GB
利用可能な高速メモリ116GB232GB
メモリ帯域273GB/s546GB/s
全体完了の予想14秒12秒
LLM連続負荷の推定約190W約380W
韓国の参考価格(ウォン)952〜1,030万ウォン1,904〜2,060万ウォン
DGX Spark 128GB 詳細表示
2× DGX Spark 256GB 詳細表示

表示値は単一ユーザーの想定範囲です。マルチGPU・マルチデバイス構成では、ランタイムおよびインターフェイスによって実際の結果が異なる可能性があります。