Lokale KI · Rezept · 3× DGX Spark

MiniMax-M3 428B NVFP4 mit vLLM auf 3× DGX Spark

MiniMax-M3 428B NVFP4 mit vLLM auf 3× DGX Spark: 10,5 tok/s laut github.com (Datensatz-Stand: 3. Nov. 2026).

von tonyd2wild

10,5tok/sSpitze

1 Anfrage, Bestwert der Quelle

Quelle: github.com
Intelligenz (Originalmodell) · Artificial Analysis29mit Denken

Engine

Engine
vLLM
Quantisierung
NVFP4
Modellfamilie
MiniMax-M3
Kontext
200.000
Parameter
428B-A23B
Kreator
tonyd2wild
GitHub-Sterne
16
Repo-Stand
15. Aug. 2026

Messwerte

Alle belegten Werte dieses Rezepts, je mit Bedingung und Quelle. Balken im Verhältnis zum größten Wert der Gruppe.

Decode · 1 Anfrage

  • Spitze (Decode)10,5 tok/sAuf RoCE; ~6 auf 1GbE Quelle 

Was brauche ich

Hardware
3 × NVIDIA DGX Spark (GB10)
Gewichte
Engine
vLLM
Kontext
200.000 Token

Verwandte Rezepte

← Zur Übersicht

Lokale KI im eigenen Unternehmen?

Im Workshop klären wir, welche Modelle und welche Hardware zu Ihren Aufgaben passen, und bauen den ersten Agenten auf Ihrer Infrastruktur.