2× DGX Spark
22,3tok/sSpitze
1 Anfrage, Bestwert der Quelle Quelle
Intelligenz25mit Denken
- Einschränkende Lizenz
- Lizenz ungeklärt
Lokale KI · Rezept · 2× DGX Spark
Hy3 295B-A21B NVFP4 mit vLLM auf 2× DGX Spark (mit MTP)
von drowzeys
Engine
- Engine
- vLLM
- Quantisierung
- NVFP4 compressed-tensors + turboquant_k8v4 KV (skip-layers 80)
- Modellfamilie
- Hy3
- Kontext
- 262.144
- Parameter
- 295B MoE / 21B active
- Kreator
- drowzeys
- GitHub-Sterne
- 1
- Repo-Stand
- 17. Aug. 2026
Messwerte
Alle belegten Werte dieses Rezepts, je mit Bedingung und Quelle. Balken im Verhältnis zum größten Wert der Gruppe.
Für dieses Rezept sind keine Messwerte mit Quelle belegt.
Was brauche ich
- Hardware
- 2 × NVIDIA DGX Spark (GB10)
- Gewichte
- Hauptgewicht0xSero/Hy3-299B-NVFP4 other
- Basistencent/Hy3 Apache-2.0
- Engine
- vLLM
- Kontext
- 262.144 Token
Hinweise
Was vor dem Nachbauen wichtig ist.
- Einschränkende Lizenz
- Lizenz ungeklärt
Quellen
Verwandte Rezepte
2× DGX Spark
21,8tok/sSpitze
1 Anfrage, Bestwert der Quelle Quelle
Intelligenzkein unabhängiger Wert
2× DGX Spark
54,4tok/sAlltag
1 Anfrage, Prosa-Prompt, mit MTP (laut Rezept) Quelle
Intelligenz40mit Denken
- Zugang auf Anfrage
- Lizenz ungeklärt
2× DGX Spark
36,1tok/sAlltag
1 Anfrage, Prosa-Prompt, mit DFlash2 (laut Rezept) Quelle
Intelligenz42mit Denken
- ≤ 3 bit: Quantisierung kann Qualität kosten
- Eigener Kernel nötig
- Nicht kommerziell
- Lizenz ungeklärt
2× DGX Spark
35tok/sAlltag
1 Anfrage, Prosa-Prompt, mit EAGLE Quelle
Intelligenzkein unabhängiger Wert
- Experimentell
2× DGX Spark
33,2tok/sAlltag
1 Anfrage, Prosa-Prompt, mit DSpark (laut Rezept) Quelle
Intelligenzkein unabhängiger Wert
- Eigener Kernel nötig
Lokale KI im eigenen Unternehmen?
Im Workshop klären wir, welche Modelle und welche Hardware zu Ihren Aufgaben passen, und bauen den ersten Agenten auf Ihrer Infrastruktur.