2× DGX Spark
54,4tok/sAlltag
1 Anfrage, Prosa-Prompt, mit MTP (laut Rezept) Quelle
Intelligenz40mit Denken
- Zugang auf Anfrage
- Lizenz ungeklärt
Engine
- Engine
- vLLM v0.25.0
- Quantisierung
- NVFP4 W4A4 (ModelOpt mixed) + FP8 KV
- Modellfamilie
- Hy3-295B
- Kontext
- 49.152
- Parameter
- 295B (laut Name)
- Kreator
- r0b0tlab
- GitHub-Sterne
- 1
- Repo-Stand
- 15. Juli 2026
Messwerte
Alle belegten Werte dieses Rezepts, je mit Bedingung und Quelle. Balken im Verhältnis zum größten Wert der Gruppe.
Für dieses Rezept sind keine Messwerte mit Quelle belegt.
Was brauche ich
- Hardware
- 2 × NVIDIA DGX Spark (GB10)
- Gewichte
- Hauptgewichtr0b0tlab/Hy3-295B-NVFP4 other
- Engine
- vLLM v0.25.0
- Kontext
- 49.152 Token
Hinweise
Was vor dem Nachbauen wichtig ist.
- Eigener Kernel nötig
- Lizenz ungeklärt
Quellen
Verwandte Rezepte
2× DGX Spark
36,1tok/sAlltag
1 Anfrage, Prosa-Prompt, mit DFlash2 (laut Rezept) Quelle
Intelligenz42mit Denken
- ≤ 3 bit: Quantisierung kann Qualität kosten
- Eigener Kernel nötig
- Nicht kommerziell
- Lizenz ungeklärt
2× DGX Spark
35tok/sAlltag
1 Anfrage, Prosa-Prompt, mit EAGLE Quelle
Intelligenzkein unabhängiger Wert
- Experimentell
2× DGX Spark
33,2tok/sAlltag
1 Anfrage, Prosa-Prompt, mit DSpark (laut Rezept) Quelle
Intelligenzkein unabhängiger Wert
- Eigener Kernel nötig
2× DGX Spark
32,5tok/sAlltag
1 Anfrage, Prosa-Prompt, mit DSpark (adaptive verification) (laut Rezept) Quelle
Intelligenzkein unabhängiger Wert
- Experimentell
- Eigener Kernel nötig
2× DGX Spark
31,6tok/sAlltag
1 Anfrage, Prosa-Prompt, mit DSpark (laut Rezept) Quelle
Intelligenz40mit Denkenohne Denken 25
- ≤ 3 bit: Quantisierung kann Qualität kosten
- Eigener Kernel nötig
Lokale KI im eigenen Unternehmen?
Im Workshop klären wir, welche Modelle und welche Hardware zu Ihren Aufgaben passen, und bauen den ersten Agenten auf Ihrer Infrastruktur.