1× Mac
53,3tok/sAlltag
1 Anfrage, Prosa-Prompt, mit MTP (nativ) (laut Rezept) Quelle
Intelligenzkein unabhängiger Wert
- Lizenz ungeklärt
Lokale KI · Rezept · 1× DGX Spark
Qwen3.8-27B NVFP4 mit Atlas auf 1× DGX Spark
Qwen3.8-27B NVFP4 mit Atlas auf 1× DGX Spark: 19 tok/s laut github.com (Datensatz-Stand: 29. Sept. 2026).
von Weschera
Engine
- Engine
- Atlas
- Quantisierung
- NVFP4 (unsloth); MTP-Head bf16 (--mtp-quantization bf16); fp8 KV (Engine-Default)
- Modellfamilie
- Qwen3.8-27B
- Kontext
- 32.768
- Parameter
- 27B (dicht)
- Kreator
- Weschera
- GitHub-Sterne
- 0
- Repo-Stand
- 15. Aug. 2026
Messwerte
Alle belegten Werte dieses Rezepts, je mit Bedingung und Quelle. Balken im Verhältnis zum größten Wert der Gruppe.
Decode · 1 Anfrage
Was brauche ich
- Hardware
- 1 × NVIDIA DGX Spark (GB10)
- Gewichte
- Hauptgewichtunsloth/Qwen3.8-27B-NVFP4 Apache-2.0
- Engine
- Atlas
- Kontext
- 32.768 Token
Hinweise
Was vor dem Nachbauen wichtig ist.
- Experimentell
- Eigener Kernel nötig
Quellen
Verwandte Rezepte
1× DGX Spark
45tok/sAlltag
1 Anfrage, Prosa-Prompt, mit MTP Quelle
Intelligenzkein unabhängiger Wert
4× DGX Spark
35,1tok/sAlltag
1 Anfrage, realistischer Prompt, mit Qwen MTP3 probabilistic mit standard rejection (laut Rezept) Quelle
Intelligenz34mit Denkenohne Denken 20
- Eigener Kernel nötig
1× RTX 3090
27,8tok/sGemischt
1 Anfrage, gemischtes Prompt-Set, Kontext 150000, mit DFlash2 (laut Rezept) Quelle
Intelligenz34mit Denkenohne Denken 20
- Eigener Kernel nötig
1× DGX Spark
27,8tok/sGemischt
1 Anfrage, gemischtes Prompt-Set, mit MTP Quelle
Intelligenz34mit Denkenohne Denken 20
- Lizenz ungeklärt
1× DGX Spark
25,2tok/sGemischt
1 Anfrage, gemischtes Prompt-Set, mit DFlash2 (laut Rezept) Quelle
Intelligenzkein unabhängiger Wert
- Eigener Kernel nötig
Lokale KI im eigenen Unternehmen?
Im Workshop klären wir, welche Modelle und welche Hardware zu Ihren Aufgaben passen, und bauen den ersten Agenten auf Ihrer Infrastruktur.