---
type: "Article"
title: "Qwen3.8-27B NVFP4 mit vLLM auf 1× DGX Spark (Weschera)"
description: "Qwen3.8-27B NVFP4 mit vLLM auf 1× DGX Spark (Weschera): Rezept von Weschera mit Tempo, Bedingung und Quelle je Zahl, Gewichten und Lizenz."
resource: "https://www.contextstudios.ai/de/lokale-ki/weschera--qwen38-27b-nvfp4-unsloth-mtp3-1x-dgx-spark"
language: "de"
generated:
  by: "process:contextstudios-md/1"
  at: "2026-10-02T19:14:00.854Z"
status: "stable"
---

# Qwen3.8-27B NVFP4 mit vLLM auf 1× DGX Spark (Weschera)

Qwen3.8-27B NVFP4 mit vLLM auf 1× DGX Spark (Weschera): 45 tok/s laut github.com (Datensatz-Stand: 29. Sept. 2026).

- Kreator: [Weschera](https://www.contextstudios.ai/de/lokale-ki/kreatoren/weschera.md)
- Engine: vLLM
- Quantisierung: NVFP4 (unsloth; compressed-tensors) + fp8 KV + triton_attn (fp8-KV auf GB10 nur mit triton, FA kann kein fp8-KV auf sm_121)
- Modellfamilie: Qwen3.8-27B
- Hardware: dgx-spark x1
- Kontext: 262144

## Alle Zahlen

- 45 tok/s (Alltag; Alltag, 1 Anfrage, Prosa-Prompt, mit MTP) — [source](https://github.com/Weschera/Qwen3.8-27B-DGX-Spark-Quant-Ladder/blob/main/README.md)
- decode_tps: 45 (1 Anfrage) — [source](https://github.com/Weschera/Qwen3.8-27B-DGX-Spark-Quant-Ladder/blob/main/README.md)
- decode_tps: 45 (1 Anfrage) — [source](https://github.com/Weschera/Qwen3.8-27B-DGX-Spark-Quant-Ladder/blob/main/README.md)

## Gewichte

- [unsloth/Qwen3.8-27B-NVFP4](https://huggingface.co/unsloth/Qwen3.8-27B-NVFP4) (main, apache-2.0)
- [Qwen/Qwen3.8-27B-FP8](https://huggingface.co/Qwen/Qwen3.8-27B-FP8) (base, apache-2.0)

[https://github.com/Weschera/Qwen3.8-27B-DGX-Spark-Quant-Ladder](https://github.com/Weschera/Qwen3.8-27B-DGX-Spark-Quant-Ladder)

## Related

- [Lokale KI auf Ihrer Hardware.](https://www.contextstudios.ai/de/lokale-ki.md)