---
type: "Article"
title: "Qwen3.8-27B EXL3 mit vLLM auf 4× DGX Spark"
description: "Qwen3.8-27B EXL3 mit vLLM auf 4× DGX Spark: Rezept von fujitsupolycom mit Tempo, Bedingung und Quelle je Zahl, Gewichten und Lizenz."
resource: "https://www.contextstudios.ai/de/lokale-ki/fujitsupolycom--qwen3.8-27b-exl3-k5k6-tp4-4x-dgx-spark"
language: "de"
generated:
  by: "process:contextstudios-md/1"
  at: "2026-10-02T22:00:09.643Z"
status: "stable"
---

# Qwen3.8-27B EXL3 mit vLLM auf 4× DGX Spark

Qwen3.8-27B EXL3 mit vLLM auf 4× DGX Spark: 35,1 tok/s laut github.com (Datensatz-Stand: 29. Sept. 2026).

- Kreator: [fujitsupolycom](https://www.contextstudios.ai/de/lokale-ki/kreatoren/fujitsupolycom.md)
- Engine: vLLM
- Quantisierung: EXL3 K5/K6 gemischt, 21.59 GB (hf hydrated); FP8 KV (kv_cache_dtype fp8); EXL3-Prefill FP8, Tile 256
- Modellfamilie: Qwen3.8-27B
- Hardware: dgx-spark x4
- Kontext: 1048576
- Artificial Analysis Intelligence Index: 33.7 ([source](https://artificialanalysis.ai/models/qwen3-8-27b))

## Alle Zahlen

- 35,1 tok/s (Alltag; Alltag, 1 Anfrage, realistischer Prompt, mit Qwen MTP3 probabilistic mit standard rejection (laut Rezept)) — [source](https://github.com/FujitsuPolycom/sparkring/blob/main/performance/records/qwen38-27b/normalized-tp4-1m-probmtp-temp1-20260823.md)
- decode_tps: 35.07 (1 Anfrage) — [source](https://github.com/FujitsuPolycom/sparkring/blob/main/performance/records/qwen38-27b/normalized-tp4-1m-probmtp-temp1-20260823.md)
- decode_tps: 48.46 (1 Anfrage) — [source](https://github.com/FujitsuPolycom/sparkring/blob/main/performance/records/qwen38-27b/normalized-tp4-1m-probmtp-temp1-20260823.md)
- prefill_tps: 1964 (1 Anfrage) — [source](https://github.com/FujitsuPolycom/sparkring/blob/main/performance/records/qwen38-27b/normalized-tp4-1m-probmtp-temp1-20260823.md)

## Gewichte

- [malaiwah/Qwen3.8-27B-EXL3-K5K6-hydrated](https://huggingface.co/malaiwah/Qwen3.8-27B-EXL3-K5K6-hydrated) (main, apache-2.0)

[https://github.com/FujitsuPolycom/sparkring](https://github.com/FujitsuPolycom/sparkring)

## Related

- [Lokale KI auf Ihrer Hardware.](https://www.contextstudios.ai/de/lokale-ki.md)