---
type: "Article"
title: "GLM-5.2 753B NVFP4 mit vLLM auf 3× DGX Spark"
description: "GLM-5.2 753B NVFP4 mit vLLM auf 3× DGX Spark: Rezept von MiaAI-Lab mit Tempo, Bedingung und Quelle je Zahl, Gewichten und Lizenz."
resource: "https://www.contextstudios.ai/de/lokale-ki/miaai-lab--glm-5.2-nvfp4-aqlm-triple-dgx-sparks"
language: "de"
generated:
  by: "process:contextstudios-md/1"
  at: "2026-10-02T23:19:50.034Z"
status: "stable"
---

# GLM-5.2 753B NVFP4 mit vLLM auf 3× DGX Spark

GLM-5.2 753B NVFP4 mit vLLM auf 3× DGX Spark: 13,6 tok/s laut github.com (Datensatz-Stand: 29. Sept. 2026).

- Kreator: [MiaAI-Lab](https://www.contextstudios.ai/de/lokale-ki/kreatoren/miaai-lab.md)
- Engine: vLLM custom :k12l1-vision
- Quantisierung: NVFP4+AQLM hybrid, nvfp4_ds_mla KV
- Modellfamilie: GLM-5.2
- Hardware: dgx-spark x3
- Kontext: 380928

## Alle Zahlen

- 13,6 tok/s (Gemischt; Gemischt, 1 Anfrage, gemischtes Prompt-Set, mit MTP (laut Rezept)) — [source](https://github.com/MiaAI-Lab/GLM-5.2-NVFP4-AQLM-Triple-DGX-Sparks/blob/main/README.md#L91)
- decode_tps: 13.6 (1 Anfrage) — [source](https://github.com/MiaAI-Lab/GLM-5.2-NVFP4-AQLM-Triple-DGX-Sparks/blob/main/README.md#L91)
- decode_tps: 20.9 (1 Anfrage) — [source](https://github.com/MiaAI-Lab/GLM-5.2-NVFP4-AQLM-Triple-DGX-Sparks/blob/main/README.md#L91)

## Gewichte

- [jarrelscy/GLM-5.2-NVFP4-AQLM-hybrid](https://huggingface.co/jarrelscy/GLM-5.2-NVFP4-AQLM-hybrid) (main, mit)
- [sapidlabs/Sparkulator-GLM-5.2](https://huggingface.co/sapidlabs/Sparkulator-GLM-5.2) (draft, mit)
- [RedHatAI/GLM-5.2-speculator.dspark-preview](https://huggingface.co/RedHatAI/GLM-5.2-speculator.dspark-preview) (draft, mit)

[https://github.com/MiaAI-Lab/GLM-5.2-NVFP4-AQLM-Triple-DGX-Sparks](https://github.com/MiaAI-Lab/GLM-5.2-NVFP4-AQLM-Triple-DGX-Sparks)

## Related

- [Lokale KI auf Ihrer Hardware.](https://www.contextstudios.ai/de/lokale-ki.md)