---
type: "Article"
title: "Nemotron-3.5 30B NVFP4 mit vLLM auf 1× DGX Spark"
description: "Nemotron-3.5 30B NVFP4 mit vLLM auf 1× DGX Spark: Rezept von sfxnz mit Tempo, Bedingung und Quelle je Zahl, Gewichten und Lizenz."
resource: "https://www.contextstudios.ai/de/lokale-ki/sfxnz--nemotron-35-lightning-30b-a3b-1x-dgx-spark"
language: "de"
generated:
  by: "process:contextstudios-md/1"
  at: "2026-10-02T21:59:16.903Z"
status: "stable"
---

# Nemotron-3.5 30B NVFP4 mit vLLM auf 1× DGX Spark

Nemotron-3.5 30B NVFP4 mit vLLM auf 1× DGX Spark: 93 tok/s laut github.com (Datensatz-Stand: 29. Sept. 2026).

- Kreator: [sfxnz](https://www.contextstudios.ai/de/lokale-ki/kreatoren/sfxnz.md)
- Engine: vLLM
- Quantisierung: NVFP4 (modelopt_mixed), FP8-KV, Marlin MoE, DSpark-3
- Modellfamilie: Nemotron-3.5
- Hardware: dgx-spark x1
- Kontext: 262144
- Artificial Analysis Intelligence Index: 12.9 ([source](https://artificialanalysis.ai/models/nemotron-3-5-lightning))

## Alle Zahlen

- 93 tok/s (Spitze; Spitze, 1 Anfrage, Bestwert der Quelle) — [source](https://github.com/sfxnz/Nemotron-3.5-Lightning-vLLM-DGX-Spark/blob/main/README.md)
- decode_tps: 93 (1 Anfrage) — [source](https://github.com/sfxnz/Nemotron-3.5-Lightning-vLLM-DGX-Spark/blob/main/README.md)
- prefill_tps: 678 (1 Anfrage) — [source](https://github.com/sfxnz/Nemotron-3.5-Lightning-vLLM-DGX-Spark/blob/main/README.md)
- ttft_ms: 246 (1 Anfrage) — [source](https://github.com/sfxnz/Nemotron-3.5-Lightning-vLLM-DGX-Spark/blob/main/README.md)

## Gewichte

- [nvidia/NVIDIA-Nemotron-3.5-Lightning-30B-A3B-NVFP4](https://huggingface.co/nvidia/NVIDIA-Nemotron-3.5-Lightning-30B-A3B-NVFP4) (main, other)
- [nvidia/NVIDIA-Nemotron-3.5-Lightning-30B-A3B-NVFP4-DSpark](https://huggingface.co/nvidia/NVIDIA-Nemotron-3.5-Lightning-30B-A3B-NVFP4-DSpark) (draft, other)

[https://github.com/sfxnz/Nemotron-3.5-Lightning-vLLM-DGX-Spark](https://github.com/sfxnz/Nemotron-3.5-Lightning-vLLM-DGX-Spark)

## Related

- [Lokale KI auf Ihrer Hardware.](https://www.contextstudios.ai/de/lokale-ki.md)