Lokale KI · Rezept · 1× Strix Halo

Qwen3.6-35B-A3B Q4_K_M mit llama.cpp auf 1× Strix Halo

von 0xSero

70,2tok/sSpitze

1 Anfrage, synthetischer Prompt

Quelle: huggingface.co
Intelligenz (Originalmodell) · Artificial Analysis18mit Denkenohne Denken 15

Engine

Engine
llama.cpp
Quantisierung
GGUF Q4_K_M; Variante DYNAMIC (Mixed per-tensor)
Modellfamilie
Qwen3.6-35B-A3B
Kontext
—
Parameter
35B total / 3B active
Kreator
0xSero
GitHub-Sterne
26
Repo-Stand
30. Mai 2026

Messwerte

Alle belegten Werte dieses Rezepts, je mit Bedingung und Quelle. Balken im Verhältnis zum größten Wert der Gruppe.

Für dieses Rezept sind keine Messwerte mit Quelle belegt.

Was brauche ich

Hardware
1 × AMD Strix Halo
Gewichte
Engine
llama.cpp

Verwandte Rezepte

← Zur Übersicht

Lokale KI im eigenen Unternehmen?

Im Workshop klären wir, welche Modelle und welche Hardware zu Ihren Aufgaben passen, und bauen den ersten Agenten auf Ihrer Infrastruktur.