Lokale KI · Rezept · 1× Mac

Laya mit arbiter auf 1× Mac

von 0xBakeer

Für dieses Rezept ist kein Tempowert belegt. Die Seite ist deshalb nicht indexiert.

Intelligenz (Originalmodell) · Artificial Analysiskein unabhängiger Wert

Engine

Engine
arbiter (torch MPS)
Quantisierung
fp32 (fp16/bf16 fallen durch Äquivalenz-Gate)
Modellfamilie
Laya (Convai Innovations, Klassifikator, kein LLM)
Kontext
—
Kreator
0xBakeer
GitHub-Sterne
29
Repo-Stand
25. Sept. 2026

Messwerte

Alle belegten Werte dieses Rezepts, je mit Bedingung und Quelle. Balken im Verhältnis zum größten Wert der Gruppe.

Für dieses Rezept sind keine Messwerte mit Quelle belegt.

Was brauche ich

Hardware
1 × Mac / Apple Silicon
Gewichte
Engine
arbiter (torch MPS)

Verwandte Rezepte

1× Mac
6,14tok/sGemischt

1 Anfrage, gemischtes Prompt-Set, Kontext 1k, ohne Spekulation Quelle 

Intelligenz45mit DenkenWert des Originalmodells. Stark komprimiert (~2,1 Bit), Intelligenz dürfte deutlich niedriger liegen.
  • ≤ 3 bit: Quantisierung kann Qualität kosten
  • Streamt von SSD
  • Lizenz ungeklärt

UD-IQ2_XXS routed, blk78 Q2K, 196.58 GiBDwarfStar (ds4) main@0aaea5a (2026-09-20)Gewichte Repo Stand 25. Sept. 2026

Details
1× Mac
48,7tok/sSpitze

1 Anfrage, Bestwert der Quelle, Kontext 32k Quelle 

Intelligenz40mit DenkenWert des Originalmodells. Stark komprimiert (~2,1 Bit), Intelligenz dürfte deutlich niedriger liegen.
  • ≤ 3 bit: Quantisierung kann Qualität kosten
  • Lizenz ungeklärt

IQ2_XXS gate/up, Q2_K down; 41.73 GiB resident, 95.37 GiB BF16-n-grams auf SSDDwarfStar (ds4) main@0aaea5a (2026-09-20)Gewichte Repo Stand 25. Sept. 2026

Details

← Zur Übersicht

Lokale KI im eigenen Unternehmen?

Im Workshop klären wir, welche Modelle und welche Hardware zu Ihren Aufgaben passen, und bauen den ersten Agenten auf Ihrer Infrastruktur.