Zum Inhalt springen
im Trend

Benchmarks

KI-Entscheidungsmodelle im Decision Index

Clef von Cloudflare und Strands Decider von AWS bringen schnelle KI-Entscheidungen ohne Textgenerierung. Praxis-Test, Latenzen und Hardware-Bedarf im Überblick.

Text: 17 Min. Lesezeit

👁 131 Aufrufe

Ein Decision Model (Entscheidungsmodell) ist ein KI-Modell, das keinen freien Text generiert, sondern eine Auswahl aus einer vorgegebenen Liste trifft und eine mathematische Wahrscheinlichkeit dazu liefert. Statt einer vagen Antwort wie „Das Ticket betrifft vermutlich Zahlungen“ erhalten Sie zahlungen: 0,97 - und Ihr Code entscheidet direkt über die Weiterverarbeitung. Am 1. Oktober 2026 veröffentlichte Cloudflare die offenen Modelle Clef und Clef-flash, während AWS am selben Tag den Strands Decider 2B vorstellte. Ich habe beide Modelle auf einer RTX 4090 an 30 Kundensupport-Tickets getestet (der Test wurde auf Polnisch durchgeführt).

Artificial Analysis Decision Index: das erste unabhängige Ranking von Entscheidungsmodellen (13. Oktober 2026)

Ein Entscheidungsmodell schreibt keinen Text. Es erhält eine strukturierte Frage - Auswahl einer Option, Ja oder Nein, eine Bewertung - und gibt in einem einzigen Aufruf eine Wahrscheinlichkeit für jede zulässige Option zurück. Am 13. Oktober 2026 veröffentlichte Artificial Analysis (AA) den Decision Index v1.0, der 11 solcher Modelle miteinander sowie mit regulären LLMs vergleicht, die dieselben Aufgaben über strukturierte Ausgaben beantworten. Alle nachstehenden Zahlen stammen aus dem AA-Leaderboard mit Stand vom 13. Oktober 2026; die Live-Tabelle kann sich ändern.

Decision models: Decision Index score vs cost per 1M tasks (Artificial Analysis, October 13, 2026)
Daten: Artificial Analysis, 13. Oktober 2026.

Ranking der 11 Entscheidungsmodelle

Modell (Unternehmen) Index Kosten pro 1 Mio. Aufgaben Mediane Zeit
Jev 1.13 (TypeSafe) 57,5 41,5 USD 127 ms
GLiDE (Fastino Labs) 53,9 119,0 USD 217 ms
Microsoft-Decision-1 (Microsoft) 53,8 30,7 USD 207 ms
Decider v1.1 27B (Perplexity) 53,1 16,5 USD 170 ms
Mercury Decide (Inception) 52,7 30,4 USD 500 ms
Celeris-1 Decision (Celeris) 52,3 31,6 USD 63 ms
d1 (Liquid AI) 50,3 30,3 USD 299 ms
Clef (Cloudflare) 48,6 199,4 USD 309 ms
GPT-6 Luna Decisions (OpenAI) 48,5 78,9 USD 168 ms
Clef-Flash (Cloudflare) 45,8 31,6 USD 298 ms
Clef-Omni (Cloudflare) 44,3 123,1 USD 172 ms

Zum Vergleich LLMs bei denselben Aufgaben: Claude Haiku 5.5 (low reasoning) 60,6 bei 184 USD pro 1 Mio. Aufgaben und 1.434 ms, GPT-6 Luna (low) 55,2 bei 131 USD und 1.500 ms, Claude Opus 5.5 (max) 79,0 bei 51.295 USD und 3.571 ms.

Was die vier Tests messen

Jeder Test fließt zu 25 % in den Index ein:

  • AA-Omniscience-Decision - 500 private Wissensfragen mit 5 Optionen (4 Antworten plus „Ich weiß es nicht“); zur Hälfte Genauigkeit, zur Hälfte Nicht-Halluzinationsrate, d. h. wie oft ein Modell, das die Antwort nicht weiß, „Ich weiß es nicht“ wählt.
  • HLE-MultiChoice - 513 reine Text-Multiple-Choice-Fragen aus Humanity’s Last Exam (schwieriges logisches Denken).
  • When2Call (NVIDIA) - direkt antworten, ein Tool aufrufen, um weitere Informationen bitten oder mitteilen, dass es nicht helfen kann.
  • WildGuardTest (Ai2) - ist die Anfrage schädlich, handelt es sich um eine Verweigerung, ist die Antwort schädlich (durchschnittlicher F1-Score).

Bei Entscheidungsmodellen wählt AA die Option mit der höchsten Wahrscheinlichkeit (bei Ja/Nein: Ja, wenn p mindestens 0,5 beträgt). LLMs erhalten einen festen System-Prompt und antworten im JSON-Format. Entscheidungsmodelle werden nur nach Input abgerechnet, LLMs nach Input und Output.

Stärken und Schwächen pro Test

  • Wissen ist die Schwachstelle aller Entscheidungsmodelle: 28-41 % Genauigkeit gegenüber 52 % bei Claude Haiku 5.5 (low) und 66 % bei GPT-6 Luna (low). Jev 1.13 erreicht 34,6 %, Microsoft-Decision-1 28,2 %, der Spitzenwert liegt bei d1 mit 41,0 % - d1 antwortet jedoch fast nie mit „Ich weiß es nicht“ (1,7).
  • Antwort mit „Ich weiß es nicht“: Microsoft-Decision-1 39,8, Jev 1.13 35,2, Mercury Decide 32,0; kein anderes Entscheidungsmodell liegt über 17, Celeris-1 erzielt 0.
  • Logisches Denken (HLE-MultiChoice): Jev 1.13 20,9, jedes andere Entscheidungsmodell 15,4 oder weniger.
  • Tool-Aufrufe (When2Call): GLiDE und Celeris-1 83,7 - über Claude Haiku 5.5 low (72,6) und GPT-6 Luna low (77,0).
  • Sicherheitsklassifizierung (WildGuardTest): GLiDE 95,1, das beste Ergebnis in der gesamten Tabelle einschließlich der LLMs; Decider 93,8, Jev 93,6, Claude Haiku 5.5 low 92,6. Schwächstes Ergebnis: GPT-6 Luna Decisions 82,8.
  • Laut AA neigen alle Entscheidungsmodelle zu Überkonfidenz, vor allem bei Wissen und logischem Denken; die Kalibrierung bei When2Call und WildGuardTest ist relativ gut.

Kosten im Verhältnis zur Qualität

  • Auf der Pareto-Grenze für Kosten und Qualität platziert AA drei Modelle: Decider v1.1 27B (16,5 USD pro 1 Mio. Aufgaben), Microsoft-Decision-1 (30,7 USD) und Jev 1.13 (41,5 USD).
  • Claude Haiku 5.5 (low) erzielt 3 Punkte mehr als Jev 1.13, ist laut AA jedoch 11-mal langsamer und 4,4-mal teurer.
  • Reine Klassifizierung (WildGuardTest, pro 1 Mio. Aufgaben): Decider 12,1 USD, Microsoft-Decision-1 12,5 USD, Mercury Decide 12,6 USD, Celeris-1 16,0 USD, Jev 22,8 USD, GLiDE 84,3 USD - gegenüber 91,5 USD für Claude Haiku 5.5 (low) und 3.774 USD für Claude Opus 5.5 (low).

Preise (USD pro 1 Mio. Input-Token, Output kostenlos, Stand 13. Oktober 2026)

Modell Anbieter OpenRouter
Jev 1.13 0,042 0,042
GLiDE 0,15 (alle internen Durchläufe abgerechnet) -
Microsoft-Decision-1 0,042 (Microsoft Foundry) 0,042
Decider v1.1 27B 0,02 0,02
Mercury Decide 0,04 (Aktion 0,02) 0,02
Celeris-1 Decision 0,04 -
d1 0,04 0,04
Clef 0,24 (Workers AI) ab 0,042
Clef-Flash 0,038 ab 0,021
Clef-Omni 0,15 0,15
GPT-6 Luna Decisions 0,10 (+10 % für EU/EWR-Verarbeitung) 0,10

Wann ein Entscheidungsmodell anstelle eines LLM sinnvoll ist

  • Die Antwort stammt aus einer festen Menge an Optionen: Weiterleitung von Tickets an eine Abteilung, Ja/Nein-Flags, Moderation, Entscheidung über den Aufruf eines Tools. Genau das messen drei der vier AA-Tests, und hier reichen Entscheidungsmodelle an kleine LLMs heran oder übertreffen sie.
  • Volumen und Latenz sind entscheidend: Entscheidungsmodelle antworten in etwa 60-500 ms (AA-Median) und kosten einige Dutzend Dollar pro 1 Mio. Aufgaben; LLMs benötigen für dieselben Aufgaben 1,4-3,6 s und kosten ab etwa 130 USD pro 1 Mio. Aufgaben.
  • Eine Wahrscheinlichkeit wird benötigt, nicht nur ein Label - beispielsweise um Fälle mit geringer Konfidenz an eine Person oder ein leistungsstärkeres Modell zu übergeben.
  • Ein LLM bleibt die bessere Wahl für Wissensfragen (Entscheidungsmodelle erreichen 28-41 % im Wissenstest von AA) und für alles, was eine schriftliche Textausgabe erfordert.

Unser Test mit 50 Support-Tickets in einer nicht-englischen Sprache

Am 13. Oktober 2026 haben wir 9 Entscheidungsmodelle über OpenRouter und zwei LLMs (Claude Haiku 5.5 und GPT-6 Luna, Reasoning auf Low) auf 50 E-Commerce-Support-Tickets auf Polnisch (Abteilung aus 7 Optionen plus Dringlichkeits-Flag) und 10 Unterhaltungen im When2Call-Stil angewendet. Die Musterlösung wurde vor dem Durchlauf festgelegt. Kleine Stichprobe - die Ergebnisse sind als Richtwerte zu verstehen.

  • Abteilung bei 47 eindeutigen Tickets: Entscheidungsmodelle 41-44 korrekt, beide LLMs 45. Jev 1.13 erzielte das niedrigste Ergebnis (41); Microsoft-Decision-1, Decider, Mercury Decide und Clef 44.
  • Dringlichkeit: Decider und GPT-6 Luna Decisions 48 von 50; Microsoft-Decision-1 42 von 50 (8 Fehlalarme bei einem Schwellenwert von 0,5).
  • Tool-Entscheidung: 7 Entscheidungsmodelle und beide LLMs 10 von 10, Mercury Decide 9, Clef-Flash und Clef-Omni 6.
  • Aus Europa über OpenRouter gemessene mediane Latenz: Entscheidungsmodelle 310-619 ms, Claude Haiku 5.5 1.689 ms, GPT-6 Luna 1.371 ms.
  • Gemessene Kosten pro 1 Mio. solcher Aufgaben: Mercury Decide 4,4 USD (Aktionspreis), Decider 7,8 USD, Microsoft-Decision-1 11,5 USD, Jev 1.13 26,8 USD (benötigte für diesen Text etwa 640 Input-Token pro Aufgabe gegenüber etwa 275 bei Microsoft-Decision-1), Claude Haiku 5.5 96,7 USD.
  • Konfidenz eignet sich als Filter: Ab einer Konfidenz von mindestens 0,9 lag Jev bei 37 von 39 Tickets richtig, Decider bei 39 von 41. Eine Kaskade - Microsoft-Decision-1 zuerst, Claude Haiku 5.5 erst unterhalb einer Konfidenz von 0,8 - erzielte 45 von 47, denselben Wert wie Haiku allein, bei rund 18 USD statt etwa 101 USD pro 1 Mio. Klassifizierungen.

Wie der Zugriff funktioniert

OpenRouter stellt 9 der 11 bewerteten Modelle über einen separaten Endpunkt bereit: POST https://openrouter.ai/api/alpha/decisions (Felder state und questions) - Entscheidungsmodelle funktionieren nicht über /chat/completions. GLiDE und Celeris-1 Decision sind ausschließlich über die APIs ihrer Hersteller verfügbar. Decider v1.1 27B (Apache-2.0, etwa 49 GiB GPU-Speicher), d1-3B (LFM Open License, kostenlos bei weniger als 10 Millionen USD Jahresumsatz) und die Cloudflare-Clef-Modelle (Apache-2.0) verfügen über offene Gewichte.

Artikel zu Entscheidungsmodellen

Quellen

Stand: 7. Oktober 2026

  • Cloudflare Clef (27B, Basis Qwen3.8-27B) und Clef-flash (9B, Basis Qwen3.5-9B) - Apache-2.0-Lizenz, Gewichte auf Hugging Face, Hosting über Workers AI für ca. 0,21 EUR (0,24 USD) bzw. ca. 0,08 EUR (0,09 USD) pro Million Input-Token (Umrechnungskurs: 1 EUR = 1,1181 USD, EZB-Referenzkurs vom 12.10.2026 via EZB).
  • Strands Decider 2B von AWS - Apache-2.0, Gewichte, Trainingsdaten und Skripte sind öffentlich verfügbar; läuft problemlos auch auf CPUs.
  • Kev 1.0 (Jared Palmer) - Familie offener Modelle von 0,8B bis 27B, trainiert ausschliesslich auf Englisch.
  • Aplomb 1 von EmpirioLabs (Launch am 29.09.) - 5,3B, verarbeitet Text, JSON, Bilder, Videos und Audio, Kontextfenster von 1 Mio. Token, Gewichte unter eigener Lizenz, API für ca. 0,018 EUR (0,02 USD) pro Million Input-Token (EZB-Referenz vom 12.10.2026). Mehr dazu.
  • Alle Modelle nutzen dieselbe Schnittstellen-Logik wie Jev von TypeSafe (System One), das diese Modellkategorie am 15. September eröffnete.
  • Mein Test: Clef-flash und Strands Decider ordneten die Abteilung in 30 von 30 Support-Anfragen korrekt zu (getestet auf Polnisch) - bei einer Latenz von 112 ms bzw. 135 ms pro Entscheidung im Median.

Was ist ein Decision Model?

Klassische Large Language Models (LLMs) generieren Text Wort für Wort. Selbst wenn man sie anweist, nur mit einem einzigen Wort oder einem JSON-Objekt zu antworten, durchlaufen sie die Textgenerierung. Ein Decision Model funktioniert grundlegend anders:

  1. Es erhält einen Zustand (State) - etwa den Ticket-Text, Bestelldaten als JSON oder bei Clef auch ein Bild.
  2. Es erhält Fragen mit einer geschlossenen Liste möglicher Antworten: z. B. „Welche Abteilung?“ mit den Optionen zahlungen, lieferung, retoure…
  3. Es verarbeitet den Zustand in einem einzigen Prefill-Durchlauf und liefert für jede erlaubte Option eine Wahrscheinlichkeit zurück. Keine Generierung, kein nachgelagertes Parsing, kein Risiko für Halluzinationen ausserhalb der Liste.

Alle Modelle dieser Familie unterstützen drei standardisierte Fragetypen, die durch Jev von TypeSafe etabliert wurden:

Typ Fragestellung Rückgabe
choice Wähle eine Option aus einer Liste Ausgewählte Option, Konfidenzwert und Wahrscheinlichkeitsverteilung
noul Ja oder Nein? Wahrscheinlichkeit für „Ja“ zwischen 0 und 1
score Bewertung auf einer Skala (z. B. kein Einfluss, gering, gross, kritisch) Erwarteter Score, Konfidenz und Verteilung

Der entscheidende Vorteil für Entwickler: Der Wert ist eine vom Modell berechnete Wahrscheinlichkeit und keine erfundene Aussage wie „Ich bin zu 90 % sicher“, die ein LLM im Flastext generiert. Dadurch lassen sich klare Schwellenwerte implementieren: Liegt der Wert über 0,8, läuft der Prozess vollautomatisch; liegt er darunter, wird der Vorgang einem menschlichen Prüfer zugewiesen.

Einsatzbereiche: Wofür sich Decision Models eignen (und wofür nicht)

Typische Stärken:

  • Ticket-Routing - Welche Abteilung ist zuständig, liegt eine Eskalation vor, welche Sprache wird gesprochen, droht eine Kündigung?
  • Content-Moderation - Verstösst ein Kommentar gegen Richtlinien, handelt es sich um Spam, ist ein Bild freigabefähig (Clef verarbeitet Bilder)?
  • Dokumentenklassifizierung - Belegart, Kostenkategorie, Vorhandensein bestimmter Vertragsklauseln.
  • Tool-Auswahl in KI-Agenten - Statt ein grosses LLM zu fragen „Welche Funktion soll aufgerufen werden?“, entscheidet das Decision Model blitzschnell über die Tool-Liste (mehr zum Konzept in unserem Beitrag über Function Calling).
  • Guardrails & Gatekeeping - Erfüllt eine Antwort die Kriterien, muss an einen Menschen übergeben werden oder welches Modell soll die Anfrage bearbeiten?

Ungeeignete Szenarien:

  • Texte verfassen, zusammenfassen, übersetzen, Chats führen oder Programmcode schreiben - ein Entscheidungsmodell generiert keinen Text.
  • Offene Fragen („Was meint der Kunde damit?“) - ohne feste Auswahlliste gibt es keine Berechnungsbasis.
  • Mehrstufiges, komplexes Reasoning - die Autoren von Strands Decider weisen ausdrücklich darauf hin, dass das Modell bei komplexen Denkaufgaben deutlich hinter Reasoning-Modellen zurückbleibt.

In der Praxis arbeiten Decision Models meist Hand in Hand mit LLMs: Das kleine Modell trifft Hunderte schnelle Vorabentscheidungen, während das grosse Modell nur dort generiert, wo Textausgabe unverzichtbar ist. Wie eine solche Architektur im Detail aufgebaut wird, zeigt der Leitfaden KI-Agenten von Grund auf entwickeln.

Verfügbare Decision Models im Überblick

Modell Entwickler Grösse und Basis Lizenz Verfügbarkeit
Jev TypeSafe Nicht angegeben Proprietär (Closed Weights) API TypeSafe (System One)
Clef Cloudflare 27B, Qwen3.8-27B + Joint Schema Head Apache-2.0 Workers AI, Hugging Face (55 GB)
Clef-flash Cloudflare 9B, Qwen3.5-9B + Joint Schema Head Apache-2.0 Workers AI, Hugging Face (19 GB)
Strands Decider 2B AWS (Strands Labs) 2B, Qwen3.5-2B-Base + LoRA + Pointer Head Apache-2.0 Hugging Face, GitHub, pip install strands-decider
Kev 1.0 Jared Palmer 0,8B, 4B, 9B, 27B (Qwen3.5/3.8) Apache-2.0 Hugging Face, GitHub
Aplomb 1 EmpirioLabs 5,3B, Qwen3.5-4B EmpirioLabs Model License 1.0 (kostenlos u. a. für interne Nutzung bei < 1 Mio. USD Umsatz) Hugging Face (Gated), API EmpirioLabs
Decisions API OpenAI Luna-Modell Proprietär Eingeschränkte Preview, keine Preise

Clef, Clef-flash, Strands Decider und Kev folgen der System-One-API von Jev (POST /v1/systemone mit den Feldern state und questions). Derselbe Client-Code funktioniert übergreifend - lediglich Endpunkt und Modellname müssen angepasst werden. Aplomb 1 nutzt den Endpunkt POST /v1/decisions und bietet Kompatibilität mit Chat-Formaten von OpenAI, Anthropic und Gemini. Details zur Decisions API von OpenAI finden Sie im Artikel zur Agents API.

Cloudflare Clef und Clef-flash

Clef nutzt ein eingefrorenes Qwen-Backbone, verarbeitet den Input in einem einzigen Durchlauf (reiner Prefill) und übergibt die Hidden States an einen sogenannten Joint Schema Head. Dieses Modul bewertet sämtliche Optionen aller Fragen gleichzeitig und kann Querbeziehungen zwischen Fragen herstellen. Nach Angaben von Cloudflare ist es das erste Modell dieser Architektur mit Bild-Encoder und einem Kontextfenster von 64.000 Token. Hintergründe und Benchmarks finden Sie im News-Artikel zu Cloudflare Clef sowie im Firmenporträt über Cloudflare.

Amazon Strands Decider 2B

Das kompakteste Modell: AWS entfernt bei Qwen3.5-2B-Base den Language Head und ersetzt ihn durch einen Pointer Head mit knapp über einer Million Parametern, ergänzt um einen LoRA-Adapter (Rank 16). Auf Hugging Face steht der Checkpoint strands-decider-2B-hobson-v19 inklusive Trainingsdaten bereit. Der Latenz-Median liegt laut Hersteller bei rund 115 ms auf einer RTX 3090 und 153 ms auf einem Apple MacBook mit M3-Chip. Im JevBench-Benchmark erreichte das Modell 167 von 231 Aufgaben (72,3 %).

Kev 1.0

Kev stammt von Jared Palmer (bekannt durch Formik und Turborepo): vier Modellgrössen von 0,8B bis 27B, LoRA und Pointer Head auf Qwen-Basis unter Apache-2.0. Dank System-One-Kompatibilität greifen SDKs von TypeSafe nahtlos darauf zu. Das Modell wurde jedoch ausschliesslich auf englischen Datensätzen trainiert und validiert; die 9B-Version belegt laut Model Card etwa 22 GB Grafikspeicher.

EmpirioLabs Aplomb 1

Aplomb 1 (veröffentlicht am 29. September 2026, Dokumentationsstand 5./6. Oktober) verarbeitet Text, JSON, bis zu 16 Bilder, 8 Audiodateien und 4 Videos in einem Request bei 1 Mio. Token Kontext. Die 5,3 Milliarden Parameter basieren auf Qwen3.5-4B und benötigen rund 12 GB VRAM in bf16. Neben den Standardtypen unterstützt Aplomb 1 den Fragetyp tool zur Funktionsauswahl mit Wahrscheinlichkeitsverteilungen für Argumente.

  • Hersteller-Benchmarks: 44,86 Punkte im Decision Index 0.2.1 (interner Lauf von EmpirioLabs am 5.10., kein offizielles Board-Listing); Bildverarbeitung: POPE 89,0, MMStar 68,6, AI2D 87,0.
  • Audio: Einziges Modell im Vergleich mit nativer Audioverarbeitung (z. B. 91,9 % bei Stimmerkennung).
  • Lizenz: Keine Apache-2.0-Lizenz. Kostenfrei für Forschung, Bildung und interne Nutzung in Unternehmen mit unter 1 Mio. USD Jahresumsatz. Grössere Unternehmen und Hosting-Dienstleister benötigen eine kommerzielle Lizenz.
  • API-Preise: ca. 0,018 EUR (0,02 USD) pro Million Input-Token, Output kostenfrei (Umrechnungskurs: 1 EUR = 1,1181 USD, EZB vom 12.10.2026).

Weitere Details zu Benchmarks und Lizenzbedingungen beschreibt der Bericht zu EmpirioLabs Aplomb 1.

Preise und Hardware-Anforderungen

Modell Hosting Preis Lokaler Betrieb
Clef Workers AI @cf/cloudflare/clef ca. 0,21 EUR (0,24 USD) / Mio. Input-Token 55 GB Gewichte in bf16; auf 24 GB VRAM nur quantisiert lauffähig (kein offizielles File)
Clef-flash Workers AI @cf/cloudflare/clef-flash ca. 0,08 EUR (0,09 USD) / Mio. Input-Token 19 GB Gewichte; gemessener Peak: 18,3 GB VRAM
Strands Decider 2B Kein Direkt-Hosting, eigener Server 0 USD (nur Infrastrukturkosten) 4,4 GB Download; gemessen 3,8 GB VRAM; läuft auch auf CPU/Mac
Kev-9B Kein Direkt-Hosting 0 USD ca. 22 GB VRAM laut Entwickler
Aplomb 1 API EmpirioLabs ca. 0,018 EUR (0,02 USD) / Mio. Input-Token, Output frei ca. 12 GB in bf16 laut Dokumentation
Jev API TypeSafe ca. 0,038 EUR (0,042 USD) / Mio. Input-Token, Output frei Nicht lokal verfügbar

Cloudflare Workers AI bietet ein tägliches Kontingent von 10.000 „Neuronen“ in Free- und Paid-Tarifen. Clef verbraucht 21.818 Neuronen pro Million Input-Token, Clef-flash 8.182. Das ermöglicht täglich rund 458.000 Token bei Clef bzw. 1,2 Millionen Token bei Clef-flash im kostenfreien Rahmen (Stand der Umrechnung: 1 EUR = 1,1181 USD, EZB-Referenzkurs vom 12.10.2026). Ein kurzes Support-Ticket mit zwei Fragestellungen umfasst etwa 150 bis 250 Token.

Praxis-Test: 30 Support-Tickets auf einer RTX 4090

Für den Test wurden 30 Kundensupport-Tickets aus dem E-Commerce- und SaaS-Bereich zusammengestellt: Zahlungen, Versand, Retouren, Benutzerkonten, Störungen und Vertrieb (jeweils 5 Tickets). Der Test wurde mit polnischsprachigen Originaldaten durchgeführt, teilweise absichtlich ohne diakritische Zeichen, mit Tippfehlern oder mit Überschneidungen zwischen Abteilungen. Jedes Modell sollte die zuständige Abteilung (6 Optionen) sowie die Dringlichkeit (Bearbeitung noch heute erforderlich: Ja/Nein) bestimmen. Die Decision Models wurden über ihre native API angesprochen, klassische LLMs via Ollama oder OpenRouter mit striktem JSON-Schema (Temperature 0).

Diagramm: Median der Entscheidungszeit und Abteilungsgenauigkeit bei 30 Tickets - Clef-flash 112 ms, Strands Decider 2B 135 ms, Llama 3.1 8B 173 ms, Bielik 11B 270 ms, Gemma 4 12B 413 ms, Mistral Small 549 ms, Qwen3.8 27B 762 ms, Gemini 3.8 Flash 1822 ms
Median der Entscheidungszeit und Klassifizierungsgenauigkeit. Messung vom 5.10.2026 auf einer RTX 4090; API-Modelle inklusive Netzwerklatenz gemessen.
Modell Abteilung (Treffer) Dringlichkeit (Treffer) Latenz (Median) Speicherbedarf
Clef-flash (lokal) 30/30 26/30 (28/30 bei Schwelle 0,95) 112 ms 18,3 GB VRAM
Strands Decider 2B (lokal) 30/30 24/30 (26/30 bei Schwelle 0,4) 135 ms 3,8 GB VRAM
Llama 3.1 8B (Ollama) 25/30 23/30 173 ms 4,9 GB Dateigrösse
Bielik 11B Q4 (Ollama) 29/30 21/30 270 ms 6,7 GB Dateigrösse
Gemma 4 12B (Ollama) 30/30 26/30 413 ms 7,0 GB Dateigrösse
Qwen3.8 27B (Ollama) 30/30 27/30 762 ms 16 GB Dateigrösse
Mistral Small 2603 (API) 30/30 19/30 549 ms -
Gemini 3.8 Flash (API) 30/30 26/30 1822 ms -

Erkenntnisse aus der Testreihe:

  • Die reine Abteilungsauswahl forderte die Modelle kaum: 6 von 8 Modellen erreichten 30/30 Treffer. Lediglich Llama 3.1 8B fiel mit 25/30 ab (Verwechslungen bei Rechnungen und Hardware-Reklamationen).
  • Enormer Geschwindigkeitsvorteil: Clef-flash agierte auf derselben Hardware 3,7-mal schneller als Gemma 4 12B und fast 7-mal schneller als Qwen3.8 27B. Diese Werte wurden ohne spezialisierte Flash-Attention-Kernel unter Windows erzielt (transformers berechnete die linearen Attention-Layer im Standardmodus).
  • Schwellenwerte erfordern Feintuning: Strands Decider neigte im Test zu vorsichtigen Wahrscheinlichkeitswerten bei der Dringlichkeit: Kein Ticket überschritt den Standard-Schwellenwert von 0,5. Bei einer angepassten Schwelle von 0,4 stieg die Genauigkeit auf 26/30. Clef-flash zeigte das umgekehrte Verhalten: Bei 0,5 traten 4 Fehlalarme auf, bei einer Schwelle von 0,95 blieben nur 2 Fehler.
  • Mehrsprachigkeit gegeben: Obwohl primär auf englischen Daten trainiert, verarbeiteten die Modelle die polnischen Tickets zuverlässig. Ein Gegencheck der übersetzten Texte ins Englische brachte identische Ergebnisse: Clef-flash und Strands erreichten jeweils 29/30 Treffer (beide strauchelten an einem Tarifwechsel innerhalb des Abrechnungszeitraums).
  • Dringlichkeit bleibt Ermessenssache: 6 Fälle waren a priori als dringend eingestuft (z. B. 502-Serverausfall, Kontokompromittierung). Fast alle Modelle stuften zusätzlich eine fehlgeschlagene Sofortüberweisung als dringend ein - eine betriebswirtschaftlich nachvollziehbare Entscheidung.

Die API-Kosten beliefen sich auf ca. 0,036 EUR (0,04 USD) für 180 Anfragen an Mistral und Gemini via OpenRouter (EZB-Referenzkurs vom 12.10.2026: 1 EUR = 1,1181 USD). Bei Gemini 3.8 Flash liess sich das interne Reasoning nicht komplett deaktivieren, was die Latenz von 1,8 Sekunden erklärt.

Warum Clef 27B und Kev nicht lokal im Test liefen

  • Clef 27B belegt 55 GB in bf16. Auf 24 GB VRAM passt das Modell ohne Quantisierung nicht. Da Cloudflare eigene Modellköpfe einsetzt (joint_schema_model.py), lässt sich das Modell nicht ohne Weiteres über Ollama oder GGUF-Pipelines in llama.cpp laden.
  • Kev-9B setzt den Download der Basis Qwen3.5-9B-Base voraus (zusätzliche 19 GB), während der Autor das Modell explizit nur für englische Eingaben ausweist.
  • Workers AI erfordert einen Cloudflare-Account, worauf für diesen rein lokalen Benchmark verzichtet wurde.

Decision Models vs. LLM mit Structured Output

Klassische LLMs können strukturierte Ausgaben über JSON-Schemata erzwingen (Details hierzu im Artikel Structured Output: JSON-Antworten steuern). Die Ansätze unterscheiden sich jedoch grundlegend:

Kriterium Decision Model LLM + Structured Output
Ungültige Optionen Strukturell unmöglich Durch striktes Schema selten, JSON-Parser kann dennoch scheitern (siehe Fehlerhafte JSON-Ausgaben)
Konfidenz Echte Wahrscheinlichkeitsverteilung Nicht vorhanden oder vom Modell rein sprachlich generiert
Parallele Fragen Kaum zusätzliche Rechenzeit Jedes Ausgabefeld erfordert zusätzliche Token-Generierung
Begründung Keine Ausgabe möglich Kann Erläuterungen generieren
Komplexes Reasoning Eingeschränkt Deutlich überlegen, insbesondere Reasoning-Modelle
Cloud-Kosten Abrechnung rein nach Input Input + Output (+ Denk-Token)

Faustregel für Architekturen: Wenn die Antwort aus einer festen Liste stammt und hohe Transaktionsvolumina anfallen, sind Decision Models die wirtschaftlichere und schnellere Wahl. Werden Argumentationen oder mehrstufige Ableitungen benötigt, bleibt das klassische LLM gesetzt. Ideal ist ein zweistufiger Ansatz: Das Entscheidungsmodell filtert eindeutige Fälle ab; Zweifelsfälle unterhalb des Schwellenwerts wandern an ein grosses Modell oder den menschlichen Support.

Schnellstart: Lokale Ausführung in 10 Minuten

  1. Python 3.10+ sowie PyTorch mit CUDA-Unterstützung installieren (CPU-Betrieb funktioniert ebenfalls).
  2. Paket installieren: pip install strands-decider (ca. 4,4 GB Download).
  3. CLI-Test ausführen (nachfolgend ein deutsches Anwendungsbeispiel, übersetzt aus dem polnischen Originaltest):
    strands-decider ask StrandsAgents/strands-decider-2B-hobson-v19 
      --state "Sie haben den Monatsbeitrag doppelt von meinem Konto abgebucht" 
      --choice "Welche Abteilung?=zahlungen,lieferung,retoure,konto,stoerung,vertrieb" 
      --noul "Ist das Anliegen dringend?"
  4. HTTP-Server starten (strands-decider serve ... --port 8000) und Anfragen im System-One-Format absetzen. Der interne Server lauscht auf 127.0.0.1 ohne Authentifizierung - für den Produktivbetrieb ist ein Reverse Proxy erforderlich.
  5. Bei 24 GB VRAM lässt sich Clef-flash nutzen: snapshot_download("Cloudflare/clef-flash") laden und über die bereitgestellte systemone()-Routine ansprechen.

Ohne lokale GPU bieten sich Workers AI oder die TypeSafe-API an. Wer Modelle über Ollama ausführt, bleibt auf generative LLMs beschränkt, da Decision Models spezifische Architekturen innerhalb von transformers erfordern.

Für wen lohnt sich der Einsatz?

  • Empfohlen für: Support-Teams und E-Commerce-Plattformen mit automatisiertem Ticket-Routing; Agenten-Pipelines mit hohem Aufkommen an Verzweigungslogik; Bild- und Textmoderation; Workflows, die bisher teure LLMs nur für Ja/Nein-Entscheidungen nutzen.
  • Nicht empfohlen für: Anwendungsfälle, die Freitext, Chat-Interaktionen oder Code-Erzeugung verlangen; Systeme mit nur wenigen Anfragen pro Tag; Projekte ohne Datengrundlage zur Kalibrierung eigener Schwellenwerte.

Häufige Fragen (FAQ)

Was zeichnet ein KI-Decision-Model aus?

Es generiert keinen Flasstext, sondern berechnet Wahrscheinlichkeitsverteilungen für vorgegebene Antwortoptionen. Es unterstützt primär drei Fragetypen: Einfachauswahl (Choice), Ja/Nein-Abfragen (Noul) und Skalenbewertungen (Score).

Was ist Cloudflare Clef?

Eine offene Modellfamilie von Cloudflare, bestehend aus Clef (27B auf Qwen3.8-27B) und Clef-flash (9B auf Qwen3.5-9B). Beide Modelle stehen unter Apache-2.0 auf Hugging Face bereit, laufen auf Workers AI und unterstützen multimodale Inputs (Text, JSON, Bilder, Videos) bei 64.000 Token Kontext.

Ist die Nutzung von Clef kostenfrei?

Die Modellgewichte sind unter Apache-2.0 frei verfügbar. Auf Cloudflare Workers AI fallen ca. 0,21 EUR (0,24 USD) für Clef bzw. ca. 0,08 EUR (0,09 USD) für Clef-flash pro Million Input-Token an (EZB-Referenzkurs vom 12.10.2026: 1 EUR = 1,1181 USD). Das tägliche Gratis-Kontingent der Plattform deckt hunderttausende Token ab.

Funktionieren die Modelle mit anderen Sprachen ausser Englisch?

Im Praxistest arbeiteten Clef-flash und Strands Decider 2B auch auf nicht-englischen Texten zuverlässig und erreichten 30 von 30 Treffern bei der Abteilungsauswahl. Allerdings verschieben sich die Wahrscheinlichkeitsverteilungen je nach Sprache, sodass Schwellenwerte anhand eigener Beispieldaten kalibriert werden müssen. Kev ist rein auf Englisch ausgelegt.

Welche Hardware wird für den lokalen Betrieb benötigt?

Clef-flash belegte im Test 18,3 GB VRAM und läuft auf Grafikkarten wie der RTX 3090, 4090 oder 5090. Das grosse Clef (55 GB) verlangt Beschleuniger der Enterprise-Klasse (z. B. H100) oder Quantisierung. Strands Decider 2B benötigt unter 4 GB VRAM und läuft auch auf CPUs oder Apple-Silicon-Rechnern. Weitere Details finden Sie in der Übersicht VRAM-Bedarf für lokale KI.

Wie unterscheidet sich das Modell von Function Calling?

Function Calling in LLMs umfasst sowohl die Auswahl einer Funktion als auch die Generierung der passenden Argumente. Ein Decision Model übernimmt hochpräzise den ersten Schritt - die Tool-Auswahl -, kann jedoch keine dynamischen Textargumente schreiben. Beide Ansätze lassen sich ideal kombinieren.

Was ist Aplomb 1?

Ein multimodales Entscheidungsmodell von EmpirioLabs (5,3B Parameter) mit 1 Million Token Kontext. Es verarbeitet Text, Audio, Bild und Video und bietet einen spezialisierten Fragetyp zur Tool-Auswahl. Die Gewichte stehen unter einer restriktiven Lizenz; die API liegt bei ca. 0,018 EUR (0,02 USD) pro Million Input-Token (EZB vom 12.10.2026).

Ist Strands Decider für kommerzielle Projekte freigegeben?

Ja. Modell, Trainingsskripte und die Basis Qwen3.5-2B-Base stehen unter der Apache-2.0-Lizenz. Der enthaltene HTTP-Server bietet jedoch keine integrierte Zugriffsverwaltung und sollte produktiv hinter einem API-Gateway betrieben werden.

Welche Rolle spielen Jev und System One?

Jev ist das proprietäre Vorreitermodell von TypeSafe. Das zugehörige API-Protokoll System One definiert die Struktur aus Statuswerten, typisierten Fragen und Wahrscheinlichkeitsantworten, an der sich Clef, Kev und Strands Decider orientieren. Mehr dazu im Bericht über TypeSafe Jev.

Google · Deine QuellenWissnox höher in Ihrem Google - mit einem KlickZu bevorzugten Quellen hinzufügen →

Quellen

Zuletzt geprüft: 5. Oktober 2026; Angaben zu Aplomb 1 aktualisiert am 7. Oktober 2026.

Kinetyra

// read next

More on this from WISSNOX

Wissnox

Wissnox

ADMINISTRATOR
weiterlesenbenchmarksMistral Large 4 vs Claude, GPT, Gemini und DeepSeek: Preise und TestMistral Large 4 im Vergleich mit Claude Sonnet 5.5, GPT-6.1 Sol, Gemini und DeepSeek V4: API-Preise, Artificial Analysis Index und Labor-Benchmark im Überblick.

Meistgelesen

  1. 1100.000 Qubits statt einer Million: Wie nah ist der Quanten-Codeknacker wirklich?
  2. 2Die partielle Mondfinsternis im August 2026: Warum 96 % kein „Blutmond“ sind - und gerade deshalb faszinieren
  3. 3Seedance 2.5 im Test: 8 Video-Beispiele mit Prompts
// Sitemap

Diese Seite in anderen Sprachen6

wissnox in Zahlen 0Texte im Archiv0News der letzten 7 Tage0Videomodelle im Observatorium
🎬 KI-Video Empfehlung: Higgsfield AI DoP Kamera-Presets & Rechner • Higgsfield AI 50% Gutschein • Higgsfield vs Kling AI
× ‹ Vergrößerung ›