Jared PalmerEntscheidungsmodellOpen Source
Kev 9B
BeliebtheitPlatz 274 von 876
40von 100-2 zum Vormonat
Zusammenfassung
Kev 9B ist die größte aktuelle Kev-Adaptervariante. Der LoRA-Adapter mit Pointer-Head baut auf einem 9-Milliarden-Parameter-Basismodell auf und liefert für typisierte Fragen kalibrierte Choice-, Noul- und Score-Wahrscheinlichkeiten. Wie bei den kleineren Varianten läuft die Entscheidung in einem Durchgang.
Der Familienüberblick nennt L40S und H100 als Zielhardware. Die Modellkarte validiert Kev 9B bis 8.192 Token, während der Server Zustände bis 65.536 Token annimmt; daraus folgt keine gleichbleibende Modellgenauigkeit. Die kleineren Adaptervarianten sind Kev 4B und Kev 0.8B.
Alle Benchmark-Werte
Jeder veröffentlichte Messwert mit Quelle, Testbedingungen und Vergleichsmodellen.
Alle 95 veröffentlichten Benchmark-Werte anzeigen
Seite 1 von 8
Messungen ohne passende Vergleichswerte
Für diese Messungen fehlen passende Vergleichswerte unter gleichen Testbedingungen. Die Originalwerte und Quellen bleiben hier nachlesbar.
JEVal (arXiv:2610.03935v2), overall choice/noul evaluation (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 70.87
- Bewertung
- 70.87
- Messgröße
- accuracy (invalid outputs count as incorrect)
- Einheit
- %
- Benchmark-Version
- arXiv:2610.03935v2, Table 1
- Kategorie
- JEVal overall choice/noul
- Richtung
- Mehr ist besser
- Stichprobe
- 10938
- Quellentyp
- community-reported
- Auswertung
- Duan et al., General Decision Models: Benchmarking and Insights Beyond Jev (arXiv:2610.03935v2)
- Status
- active
- Abrufdatum
- 2026-10-18
- Methodik
- Community-Messung. JEVal-Tabelle 1, exakte Quellenbezeichnung Kev-9b; Lauf eines Entscheidungsmodells, kein Reasoning-Aufwand ausgewiesen; lokale Ausführung mit vLLM auf NVIDIA H100; Kontextfenster 32.768 Tokens; Eingabebudget 24.576 Tokens; Temperatur 2,2974; 10.938 Choice- und Noul-Fragen.
- Einordnung
- Ein unveränderlicher Hash der ausgewerteten Gewichte oder Serving-Revision ist nicht angegeben. Tabelle 1 zählt ungültige Ausgaben bei der Genauigkeit als falsch; ECE und Raw Brier werden nur für gültige Antworten berechnet, deren N je Modell nicht berichtet wird. Das Paper nennt für diese Punktwerte kein Konfidenzintervall.
StreamDecisionBench (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 28.76
- Bewertung
- 28.76
- Messgröße
- Mean log-AUC 0.5–8 s
- Einheit
- %
- Richtung
- Keine Richtung veröffentlicht
- Stichprobe
- 480
- Quellentyp
- independent-evaluator
- Auswertung
- StreamDecisionBench GitHub README
- Status
- active
- Abrufdatum
- 2026-10-18
- Methodik
- Unabhängige Evaluation. Self-hosted open-weight setting, exact source row “Kev-9B”. Three passes over all 480 states per pass (8 scenarios in 4 families), sampled at a 2 s step; the source reports means. The README says all 17 self-hosted settings use BF16 backbones, each on one RTX PRO 6000 (96 GB), with benchmark and model on the same GPU host. Same-host latency includes request processing, runtime queueing, and inference, and excludes download, initialization, and warmup. Serving stack, exact checkpoint revision, and other runtime settings are not stated.
StreamDecisionBench (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 29.86
- Bewertung
- 29.86
- Messgröße
- Mean untimed (%)
- Einheit
- %
- Richtung
- Keine Richtung veröffentlicht
- Stichprobe
- 480
- Quellentyp
- independent-evaluator
- Auswertung
- StreamDecisionBench GitHub README
- Status
- active
- Abrufdatum
- 2026-10-18
- Methodik
- Unabhängige Evaluation. Self-hosted open-weight setting, exact source row “Kev-9B”. Three passes over all 480 states per pass (8 scenarios in 4 families), sampled at a 2 s step; the source reports means. The README says all 17 self-hosted settings use BF16 backbones, each on one RTX PRO 6000 (96 GB), with benchmark and model on the same GPU host. Same-host latency includes request processing, runtime queueing, and inference, and excludes download, initialization, and warmup. Serving stack, exact checkpoint revision, and other runtime settings are not stated.
Knowledge and evidence exams (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 78
- Bewertung
- 78
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- Introducing Kev, published 2026-10-01; exact weight revision not stated in article
- Richtung
- Keine Richtung veröffentlicht
- Stichprobe
- 1046
- Quellentyp
- vendor-reported
- Auswertung
- Jared Palmer, Introducing Kev
- Status
- active
- Abrufdatum
- 2026-10-18
- Methodik
- Vom Anbieter veröffentlichter Wert. Development split; row covers buried facts and missing evidence. Author's evaluation harness, not an independent leaderboard. The article provides no full prompt, hardware, or inference-setting record for these cells.
JEVal aida-testc accuracy (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 96
- Bewertung
- 96
- Messgröße
- accuracy (ACC)
- Einheit
- %
- Benchmark-Version
- arXiv:2610.03935v2
- Kategorie
- decision
- Richtung
- Mehr ist besser
- Stichprobe
- 200
- Quellentyp
- independent-evaluator
- Auswertung
- Duan et al., General Decision Models: Benchmarking and Insights Beyond Jev
- Status
- active
- Abrufdatum
- 2026-10-22
- Methodik
- Unabhängige Evaluation. JEVal Tabelle 10, Bereich „General knowledge and reasoning“, aida-testc (N = 200). Der Tabellenkopf zeigt den Modellnamen und die jeweilige Größe; eine unveränderliche Gewichts- oder Servingrevision wird dort nicht genannt.
- Einordnung
- Das ist ein dataset-spezifischer Teilwert aus JEVal, nicht der Gesamtwert aus Tabelle 1. Die genaue Gewichtsrevision und eine pro Modell unveränderliche Servingkennung fehlen. Die Tabellenzeile berichtet keinen Konfidenzbereich.
JevAny external matrix: MMLU-Pro (ekzhang external panel, 1,000 questions) (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 50.7
- Bewertung
- 50.7
- Messgröße
- all-requested accuracy; rejected or missing knowable questions count as wrong
- Einheit
- %
- Benchmark-Version
- JevAny external decision-suite matrix, 2026-09-27; Kev repository revision 5920c5fe4ca8e0970ed4209ac2c9b8e18bea5109; checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c; panel MMLU-Pro (ekzhang external panel, 1,000 questions)
- Kategorie
- decision
- Richtung
- Mehr ist besser
- Stichprobe
- 1000
- Quellentyp
- independent-evaluator
- Auswertung
- JevAny external decision-suite evaluation
- Status
- active
- Abrufdatum
- 2026-10-22
- Methodik
- Unabhängige Evaluation. Der veröffentlichte Kev-Checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c wurde in der JevAny-Matrix vom 27. September 2026 auf dem externen Panel MMLU-Pro (ekzhang external panel, 1,000 questions) ausgewertet. Der Bericht nennt keine Stichprobenziehung.
JevAny external matrix: WANLI-v2 (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 73.95
- Bewertung
- 73.95
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- JevAny external decision-suite matrix, 2026-09-27; Kev repository revision 5920c5fe4ca8e0970ed4209ac2c9b8e18bea5109; checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c; panel WANLI-v2
- Kategorie
- decision
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- JevAny external decision-suite evaluation
- Status
- active
- Abrufdatum
- 2026-10-22
- Methodik
- Unabhängige Evaluation. Der veröffentlichte Kev-Checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c wurde in der JevAny-Matrix vom 27. September 2026 auf dem externen Panel WANLI-v2 ausgewertet. Der Bericht nennt keine Stichprobenziehung.
JevAny external matrix: SemIf (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 90.97
- Bewertung
- 90.97
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- JevAny external decision-suite matrix, 2026-09-27; Kev repository revision 5920c5fe4ca8e0970ed4209ac2c9b8e18bea5109; checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c; panel SemIf
- Kategorie
- decision
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- JevAny external decision-suite evaluation
- Status
- active
- Abrufdatum
- 2026-10-22
- Methodik
- Unabhängige Evaluation. Der veröffentlichte Kev-Checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c wurde in der JevAny-Matrix vom 27. September 2026 auf dem externen Panel SemIf ausgewertet. Der Bericht nennt keine Stichprobenziehung.
JevAny external matrix: scienthoon (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 75.49
- Bewertung
- 75.49
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- JevAny external decision-suite matrix, 2026-09-27; Kev repository revision 5920c5fe4ca8e0970ed4209ac2c9b8e18bea5109; checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c; panel scienthoon
- Kategorie
- decision
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- JevAny external decision-suite evaluation
- Status
- active
- Abrufdatum
- 2026-10-22
- Methodik
- Unabhängige Evaluation. Der veröffentlichte Kev-Checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c wurde in der JevAny-Matrix vom 27. September 2026 auf dem externen Panel scienthoon ausgewertet. Der Bericht nennt keine Stichprobenziehung.
JevAny external matrix: TypeSafe (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 72.79
- Bewertung
- 72.79
- Messgröße
- equal-case agreement
- Einheit
- %
- Benchmark-Version
- JevAny external decision-suite matrix, 2026-09-27; Kev repository revision 5920c5fe4ca8e0970ed4209ac2c9b8e18bea5109; checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c; panel TypeSafe
- Kategorie
- decision
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- JevAny external decision-suite evaluation
- Status
- active
- Abrufdatum
- 2026-10-22
- Methodik
- Unabhängige Evaluation. Der veröffentlichte Kev-Checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c wurde in der JevAny-Matrix vom 27. September 2026 auf dem externen Panel TypeSafe ausgewertet. Der Bericht nennt keine Stichprobenziehung.
JevBench public easy tier accuracy (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 100
- Bewertung
- 100
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- JevAny external decision-suite matrix, 2026-09-27; JevBench public panel jevbench/easy; JevBench revision d06ee95988da1350eb8ae5511daa0e06bfffe911; checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c
- Kategorie
- decision
- Richtung
- Mehr ist besser
- Stichprobe
- 48
- Quellentyp
- independent-evaluator
- Auswertung
- JevAny external decision-suite evaluation
- Status
- active
- Abrufdatum
- 2026-10-22
- Methodik
- Unabhängige Evaluation. Der veröffentlichte Kev-Checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c wurde in der JevAny-Matrix vom 27. September 2026 auf der öffentlichen JevBench-Stufe easy mit N=48 ausgewertet.
JevBench public original tier accuracy (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 90.28
- Bewertung
- 90.28
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- JevAny external decision-suite matrix, 2026-09-27; JevBench public panel jevbench/original; JevBench revision d06ee95988da1350eb8ae5511daa0e06bfffe911; checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c
- Kategorie
- decision
- Richtung
- Mehr ist besser
- Stichprobe
- 72
- Quellentyp
- independent-evaluator
- Auswertung
- JevAny external decision-suite evaluation
- Status
- active
- Abrufdatum
- 2026-10-22
- Methodik
- Unabhängige Evaluation. Der veröffentlichte Kev-Checkpoint jaredpalmer/kev-9b@2629c06a5aeb0feb3b9783bafed17ed8f39ecf5c wurde in der JevAny-Matrix vom 27. September 2026 auf der öffentlichen JevBench-Stufe original mit N=72 ausgewertet.
Seite 1 von 8
Beliebtheit im Vergleich
Wie oft das Modell gesucht, genutzt und erwähnt wird, im Vergleich mit allen Modellen dieser Kategorie.
Beliebtheitsindex
0 bis 100, höher ist beliebter
20 von 37 Modellen
Stand November 2026 · Quelle: gradually.ai Beliebtheitsindex
Zeitlicher Verlauf
Wochenwerte vom 18. Oktober 2026 bis 6. November 2026
Kev 9BIntern-Decision-4B 40Laya Typed Decisions 40pplx-decider-v1-27b 39Decider 0.8B 39
Methodenwechsel im Verlauf, ein Sprung an dieser Stelle ist kein Marktereignis:
- 11. November 2026: Wert nur mit Such- oder Nutzungsdaten, 30-Tage-Aufmerksamkeit
Was gerade an Beliebtheit gewinnt, steht für Modelle, Anbieter, Harnesses und KI-Abos gesammelt in Alle KI-Trends.
Kev 9B im Vergleich
- 1Kev 9B vs. Decider 2B37 gemeinsame Tests
- 2Kev 9B vs. Decider 4B37 gemeinsame Tests
- 3Kev 9B vs. Kev 0.8B41 gemeinsame Tests
- 4Kev 9B vs. Clef4 gemeinsame Tests
- 5Kev 9B vs. Clef-Flash37 gemeinsame Tests
- 6Kev 9B vs. GLiNER2.5-Decide37 gemeinsame Tests
- 7Kev 9B vs. Intern-Decision-4B37 gemeinsame Tests
- 8Kev 9B vs. Julia 137 gemeinsame Tests
- 9Kev 9B vs. Intern-Decision-0.8B38 gemeinsame Tests
Ähnliche Modelle
Weitere Modelle derselben Art wie Kev 9B, ausgewählt nach Modellreihe, Anbieter, Größe, Preis und Erscheinungsdatum.
- Kev 0.8BJared Palmer · gleicher Anbieter
- Kev 4BJared Palmer · gleicher Anbieter
- AutoTrust JEV-27B-VLAutoTrust AI · etwa gleichzeitig erschienen
- AutoTrust JEV-27BAutoTrust AI · etwa gleichzeitig erschienen
- ClefCloudflare · etwa gleichzeitig erschienen
- Clef-FlashCloudflare · etwa gleichzeitig erschienen
- Strands Decider 2BAWS Strands · etwa gleichzeitig erschienen
- JevTypeSafe AI · etwa gleichzeitig erschienen
Alle technischen Daten
Architektur
Ein- und Ausgabe
Wasserzeichen und Herkunft
KI-Wasserzeichen meint unsichtbare Signale in der Ausgabe. Sichtbare Zeichen und Herkunftsmetadaten sind getrennt aufgeführt. Unbekannt bedeutet, dass für die jeweilige Angabe kein ausreichender Beleg vorliegt.
- KI-Wasserzeichen
- Unbekannt
- ohne Quelle
- Wasserzeichen-Technik
- Nicht bekannt
- ohne Quelle
Lizenz und Zugang
API
Weitere Angaben
- Einsatzbereich
- Lokale Modelle der Kev-Familie mit TypeSafe-kompatibler Schnittstelle.
- Quelle: Einsatzbereich
Quellen und Datenstand
Alle 22 Quellen anzeigen
Benchmarkquellen im Überblick
Welche unabhängigen Auswerter dieses Modell getestet haben. Das ist Abdeckung, keine Qualitätsrangliste.
Für dieses Modell ist derzeit kein aktives Ergebnis der geprüften externen Auswerter zugeordnet. Weitere Quellenbelege stehen darunter.
Ohne Herstellerangaben sowie historische oder strittige Ergebnisse; diese stehen gekennzeichnet bei den Einzelwerten.
| Art | Nachweis und Datenstand |
|---|---|
| Recherchestand | Recherchestand 15. Oktober 2026. 13 Quellen-URLs geprüft. Das dokumentiert die geprüften Quellen, nicht sämtliche Veröffentlichungen zu diesem Modell. |
| Ungeklärt | score-run configuration Originalwortlaut The source identifies the exact model row and some adjacent model/route settings, but does not bind all per-cell prompt, decoding, or serving details to the score table. |
| Ungeklärt | parenthetical ranges Originalwortlaut Ranges are printed beside each score but the article does not define them as confidence intervals or identify another statistical meaning. |
| Ungeklärt | Task done check sample count Originalwortlaut The source reports 155 of 204 items for this task, but the denominator meaning is not made clear; no sampleCount is asserted. |
| Ungeklärt | exact-checkpoint-and-inference-settings Originalwortlaut The article identifies model labels and the Kev 1.0 release context but gives no exact weight revision or full prompt/hardware/inference settings for these panel scores. |
| Nicht veröffentlicht | per-dataset-calibration-sample-count Originalwortlaut For the per-dataset averaged calibration-error aggregate, the article does not state a metric-specific evaluated N. |
| Nicht veröffentlicht | Unveränderliche Revision des im Decision Index ausgelieferten Checkpoints Hinweis Der aktuelle öffentliche Index nennt je nach Eintrag Modell-URL und served_checkpoint, aber keinen unveränderlichen Commit/Digest der tatsächlich ausgewerteten Gewichte. |
| Weitere Quelle | Kev repository (abgerufen 24. September 2026) · Kev repository · Redaktionelle Beschreibung geprüft am 2. Oktober 2026 |
| Weitere Quelle | Kev release plan (abgerufen 24. September 2026) · Kev release plan · Redaktionelle Beschreibung geprüft am 2. Oktober 2026 |
| Weitere Quelle | Kev 9B checkpoint (abgerufen 24. September 2026) · Kev 9B checkpoint · Redaktionelle Beschreibung geprüft am 2. Oktober 2026 |
| Weitere Quelle | Kev 9b model card (abgerufen 15. Oktober 2026; 21. Oktober 2026; 23. Oktober 2026) |
| Weitere Quelle | Jared Palmer, Kev model card (abgerufen 16. Oktober 2026) |
| Weitere Quelle | Jared Palmer, Kev-9B v2 model card (abgerufen 18. Oktober 2026) |
| Weitere Quelle | Duan et al., General Decision Models: Benchmarking and Insights Beyond Jev (arXiv:2610.03935v2) (abgerufen 18. Oktober 2026) |
| Weitere Quelle | AIMultiple decision-models evaluation (abgerufen 18. Oktober 2026) |
| Weitere Quelle | StreamDecisionBench GitHub README (abgerufen 18. Oktober 2026) |
| Weitere Quelle | Jared Palmer, Introducing Kev (abgerufen 18. Oktober 2026) |
| Weitere Quelle | Duan et al., General Decision Models: Benchmarking and Insights Beyond Jev (abgerufen 22. Oktober 2026) |
| Weitere Quelle | JevAny external decision-suite evaluation (abgerufen 22. Oktober 2026) |
| Weitere Quelle | DecideBench (abgerufen 22. Oktober 2026) |
| Weitere Quelle | Kevala decision benchmark report (abgerufen 23. Oktober 2026) |
| Weitere Quelle | akitaonrails/jev-docs-benchmarks, bilingual v2 results (abgerufen 23. Oktober 2026) |
| Weitere Quelle | Jev Decision Index public index.json (release-v4) (abgerufen 28. Oktober 2026) |
| Weitere Quelle | OpenRouter: Beliebtheitsindex (abgeleitet), CC BY 4.0 |
| Weitere Quelle | Vercel AI Gateway: Beliebtheitsindex (abgeleitet), CC BY 4.0 |
| Weitere Quelle | Ollama: kumulierte Downloads für den Beliebtheitsindex |
| Weitere Quelle | Replicate: kumulierte Ausführungen für den Beliebtheitsindex |
| Weitere Quelle | Google Trending Now: begrenzte Feed-Auswahl für Deutschland und USA |
| Weitere Quelle | Creative Commons Attribution 4.0 |