Jared PalmerCloudflareEntscheidungs-Duell
Kev 0.8Bvs.Clef-Flash
Welches Modell entscheidet besser?
Clef-Flash schneidet in unabhängigen Tests besser ab.
Nimm Kev 0.8B für
Nimm Clef-Flash für
Gemeinsame Tests
Nur unabhängige Auswerter und Bestenlisten, je Auswerter der neueste gemeinsame Stand. Mit 95-%-Bereichen zählt ein Vorsprung, wenn sie sich nicht überlappen; bei Trefferquoten, wenn er im 95-%-Test hält. Ohne Unsicherheitsangabe höchstens „leicht vorn“.
Jev Decision Index
Clef-Flash vornClef-Flash ist in 22 von 37 Teiltests klar vorn und in 11 leicht, Kev 0.8B in 0 klar und in 1 leicht. 3 sind gleichauf.
Home appliances · Decision Index 0.4.1
88 Aufgaben, Stand 28. Oktober 2026
SATA-Bench · Decision Index 0.4.1
1.650 Aufgaben, Stand 28. Oktober 2026
MMLU-Pro · Decision Index 0.4.1
12.032 Aufgaben, Stand 28. Oktober 2026
Alle 37 Teiltests zeigen
| Teiltest | Kev 0.8B | Clef-Flash | Urteil |
|---|---|---|---|
| Home appliances · Decision Index 0.4.1 | 0,0 | 97,7 | Clef-Flash vorn |
| SATA-Bench · Decision Index 0.4.1 | 9,0 | 36,6 | Clef-Flash vorn |
| MMLU-Pro · Decision Index 0.4.1 | 22,3 | 65,2 | Clef-Flash vorn |
| ChessBench · Decision Index 0.4.1 | 7,9 | 23,1 | Clef-Flash vorn |
| GSM8K · Decision Index 0.4.1 | 19,0 | 46,7 | Clef-Flash vorn |
| New Yorker · Decision Index 0.4.1 | 27,8 | 66,3 | Clef-Flash vorn |
| HellaSwag · Decision Index 0.4.1 | 42,9 | 98,6 | Clef-Flash vorn |
| CRUXEval · Decision Index 0.4.1 | 37,7 | 86,5 | Clef-Flash vorn |
| Habermas · Decision Index 0.4.1 | 33,4 | 71,8 | Clef-Flash vorn |
| API-Bank · Decision Index 0.4.1 | 43,7 | 93,1 | Clef-Flash vorn |
| BPoMP · Decision Index 0.4.1 | 47,7 | 95,4 | Clef-Flash vorn |
| CLadder · Decision Index 0.4.1 | 50,5 | 97,7 | Clef-Flash vorn |
| WinoGrande · Decision Index 0.4.1 | 52,8 | 97,6 | Clef-Flash vorn |
| MuSR · Decision Index 0.4.1 | 48,9 | 86,2 | Clef-Flash vorn |
| BBH · Decision Index 0.4.1 | 41,4 | 68,9 | Clef-Flash vorn |
| GPQA Diamond · Decision Index 0.4.1 | 33,2 | 51,5 | Clef-Flash vorn |
| When2Call · Decision Index 0.4.1 | 43,2 | 65,3 | Clef-Flash vorn |
| Humicroedit · Decision Index 0.4.1 | 50,9 | 75,1 | Clef-Flash vorn |
| PhishNChips · Decision Index 0.4.1 | 51,7 | 75,1 | Clef-Flash vorn |
| BFCL · Decision Index 0.4.1 | 70,5 | 98,8 | Clef-Flash vorn |
| HoVer · Decision Index 0.4.1 | 51,0 | 61,2 | Clef-Flash vorn |
| cfcolor · Decision Index 0.4.1 | 55,4 | 65,9 | Clef-Flash vorn |
| CLINC150 · Decision Index 0.4.1 | 15,0 | 66,9 | Clef-Flash leicht vorn |
| ACOS · Decision Index 0.4.1 | 9,9 | 26,0 | Clef-Flash leicht vorn |
| Amazon ESCI · Decision Index 0.4.1 | 22,9 | 57,4 | Clef-Flash leicht vorn |
| ContractNLI · Decision Index 0.4.1 | 40,9 | 84,5 | Clef-Flash leicht vorn |
| ANLI · Decision Index 0.4.1 | 33,6 | 59,1 | Clef-Flash leicht vorn |
| NLI4CT · Decision Index 0.4.1 | 55,9 | 78,6 | Clef-Flash leicht vorn |
| FinEntity · Decision Index 0.4.1 | 71,4 | 97,1 | Clef-Flash leicht vorn |
| RAGTruth · Decision Index 0.4.1 | 46,2 | 35,6 | Kev 0.8B leicht vorn |
| ToolRet · Decision Index 0.4.1 | 51,7 | 66,2 | Clef-Flash leicht vorn |
| VAST · Decision Index 0.4.1 | 40,6 | 49,6 | Clef-Flash leicht vorn |
| BRIGHT · Decision Index 0.4.1 | 31,8 | 38,3 | Clef-Flash leicht vorn |
| BANKING77 · Decision Index 0.4.1 | 77,6 | 90,8 | Clef-Flash leicht vorn |
| HLE · Decision Index 0.4.1 | 13,8 | 11,8 | gleichauf |
| POP909 · Decision Index 0.4.1 | 1,5 | 1,6 | gleichauf |
| iSarcasmEval · Decision Index 0.4.1 | 19,9 | 19,7 | gleichauf |
Quelle · zuletzt 28. Oktober 2026
Zero-shot IE benchmark
gleichaufZero-shot IE spectrum: mixed-pool classification accuracy
48 Aufgaben, Stand 17. Oktober 2026
Quelle · zuletzt 17. Oktober 2026
Alle Daten im Vergleich
| Kev 0.8B | Clef-Flash | |
|---|---|---|
| Art | Adapter | Eigenständig |
| Entwickler | Jared Palmer | Cloudflare |
| Status | Open Source | Aktiv |
| Veröffentlicht | 20. September 2026 | 1. Oktober 2026 |
| Gewichte | offen | offen |
| Läuft lokal | ja | ja |
| Parameter | k. A. | 9 Mrd. |
| Lizenz | Apache-2.0 für Adapter und Kopf | Apache-2.0 |
| Preis | k. A. | 0,09 $ pro 1 Mio. Eingabetoken (8.182 Neuronen pro Mio.) |
| Beliebtheit (von 100) | 45 | 51 |