MapikaSupersonic LabsEntscheidungs-Duell
Decider 2Bvs.Julia 1
Welches Modell entscheidet besser?
Decider 2B schneidet in unabhängigen Tests besser ab, Julia 1 ist dafür deutlich kleiner.
Nimm Decider 2B für
Nimm Julia 1 für
Gemeinsame Tests
Nur unabhängige Auswerter und Bestenlisten, je Auswerter der neueste gemeinsame Stand. Mit 95-%-Bereichen zählt ein Vorsprung, wenn sie sich nicht überlappen; bei Trefferquoten, wenn er im 95-%-Test hält. Ohne Unsicherheitsangabe höchstens „leicht vorn“.
Jev Decision Index
Decider 2B vornDecider 2B ist in 19 von 37 Teiltests klar vorn und in 12 leicht, Julia 1 in 0 klar und in 1 leicht. 5 sind gleichauf.
SATA-Bench · Decision Index 0.4.1
1.650 Aufgaben, Stand 28. Oktober 2026
HellaSwag · Decision Index 0.4.1
10.042 Aufgaben, Stand 28. Oktober 2026
MMLU-Pro · Decision Index 0.4.1
12.032 Aufgaben, Stand 28. Oktober 2026
Alle 37 Teiltests zeigen
| Teiltest | Decider 2B | Julia 1 | Urteil |
|---|---|---|---|
| SATA-Bench · Decision Index 0.4.1 | 24,7 | 1,0 | Decider 2B vorn |
| HellaSwag · Decision Index 0.4.1 | 85,8 | 29,9 | Decider 2B vorn |
| MMLU-Pro · Decision Index 0.4.1 | 37,6 | 14,7 | Decider 2B vorn |
| When2Call · Decision Index 0.4.1 | 54,7 | 23,6 | Decider 2B vorn |
| BFCL · Decision Index 0.4.1 | 82,9 | 37,5 | Decider 2B vorn |
| New Yorker · Decision Index 0.4.1 | 44,7 | 23,5 | Decider 2B vorn |
| API-Bank · Decision Index 0.4.1 | 31,7 | 18,3 | Decider 2B vorn |
| BBH · Decision Index 0.4.1 | 51,0 | 33,8 | Decider 2B vorn |
| GPQA Diamond · Decision Index 0.4.1 | 36,2 | 25,5 | Decider 2B vorn |
| MuSR · Decision Index 0.4.1 | 54,9 | 39,0 | Decider 2B vorn |
| GSM8K · Decision Index 0.4.1 | 23,1 | 16,9 | Decider 2B vorn |
| WinoGrande · Decision Index 0.4.1 | 67,7 | 50,7 | Decider 2B vorn |
| BPoMP · Decision Index 0.4.1 | 64,9 | 48,8 | Decider 2B vorn |
| ChessBench · Decision Index 0.4.1 | 9,9 | 7,5 | Decider 2B vorn |
| Humicroedit · Decision Index 0.4.1 | 59,9 | 48,3 | Decider 2B vorn |
| Habermas · Decision Index 0.4.1 | 42,2 | 35,4 | Decider 2B vorn |
| HoVer · Decision Index 0.4.1 | 59,1 | 50,3 | Decider 2B vorn |
| CLadder · Decision Index 0.4.1 | 57,3 | 50,2 | Decider 2B vorn |
| cfcolor · Decision Index 0.4.1 | 57,0 | 50,4 | Decider 2B vorn |
| CLINC150 · Decision Index 0.4.1 | 73,7 | 12,3 | Decider 2B leicht vorn |
| ToolRet · Decision Index 0.4.1 | 63,1 | 13,6 | Decider 2B leicht vorn |
| BRIGHT · Decision Index 0.4.1 | 37,1 | 9,1 | Decider 2B leicht vorn |
| iSarcasmEval · Decision Index 0.4.1 | 22,4 | 6,5 | Decider 2B leicht vorn |
| ACOS · Decision Index 0.4.1 | 7,9 | 3,1 | Decider 2B leicht vorn |
| FinEntity · Decision Index 0.4.1 | 76,1 | 32,8 | Decider 2B leicht vorn |
| ContractNLI · Decision Index 0.4.1 | 63,4 | 31,8 | Decider 2B leicht vorn |
| RAGTruth · Decision Index 0.4.1 | 28,3 | 52,0 | Julia 1 leicht vorn |
| ANLI · Decision Index 0.4.1 | 49,4 | 28,6 | Decider 2B leicht vorn |
| BANKING77 · Decision Index 0.4.1 | 72,8 | 42,6 | Decider 2B leicht vorn |
| Amazon ESCI · Decision Index 0.4.1 | 34,7 | 20,6 | Decider 2B leicht vorn |
| VAST · Decision Index 0.4.1 | 51,0 | 32,9 | Decider 2B leicht vorn |
| NLI4CT · Decision Index 0.4.1 | 65,5 | 49,7 | Decider 2B leicht vorn |
| Home appliances · Decision Index 0.4.1 | 3,4 | 0,0 | gleichauf |
| POP909 · Decision Index 0.4.1 | 0,3 | 0,2 | gleichauf |
| HLE · Decision Index 0.4.1 | 12,0 | 14,4 | gleichauf |
| CRUXEval · Decision Index 0.4.1 | 33,0 | 38,1 | gleichauf |
| PhishNChips · Decision Index 0.4.1 | 50,1 | 49,9 | gleichauf |
Quelle · zuletzt 28. Oktober 2026
DecideBench
Decider 2B vornDecider 2B ist in 7 von 10 Teiltests klar vorn, Julia 1 in keinem. 3 sind gleichauf.
DecideBench pair accuracy
200 Aufgaben, Stand 18. Oktober 2026
DecideBench review_sentiment accuracy
50 Aufgaben, Stand 18. Oktober 2026
DecideBench ticket_triage accuracy
50 Aufgaben, Stand 18. Oktober 2026
Alle 10 Teiltests zeigen
| Teiltest | Decider 2B | Julia 1 | Urteil |
|---|---|---|---|
| DecideBench pair accuracy | 41,0 % | 8,0 % | Decider 2B vorn |
| DecideBench review_sentiment accuracy | 70,0 % | 22,0 % | Decider 2B vorn |
| DecideBench ticket_triage accuracy | 64,0 % | 34,0 % | Decider 2B vorn |
| DecideBench overall accuracy | 63,2 % | 34,8 % | Decider 2B vorn |
| DecideBench support_intent accuracy | 96,0 % | 54,0 % | Decider 2B vorn |
| DecideBench content_moderation accuracy | 66,0 % | 38,0 % | Decider 2B vorn |
| DecideBench agent_routing accuracy | 66,0 % | 40,0 % | Decider 2B vorn |
| DecideBench claim_support accuracy | 42,0 % | 24,0 % | gleichauf |
| DecideBench returns_policy accuracy | 46,0 % | 28,0 % | gleichauf |
| DecideBench action_review accuracy | 56,0 % | 38,0 % | gleichauf |
Quelle · zuletzt 18. Oktober 2026
Alle Daten im Vergleich
| Decider 2B | Julia 1 | |
|---|---|---|
| Art | Eigenständig | Klassifikator |
| Entwickler | Mapika | Supersonic Labs |
| Status | Open Source | Open Source |
| Gewichte | offen | offen |
| Läuft lokal | ja | ja |
| Parameter | 1,9 Mrd. | 0,14 Mrd. |
| Lizenz | Apache-2.0 | Apache-2.0 |
| Beliebtheit (von 100) | 52 | 39 |