AWS StrandsPerplexityEntscheidungs-Duell
Strands Decider 2Bvs.pplx-decider-v1.1-27b
Welches Modell entscheidet besser?
pplx-decider-v1.1-27b schneidet in unabhängigen Tests besser ab, Strands Decider 2B ist dafür deutlich kleiner.
Nimm Strands Decider 2B für
Nimm pplx-decider-v1.1-27b für
Gemeinsame Tests
Nur unabhängige Auswerter und Bestenlisten, je Auswerter der neueste gemeinsame Stand. Mit 95-%-Bereichen zählt ein Vorsprung, wenn sie sich nicht überlappen; bei Trefferquoten, wenn er im 95-%-Test hält. Ohne Unsicherheitsangabe höchstens „leicht vorn“.
Jev Decision Index
pplx-decider-v1.1-27b vornpplx-decider-v1.1-27b ist in 27 von 51 Teiltests klar vorn und in 19 leicht, Strands Decider 2B in 0 klar und in 2 leicht. 3 sind gleichauf.
Home appliances · Decision Index 0.3
88 Aufgaben, Stand 7. Oktober 2026
POP909 · Decision Index 0.3
2.000 Aufgaben, Stand 7. Oktober 2026
GSM8K · Decision Index 0.3
2.638 Aufgaben, Stand 7. Oktober 2026
Alle 51 Teiltests zeigen
| Teiltest | Strands Decider 2B | pplx-decider-v1.1-27b | Urteil |
|---|---|---|---|
| Home appliances · Decision Index 0.3 | 0,0 | 80,7 | pplx-decider-v1.1-27b vorn |
| POP909 · Decision Index 0.3 | 6,9 | 57,1 | pplx-decider-v1.1-27b vorn |
| GSM8K · Decision Index 0.3 | 24,7 | 76,6 | pplx-decider-v1.1-27b vorn |
| SATA-Bench · Decision Index 0.3 | 9,8 | 28,2 | pplx-decider-v1.1-27b vorn |
| CRUXEval · Decision Index 0.3 | 33,3 | 85,6 | pplx-decider-v1.1-27b vorn |
| MMLU-Pro · Decision Index 0.3 | 31,1 | 71,0 | pplx-decider-v1.1-27b vorn |
| API-Bank · Decision Index 0.3 | 39,6 | 85,8 | pplx-decider-v1.1-27b vorn |
| ChessBench · Decision Index 0.3 | 9,2 | 17,7 | pplx-decider-v1.1-27b vorn |
| BBH · Decision Index 0.3 | 46,5 | 84,0 | pplx-decider-v1.1-27b vorn |
| MMLU · Decision Index 0.3 | 51,0 | 87,7 | pplx-decider-v1.1-27b vorn |
| BPoMP · Decision Index 0.3 | 56,0 | 95,2 | pplx-decider-v1.1-27b vorn |
| GPQA Diamond · Decision Index 0.3 | 33,2 | 56,1 | pplx-decider-v1.1-27b vorn |
| New Yorker · Decision Index 0.3 | 45,5 | 75,6 | pplx-decider-v1.1-27b vorn |
| HellaSwag · Decision Index 0.3 | 57,4 | 93,2 | pplx-decider-v1.1-27b vorn |
| WinoGrande · Decision Index 0.3 | 57,4 | 92,4 | pplx-decider-v1.1-27b vorn |
| CLadder · Decision Index 0.3 | 54,4 | 79,3 | pplx-decider-v1.1-27b vorn |
| PhishNChips · Decision Index 0.3 | 50,8 | 73,2 | pplx-decider-v1.1-27b vorn |
| Decision Index all-suite calibration accuracy | 54,1 | 76,1 | pplx-decider-v1.1-27b vorn |
| MuSR · Decision Index 0.3 | 51,1 | 70,7 | pplx-decider-v1.1-27b vorn |
| HoVer · Decision Index 0.3 | 54,1 | 74,1 | pplx-decider-v1.1-27b vorn |
| ARC-Challenge · Decision Index 0.3 | 71,1 | 97,0 | pplx-decider-v1.1-27b vorn |
| cfcolor · Decision Index 0.3 | 50,7 | 64,5 | pplx-decider-v1.1-27b vorn |
| When2Call · Decision Index 0.3 | 59,6 | 73,9 | pplx-decider-v1.1-27b vorn |
| Humicroedit · Decision Index 0.3 | 49,7 | 61,2 | pplx-decider-v1.1-27b vorn |
| BFCL · Decision Index 0.3 | 81,4 | 97,2 | pplx-decider-v1.1-27b vorn |
| Habermas · Decision Index 0.3 | 38,0 | 42,0 | pplx-decider-v1.1-27b vorn |
| ARC-Easy · Decision Index 0.3 | 90,5 | 99,3 | pplx-decider-v1.1-27b vorn |
| Decision Index confidence-above-95% share (niedriger ist besser) | 0,0 | 2,0 | Strands Decider 2B leicht vorn |
| ACOS · Decision Index 0.3 | 6,0 | 28,2 | pplx-decider-v1.1-27b leicht vorn |
| Decision Index 0.3 · Full Decision Index score | 22 | 63 | pplx-decider-v1.1-27b leicht vorn |
| Decision Index 0.3 · Private new-domains component | 20 | 56 | pplx-decider-v1.1-27b leicht vorn |
| Decision Index 0.3 · Public breadth skill score | 23 | 62 | pplx-decider-v1.1-27b leicht vorn |
| Decision Index 0.3 · Private same-skills component | 23 | 61 | pplx-decider-v1.1-27b leicht vorn |
| Decision Index 0.3 · Public index skill score | 25 | 62 | pplx-decider-v1.1-27b leicht vorn |
| iSarcasmEval · Decision Index 0.3 | 29,6 | 71,0 | pplx-decider-v1.1-27b leicht vorn |
| RAGTruth · Decision Index 0.3 | 35,7 | 83,1 | pplx-decider-v1.1-27b leicht vorn |
| Amazon ESCI · Decision Index 0.3 | 26,0 | 60,4 | pplx-decider-v1.1-27b leicht vorn |
| VAST · Decision Index 0.3 | 40,4 | 76,7 | pplx-decider-v1.1-27b leicht vorn |
| ANLI · Decision Index 0.3 | 39,9 | 74,3 | pplx-decider-v1.1-27b leicht vorn |
| Decision Index all-suite Brier score (niedriger ist besser) | 55,2 | 33,5 | pplx-decider-v1.1-27b leicht vorn |
| Decision Index all-suite expected calibration error (niedriger ist besser) | 4,4 | 7,1 | Strands Decider 2B leicht vorn |
| Decision Index 0.3 · Public index raw score | 44 | 72 | pplx-decider-v1.1-27b leicht vorn |
| CLINC150 · Decision Index 0.3 | 64,7 | 91,5 | pplx-decider-v1.1-27b leicht vorn |
| BRIGHT · Decision Index 0.3 | 36,8 | 50,8 | pplx-decider-v1.1-27b leicht vorn |
| FinEntity · Decision Index 0.3 | 72,7 | 95,4 | pplx-decider-v1.1-27b leicht vorn |
| NLI4CT · Decision Index 0.3 | 65,8 | 84,9 | pplx-decider-v1.1-27b leicht vorn |
| ToolRet · Decision Index 0.3 | 60,5 | 67,8 | pplx-decider-v1.1-27b leicht vorn |
| ContractNLI · Decision Index 0.3 | 73,0 | 78,4 | pplx-decider-v1.1-27b leicht vorn |
| HLE · Decision Index 0.3 | 14,0 | 16,2 | gleichauf |
| RouterBench · Decision Index 0.3 | 78,9 | 79,8 | gleichauf |
| BANKING77 · Decision Index 0.3 | 80,4 | 80,6 | gleichauf |
Quelle · zuletzt 7. Oktober 2026
Alle Daten im Vergleich
| Strands Decider 2B | pplx-decider-v1.1-27b | |
|---|---|---|
| Art | Adapter | Eigenständig |
| Entwickler | AWS Strands | Perplexity |
| Status | Offene Gewichte | Offene Gewichte |
| Veröffentlicht | 5. Oktober 2026 | 6. Oktober 2026 |
| Gewichte | offen | offen |
| Läuft lokal | ja | ja |
| Parameter | 2 Mrd. | 26,09 Mrd. |
| Lizenz | Apache-2.0 | Apache-2.0; das öffentliche Hugging-Face-Repository ist nicht zugangsbeschränkt |
| Preis | k. A. | Perplexity nennt 0,02 $ je 1 Mio. Eingabetoken. |
| Beliebtheit (von 100) | 1 | 42 |