Mistral Small 3

Alle 1 Testfamilien und 1 von 1 Rohmesswerten sind hier aufgeführt. Die vollständige Rechnung für alle Modelle enthält der JSON-Export.

1. Testfamilie: IFBench

   Allgemein · Mittleres Rangperzentil der Familie: 1,4 / 100

   Gewicht der Familie im festen Testpanel (informativ): 2,14 % · Abdeckung dieser Testfamilie: 100 %

   • Artificial Analysis

     Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.

     Einzelmessung:

     artificial-analysis-ifbench

     Gewicht der Messreihe innerhalb der Testfamilie:

     100 %

     Nominaler Beitrag zum Gesamtpanel:

     2,14 %

     Rohwert:

     26,3945578231293 %

     Messgröße:

     IFBench prompt-level loose accuracy (pass@1)

     Version:

     AA test set: 294 questions

     Teilnehmende Modelle:

     70

     Rangperzentil innerhalb der Kohorte:

     1,4 %

     Abgerufen:

     2026-10-19

     Vergleichskohorte:

     artificial-analysis-ifbench:AA test set: 294 questions:standalone:non-reasoning:tokens=0:suffix=unspecified

     Dokumentierter Vergleichsaufbau

     Publikationskohorte:

     ["artificial-analysis-ifbench","AA test set: 294 questions","aa-model-page-2026-10-19-8a022369738c"]

     Datensatztyp:

     artificial-analysis-evaluation

     Werkzeugregeln:

     Single-turn answer evaluated with the official IFBench source code

     Versuche:

     pass@1, 5 repeats per question

     Setup- und Modellparameter

     Exakte AA-Konfiguration: Mistral Small 3 (Release mistral-small-3, Zeile mistral-small-3, UUID e5dd499f-c330-45ec-9ff0-a99209c82af7, reasoning=false, source reasoning-token configuration budget=0, suffix=nicht angegeben). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning

     Exakte AA-Konfiguration: Mistral Small 3 (Release mistral-small-3, Zeile mistral-small-3, UUID e5dd499f-c330-45ec-9ff0-a99209c82af7, reasoning=false, source reasoning-token configuration budget=0, suffix=nicht angegeben). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Kennung des Quellmodells: artificial-analysis/e5dd499f-c330-45ec-9ff0-a99209c82af7/mistral-small-3/mistral-small-3. Name des Quellmodells: Mistral Small 3. Anbieter laut Quelle: Mistral. Modellstand: Mistral Small 3. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Angezeigter Wert: 26,4 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-10-19-8a022369738c. Prüfsumme der Quelldaten: 8a022369738cbe2a0e2f9bf486a2882865dbb0c6f1396dfec84059a802560e3c. Parserversion: artificial-analysis-rsc-models-v2. Importiert am: 2026-10-19