Zum Hauptinhalt springen

Mistral AISprachmodell

Devstral Small 2

Für Devstral Small 2 gibt es noch keinen Wert im Gesamtindex, weil zu wenige unabhängige Benchmark-Ergebnisse vorliegen.

BeliebtheitPlatz 319 von 785

39von 100-1 zum Vormonat

beruht auf Suche, Nutzung und Aufmerksamkeit

Zusammenfassung

Das Besondere an Devstral Small 2 ist ein 24B-Coding-Agent mit Text- und Bildeingabe. Er verarbeitet 256.000 Token Kontext, liest Codebasen, ruft Werkzeuge auf und plant Änderungen über mehrere Schritte. Die Veröffentlichung steht unter Apache 2.0.

Gegenüber Devstral 2 ergänzt Small 2 Screenshots oder Dokumentation als Bildeingabe.

Alle Benchmark-Werte

Jeder veröffentlichte Messwert mit Quelle, Testbedingungen und Vergleichsmodellen.

Alle 27 veröffentlichten Benchmark-Werte anzeigen

Seite 1 von 3

Messungen ohne passende Vergleichswerte

Für diese Messungen fehlen passende Vergleichswerte unter gleichen Testbedingungen. Die Originalwerte und Quellen bleiben hier nachlesbar.

CritPt v2: Overall (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
0
Bewertung
0
Messgröße
pass@1 accuracy
Einheit
%
Benchmark-Version
v2
Kategorie
reasoning
Aufgabe
overall
Aufgabenbezeichnung
Overall
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Artificial Analysis
Status
disputed
Abrufdatum
2026-11-02
Methodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Der vollständige CritPt-v2-Lauf umfasst 70 Fragen mit fünf Wiederholungen. Der offizielle Grading-Server bewertet pass@1.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Python functions, symbolic expressions, and numerical answers; official grading server. Versuche: 70 questions, five repeats per question, pass@1. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 0,0 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-02-67d46be20a5b. Prüfsumme der Quelldaten: 67d46be20a5b412db6cfb60ad190441fcaa5513500b8fd47d033168d0e97b6b2. Parserversion: artificial-analysis-rsc-models-v3. Importiert am: 2026-11-02. Quellenkohorte: artificial-analysis-critpt-v2:v2:standalone:non-reasoning:effort=unspecified:suffix=unspecified
Vergleichsmethodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Der vollständige CritPt-v2-Lauf umfasst 70 Fragen mit fünf Wiederholungen. Der offizielle Grading-Server bewertet pass@1.. Werkzeugrichtlinie: Python functions, symbolic expressions, and numerical answers; official grading server. Versuche: 70 questions, five repeats per question, pass@1. Reasoning: non-reasoning. Reasoning-Stufe: none
Einordnung
Die AA-Quelle enthält hier den ursprünglichen CritPt-Wert. Die frühere Zuordnung zu CritPt v2 ist falsch; Wert und frühere Beschriftung bleiben als strittiger Altbeleg erhalten.. Der Quelldatensatz markiert diesen Wert als umstritten. Er bleibt als dokumentierte Evidenz sichtbar, ist aber kein belastbarer Vergleichsnachweis.
Quelle Artificial Analysis
IFBench: Overall (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
31.156462585034
Bewertung
31.156462585034
Messgröße
IFBench prompt-level loose accuracy (pass@1)
Einheit
%
Benchmark-Version
AA test set: 294 questions
Kategorie
general
Aufgabe
overall
Aufgabenbezeichnung
Overall
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Artificial Analysis
Status
superseded
Abrufdatum
2026-11-02
Methodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 31,2 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-02-67d46be20a5b. Prüfsumme der Quelldaten: 67d46be20a5b412db6cfb60ad190441fcaa5513500b8fd47d033168d0e97b6b2. Parserversion: artificial-analysis-rsc-models-v3. Importiert am: 2026-11-02. Quellenkohorte: artificial-analysis-ifbench:AA test set: 294 questions:standalone:non-reasoning:effort=unspecified:suffix=unspecified
Vergleichsmethodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Reasoning-Stufe: none
Einordnung
Die Angabe von 58 bezieht sich auf die verifizierbaren Out-of-Domain-Bedingungstypen, nicht auf die Zahl der Fragen im AA-Testlauf.. Dieser Wert wird als historische Evidenz geführt und ist nicht mit aktuellen Ergebnissen gleichzusetzen.
Quelle Artificial Analysis
IFBench: Overall (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
31.156462585034
Bewertung
31.156462585034
Messgröße
IFBench prompt-level loose accuracy (pass@1)
Einheit
%
Benchmark-Version
AA test set: 294 questions
Kategorie
general
Aufgabe
overall
Aufgabenbezeichnung
Overall
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Artificial Analysis
Status
active
Abrufdatum
2026-11-07
Methodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). Diese Quellenfassung enthält keine durchschnittliche Reasoning-Tokenzahl. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 31,2 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-07-b96e3ffc8c5b. Prüfsumme der Quelldaten: b96e3ffc8c5b052aa56f96d05e89d02b8cc234a75085820fca0ca2a39e498274. Parserversion: artificial-analysis-rsc-models-v4. Importiert am: 2026-11-07. Quellenkohorte: artificial-analysis-ifbench:AA test set: 294 questions:standalone:non-reasoning:effort=unspecified:suffix=unspecified
Vergleichsmethodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). Diese Quellenfassung enthält keine durchschnittliche Reasoning-Tokenzahl. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Reasoning-Stufe: none
Einordnung
Die Angabe von 58 bezieht sich auf die verifizierbaren Out-of-Domain-Bedingungstypen, nicht auf die Zahl der Fragen im AA-Testlauf.
Quelle Artificial Analysis
MMMU-Pro: Overall (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
44.6242774566474
Bewertung
44.6242774566474
Messgröße
pass@1 accuracy
Einheit
%
Benchmark-Version
AA cohort: 1,730 questions
Kategorie
multimodal
Aufgabe
overall
Aufgabenbezeichnung
Overall
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Artificial Analysis
Status
superseded
Abrufdatum
2026-11-02
Methodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Der AA-Lauf umfasst 1.730 Fragen mit zehn Antwortoptionen. Die Antwort wird per regulärem Ausdruck extrahiert und als pass@1 bewertet.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Ten-option multiple choice; regex answer extraction. Versuche: pass@1, one run per question. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 44,6 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-02-67d46be20a5b. Prüfsumme der Quelldaten: 67d46be20a5b412db6cfb60ad190441fcaa5513500b8fd47d033168d0e97b6b2. Parserversion: artificial-analysis-rsc-models-v3. Importiert am: 2026-11-02. Quellenkohorte: artificial-analysis-mmmu-pro:AA cohort: 1,730 questions:standalone:non-reasoning:effort=unspecified:suffix=unspecified
Vergleichsmethodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Der AA-Lauf umfasst 1.730 Fragen mit zehn Antwortoptionen. Die Antwort wird per regulärem Ausdruck extrahiert und als pass@1 bewertet.. Werkzeugrichtlinie: Ten-option multiple choice; regex answer extraction. Versuche: pass@1, one run per question. Reasoning: non-reasoning. Reasoning-Stufe: none
Einordnung
Die Benchmarkseite nennt 3.460 Fragen für den vollständigen MMMU-Pro-Datensatz; die AA-Methodik beschreibt einen 1.730-Fragen-Lauf.. Dieser Wert wird als historische Evidenz geführt und ist nicht mit aktuellen Ergebnissen gleichzusetzen.
Quelle Artificial Analysis
MMMU-Pro: Overall (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
44.6242774566474
Bewertung
44.6242774566474
Messgröße
pass@1 accuracy
Einheit
%
Benchmark-Version
AA cohort: 1,730 questions
Kategorie
multimodal
Aufgabe
overall
Aufgabenbezeichnung
Overall
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Artificial Analysis
Status
active
Abrufdatum
2026-11-07
Methodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). Diese Quellenfassung enthält keine durchschnittliche Reasoning-Tokenzahl. Der AA-Lauf umfasst 1.730 Fragen mit zehn Antwortoptionen. Die Antwort wird per regulärem Ausdruck extrahiert und als pass@1 bewertet.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Ten-option multiple choice; regex answer extraction. Versuche: pass@1, one run per question. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 44,6 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-07-b96e3ffc8c5b. Prüfsumme der Quelldaten: b96e3ffc8c5b052aa56f96d05e89d02b8cc234a75085820fca0ca2a39e498274. Parserversion: artificial-analysis-rsc-models-v4. Importiert am: 2026-11-07. Quellenkohorte: artificial-analysis-mmmu-pro:AA cohort: 1,730 questions:standalone:non-reasoning:effort=unspecified:suffix=unspecified
Vergleichsmethodik
Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). Diese Quellenfassung enthält keine durchschnittliche Reasoning-Tokenzahl. Der AA-Lauf umfasst 1.730 Fragen mit zehn Antwortoptionen. Die Antwort wird per regulärem Ausdruck extrahiert und als pass@1 bewertet.. Werkzeugrichtlinie: Ten-option multiple choice; regex answer extraction. Versuche: pass@1, one run per question. Reasoning: non-reasoning. Reasoning-Stufe: none
Einordnung
Die Benchmarkseite nennt 3.460 Fragen für den vollständigen MMMU-Pro-Datensatz; die AA-Methodik beschreibt einen 1.730-Fragen-Lauf.
Quelle Artificial Analysis
SWE-Bench Verified (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
68
Bewertung
68
Messgröße
score as published
Einheit
%
Kategorie
coding
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
Mistral AI Devstral 2 model card
Status
active
Abrufdatum
2026-10-15
Methodik
Vom Anbieter veröffentlichter Wert. Exakte Zeile für Devstral Small 2 (24B); die Modellkarte nennt weder das Benchmark-Harness noch Decoding-Einstellungen oder das Datum des Laufs.
Quelle Mistral AI Devstral 2 model card
SWE-Bench Multilingual (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
55.7
Bewertung
55.7
Messgröße
score as published
Einheit
%
Kategorie
coding
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
Mistral AI Devstral 2 model card
Status
active
Abrufdatum
2026-10-15
Methodik
Vom Anbieter veröffentlichter Wert. Exakte Zeile für Devstral Small 2 (24B); die Modellkarte nennt weder das Benchmark-Harness noch Decoding-Einstellungen oder das Datum des Laufs.
Quelle Mistral AI Devstral 2 model card
Terminal-Bench 2 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
22.5
Bewertung
22.5
Messgröße
score as published
Einheit
%
Benchmark-Version
2
Kategorie
coding
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
Mistral AI Devstral 2 model card
Status
active
Abrufdatum
2026-10-15
Methodik
Vom Anbieter veröffentlichter Wert. Exakte Zeile für Devstral Small 2 (24B); die Modellkarte nennt weder das Benchmark-Harness noch Decoding-Einstellungen oder das Datum des Laufs.
Quelle Mistral AI Devstral 2 model card
SWE-bench Verified (official mini-SWE-agent) (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
56.4
Bewertung
56.4
Messgröße
resolved issue rate
Einheit
%
Benchmark-Version
SWE-bench Verified; mini-SWE-agent 1.17.2; submission 20251209_mini-v1.17.2_devstral-small-2512
Kategorie
coding
Richtung
Mehr ist besser
Quellentyp
official-leaderboard
Auswertung
SWE-bench
Status
active
Abrufdatum
2026-10-16
Methodik
Offizielle Benchmark-Rangliste. Offizielles SWE-bench Verified (500 Benchmarkaufgaben); mini-SWE-agent 1.17.2; Quellenkennung 20251209_mini-v1.17.2_devstral-small-2512; Quelldatum 2025-12-09; Modellbezeichnung Devstral Small (2512); Reasoning-Stufe nicht angegeben. Quellprotokolle: s3://swe-bench-submissions/bash-only/20251209_mini-v1.17.2_devstral-small-2512/logs. Die Rangliste kennzeichnet die unabhängige Prüfung dieses Eintrags als bestätigt.
Einordnung
Historischer Eintrag der offiziellen Rangliste, kein neuer Modelllauf und keine Vals-Auswertung. mini-SWE-agent 1.x und 2.x verwenden unterschiedliche Aktionsschnittstellen und sind nicht automatisch vergleichbar. Nicht genannte Sampling-Werte, Wiederholungszahlen und Backend-Revisionen bleiben unbekannt.
Quelle SWE-bench
AutomationBench-AA (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
3
Bewertung
3
Messgröße
Objectives completed without guardrail violations
Einheit
%
Kategorie
agentic SaaS workflows
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Artificial Analysis model comparison
Status
active
Abrufdatum
2026-10-18
Methodik
Unabhängige Evaluation. Eintrag von Mistral Devstral Small 2 im Vergleich von Artificial Analysis (24B laut Quelle; Reasoning: nein). Der Vergleich nennt 13.000 Ausgabetokens pro Aufgabe, 0 Reasoning-Tokens pro Aufgabe und 18 Mio. Ausgabetokens für den Intelligence Index. Exakter Checkpoint und Revision, Bereitstellungs- oder Agentenroute, Prompt, Decoding-Einstellungen und Inferenzkonfiguration je Evaluation werden nicht offengelegt.
Einordnung
Artificial Analysis kennzeichnet das Modell als eingestellt und schreibt, dass nur Leistungsmessungen für den Standard-Workload mit 10.000 Eingabetokens fortgeführt werden; Ergebnisse für andere Workloads seien historisch und würden nicht mehr aktualisiert. Der Vergleich nennt weder ein Evaluationsdatum noch Stichprobengröße oder Konfidenzintervall je Zelle. Der Abruf erfolgte am 18.10.2026 und belegt keinen neuen Testlauf.
Quelle Artificial Analysis model comparison
Terminal-Bench (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
0
Bewertung
0
Messgröße
Score
Einheit
%
Benchmark-Version
4.0
Kategorie
agentic coding and terminal use
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Artificial Analysis model comparison
Status
active
Abrufdatum
2026-10-18
Methodik
Unabhängige Evaluation. Eintrag von Mistral Devstral Small 2 im Vergleich von Artificial Analysis (24B laut Quelle; Reasoning: nein). Der Vergleich nennt 13.000 Ausgabetokens pro Aufgabe, 0 Reasoning-Tokens pro Aufgabe und 18 Mio. Ausgabetokens für den Intelligence Index. Exakter Checkpoint und Revision, Bereitstellungs- oder Agentenroute, Prompt, Decoding-Einstellungen und Inferenzkonfiguration je Evaluation werden nicht offengelegt.
Einordnung
Artificial Analysis kennzeichnet das Modell als eingestellt und schreibt, dass nur Leistungsmessungen für den Standard-Workload mit 10.000 Eingabetokens fortgeführt werden; Ergebnisse für andere Workloads seien historisch und würden nicht mehr aktualisiert. Der Vergleich nennt weder ein Evaluationsdatum noch Stichprobengröße oder Konfidenzintervall je Zelle. Der Abruf erfolgte am 18.10.2026 und belegt keinen neuen Testlauf.
Quelle Artificial Analysis model comparison
SciCode (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
32
Bewertung
32
Messgröße
SciCode score
Einheit
%
Kategorie
coding
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Artificial Analysis model comparison
Status
disputed
Abrufdatum
2026-10-18
Methodik
Unabhängige Evaluation. Eintrag von Mistral Devstral Small 2 im Vergleich von Artificial Analysis (24B laut Quelle; Reasoning: nein). Der Vergleich nennt 13.000 Ausgabetokens pro Aufgabe, 0 Reasoning-Tokens pro Aufgabe und 18 Mio. Ausgabetokens für den Intelligence Index. Exakter Checkpoint und Revision, Bereitstellungs- oder Agentenroute, Prompt, Decoding-Einstellungen und Inferenzkonfiguration je Evaluation werden nicht offengelegt.
Einordnung
Artificial Analysis kennzeichnet die Evaluation SciCode in seiner öffentlichen Evaluationsliste als „Under review“ (erhaltener Quellenmitschnitt source-01, L192). Das Statusfeld ist auf „disputed“ gesetzt, weil das Schema keinen eigenen Wert für diese vom Evaluator als vorläufig markierte Prüfung enthält. Damit wird kein Widerspruch zwischen gemeldeten Punktwerten behauptet. Der angezeigte Wert bleibt vorläufig und ist kein endgültig bestätigtes aktives Ergebnis. Artificial Analysis kennzeichnet das Modell als eingestellt und schreibt, dass nur Leistungsmessungen für den Standard-Workload mit 10.000 Eingabetokens fortgeführt werden; Ergebnisse für andere Workloads seien historisch und würden nicht mehr aktualisiert. Der Vergleich nennt weder ein Evaluationsdatum noch Stichprobengröße oder Konfidenzintervall je Zelle. Der Abruf erfolgte am 18.10.2026 und belegt keinen neuen Testlauf.
Quelle Artificial Analysis model comparison

Seite 1 von 3

Beliebtheit im Vergleich

Wie oft das Modell gesucht, genutzt und erwähnt wird, im Vergleich mit allen Modellen dieser Kategorie.

Beliebtheitsindex

Die 100 beliebtesten Modelle dieser Kategorie, 0 bis 100, höher ist beliebter

20 von 101 Modellen

Stand November 2026 · Quelle: gradually.ai Beliebtheitsindex

Zeitlicher Verlauf

Wochenwerte vom 18. Oktober 2026 bis 8. November 2026

Devstral Small 2AliceAI Foundation 80B A3B Base 39Command R7B 39Ling 3.0 Flash 39Ornith 1.0 397B 39

Methodenwechsel im Verlauf, ein Sprung an dieser Stelle ist kein Marktereignis:

  1. 11. November 2026: Wert nur mit Such- oder Nutzungsdaten, 30-Tage-Aufmerksamkeit
  2. 21. November 2026: Methodenversion 4 (gemeinsame Skala, Schrumpfung)

Was gerade an Beliebtheit gewinnt, steht für Modelle, Anbieter, Harnesses und KI-Abos gesammelt in Alle KI-Trends.

Alle technischen Daten

Architektur

Parameter
24 Mrd.
Quelle: Parameter
Wissensstand
Dezember 2025
Quelle: Wissensstand

Ein- und Ausgabe

Kontextfenster
262.144 Token
Quelle: Kontextfenster
Maximale Ausgabe
262.144 Token
Quelle: Maximale Ausgabe
Eingaben
Text, Bild
Quelle: Eingaben
Ausgaben
Text
Quelle: Ausgaben
Tool-Aufrufe
Ja
Quelle: Tool-Aufrufe

Wasserzeichen und Herkunft

KI-Wasserzeichen meint unsichtbare Signale in der Ausgabe. Sichtbare Zeichen und Herkunftsmetadaten sind getrennt aufgeführt. Unbekannt bedeutet, dass für die jeweilige Angabe kein ausreichender Beleg vorliegt.

KI-Wasserzeichen
Unbekannt
ohne Quelle
Wasserzeichen-Technik
Nicht bekannt
ohne Quelle

Lizenz und Zugang

Gewichte
Offene Gewichte
Quelle: Gewichte
Lizenz
Apache 2.0
Quelle: Lizenz
Abschaltung
Mistral-API: abgeschaltet am 31. März 2026 (Gewichte bleiben verfügbar)
Quelle: Abschaltung

Häufige Fragen zu Devstral Small 2

Bis wann reicht das Wissen von Devstral Small 2?

Bis Dezember 2025, laut Mistral AI. Das ist der Monat der Veröffentlichung.

Angabe von Mistral AI

Wie groß ist das Kontextfenster von Devstral Small 2?

262.144 Token. So viel Text liest Devstral Small 2 auf einmal, das sind rund 390 A4-Seiten.

Seitenzahl als Faustregel nach Artificial Analysis

KontextfensterToken, die das Modell auf einmal liest · höher ist besser
Devstral Small 2Platz 67 von 103262 Tsd.
Kimi K2.6262 Tsd.
Qwen 3.8 27B262 Tsd.
Kimi K2.7 Code262 Tsd.
Kimi K2.5262 Tsd.
Nemotron 3 Ultra262 Tsd.
Kimi K2 Thinking262 Tsd.

Kann ich Devstral Small 2 lokal nutzen?

Ja, die Gewichte sind offen.

Angaben von Mistral AI

Offene Gewichte
ja
Lizenz
Apache 2.0
Parameter
24 Mrd.
davon aktiv je Token
k. A.

Quellen und Datenstand

Alle 21 Quellen anzeigen

Benchmarkquellen im Überblick

Welche unabhängigen Auswerter dieses Modell getestet haben. Das ist Abdeckung, keine Qualitätsrangliste.

AuswerterTestreihenGesamtindizesErfasste aktive Messwerte
Artificial Analysis9112
SWE-bench001

Ohne Herstellerangaben sowie historische oder strittige Ergebnisse; diese stehen gekennzeichnet bei den Einzelwerten. 2 Messwerte sind noch keiner Testreihe zugeordnet.

ArtNachweis und Datenstand
Eingabe

Dokumentierte Modalitäten. Abgerufen am 27. Oktober 2026.

Ausgabe

Dokumentierte Modalitäten. Abgerufen am 27. Oktober 2026.

RecherchestandRecherchestand 15. Oktober 2026. 8 Quellen-URLs geprüft. Das dokumentiert die geprüften Quellen, nicht sämtliche Veröffentlichungen zu diesem Modell.
Nicht veröffentlicht

benchmark-configuration

Hinweis

Die Modellkarte enthält drei Werte, nennt aber weder Testumgebung noch Agenten-Ausführungsgerüst, Aufgabendaten oder Inferenz-Einstellungen.

Weitere QuelleHugging Face (abgerufen 15. Oktober 2026) · Devstral Small 2 model card · Redaktionelle Beschreibung geprüft am 2. Oktober 2026
Weitere QuelleArtificial Analysis (abgerufen 2. November 2026)
Weitere QuelleArtificial Analysis (abgerufen 29. Oktober 2026; 2. November 2026; 7. November 2026)
Weitere QuelleArtificial Analysis (abgerufen 2. November 2026; 7. November 2026)12
Weitere QuelleMistral AI Devstral 2 model card (abgerufen 15. Oktober 2026)
Weitere QuelleSWE-bench (abgerufen 16. Oktober 2026)
Weitere QuelleArtificial Analysis model comparison (abgerufen 18. Oktober 2026)
Weitere QuelleoMLX community benchmark report (abgerufen 23. Oktober 2026)
Weitere QuelleModellmetadaten (abgerufen 16. Oktober 2026)12
Weitere QuelleModellmetadaten (abgerufen 18. Oktober 2026)
Weitere QuelleDevstral 2 and Vibe CLI announcement · Redaktionelle Beschreibung geprüft am 2. Oktober 2026
Weitere QuelleMistral model overview · Redaktionelle Beschreibung geprüft am 2. Oktober 2026
Weitere QuelleOpenRouter: Beliebtheitsindex (abgeleitet), CC BY 4.0
Weitere QuelleVercel AI Gateway: Beliebtheitsindex (abgeleitet), CC BY 4.0
Weitere QuelleOllama: kumulierte Downloads für den Beliebtheitsindex
Weitere QuelleReplicate: kumulierte Ausführungen für den Beliebtheitsindex
Weitere QuelleGoogle Trending Now: begrenzte Feed-Auswahl für Deutschland und USA
Weitere QuelleCreative Commons Attribution 4.0