- Startseite
- KI-Modelle
- Mistral AI
- Devstral Small 2
Mistral AISprachmodell
Devstral Small 2
Für Devstral Small 2 gibt es noch keinen Wert im Gesamtindex, weil zu wenige unabhängige Benchmark-Ergebnisse vorliegen.
39von 100-1 zum Vormonat
beruht auf Suche, Nutzung und Aufmerksamkeit
Zusammenfassung
Das Besondere an Devstral Small 2 ist ein 24B-Coding-Agent mit Text- und Bildeingabe. Er verarbeitet 256.000 Token Kontext, liest Codebasen, ruft Werkzeuge auf und plant Änderungen über mehrere Schritte. Die Veröffentlichung steht unter Apache 2.0.
Gegenüber Devstral 2 ergänzt Small 2 Screenshots oder Dokumentation als Bildeingabe.
Auf dieser Seite
Alle Benchmark-Werte
Jeder veröffentlichte Messwert mit Quelle, Testbedingungen und Vergleichsmodellen.
Alle 27 veröffentlichten Benchmark-Werte anzeigen
Seite 1 von 3
Messungen ohne passende Vergleichswerte
Für diese Messungen fehlen passende Vergleichswerte unter gleichen Testbedingungen. Die Originalwerte und Quellen bleiben hier nachlesbar.
CritPt v2: Overall (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 0
- Bewertung
- 0
- Messgröße
- pass@1 accuracy
- Einheit
- %
- Benchmark-Version
- v2
- Kategorie
- reasoning
- Aufgabe
- overall
- Aufgabenbezeichnung
- Overall
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- Artificial Analysis
- Status
- disputed
- Abrufdatum
- 2026-11-02
- Methodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Der vollständige CritPt-v2-Lauf umfasst 70 Fragen mit fünf Wiederholungen. Der offizielle Grading-Server bewertet pass@1.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Python functions, symbolic expressions, and numerical answers; official grading server. Versuche: 70 questions, five repeats per question, pass@1. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 0,0 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-02-67d46be20a5b. Prüfsumme der Quelldaten: 67d46be20a5b412db6cfb60ad190441fcaa5513500b8fd47d033168d0e97b6b2. Parserversion: artificial-analysis-rsc-models-v3. Importiert am: 2026-11-02. Quellenkohorte: artificial-analysis-critpt-v2:v2:standalone:non-reasoning:effort=unspecified:suffix=unspecified
- Vergleichsmethodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Der vollständige CritPt-v2-Lauf umfasst 70 Fragen mit fünf Wiederholungen. Der offizielle Grading-Server bewertet pass@1.. Werkzeugrichtlinie: Python functions, symbolic expressions, and numerical answers; official grading server. Versuche: 70 questions, five repeats per question, pass@1. Reasoning: non-reasoning. Reasoning-Stufe: none
- Einordnung
- Die AA-Quelle enthält hier den ursprünglichen CritPt-Wert. Die frühere Zuordnung zu CritPt v2 ist falsch; Wert und frühere Beschriftung bleiben als strittiger Altbeleg erhalten.. Der Quelldatensatz markiert diesen Wert als umstritten. Er bleibt als dokumentierte Evidenz sichtbar, ist aber kein belastbarer Vergleichsnachweis.
IFBench: Overall (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 31.156462585034
- Bewertung
- 31.156462585034
- Messgröße
- IFBench prompt-level loose accuracy (pass@1)
- Einheit
- %
- Benchmark-Version
- AA test set: 294 questions
- Kategorie
- general
- Aufgabe
- overall
- Aufgabenbezeichnung
- Overall
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- Artificial Analysis
- Status
- superseded
- Abrufdatum
- 2026-11-02
- Methodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 31,2 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-02-67d46be20a5b. Prüfsumme der Quelldaten: 67d46be20a5b412db6cfb60ad190441fcaa5513500b8fd47d033168d0e97b6b2. Parserversion: artificial-analysis-rsc-models-v3. Importiert am: 2026-11-02. Quellenkohorte: artificial-analysis-ifbench:AA test set: 294 questions:standalone:non-reasoning:effort=unspecified:suffix=unspecified
- Vergleichsmethodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Reasoning-Stufe: none
- Einordnung
- Die Angabe von 58 bezieht sich auf die verifizierbaren Out-of-Domain-Bedingungstypen, nicht auf die Zahl der Fragen im AA-Testlauf.. Dieser Wert wird als historische Evidenz geführt und ist nicht mit aktuellen Ergebnissen gleichzusetzen.
IFBench: Overall (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 31.156462585034
- Bewertung
- 31.156462585034
- Messgröße
- IFBench prompt-level loose accuracy (pass@1)
- Einheit
- %
- Benchmark-Version
- AA test set: 294 questions
- Kategorie
- general
- Aufgabe
- overall
- Aufgabenbezeichnung
- Overall
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- Artificial Analysis
- Status
- active
- Abrufdatum
- 2026-11-07
- Methodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). Diese Quellenfassung enthält keine durchschnittliche Reasoning-Tokenzahl. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 31,2 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-07-b96e3ffc8c5b. Prüfsumme der Quelldaten: b96e3ffc8c5b052aa56f96d05e89d02b8cc234a75085820fca0ca2a39e498274. Parserversion: artificial-analysis-rsc-models-v4. Importiert am: 2026-11-07. Quellenkohorte: artificial-analysis-ifbench:AA test set: 294 questions:standalone:non-reasoning:effort=unspecified:suffix=unspecified
- Vergleichsmethodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). Diese Quellenfassung enthält keine durchschnittliche Reasoning-Tokenzahl. Artificial Analysis führt 294 Fragen aus dem IFBench-Testdatensatz mit fünf Wiederholungen je Frage aus. Der offizielle Evaluator bewertet die Genauigkeit je Prompt im Modus loose als pass@1.. Werkzeugrichtlinie: Single-turn answer evaluated with the official IFBench source code. Versuche: pass@1, 5 repeats per question. Reasoning: non-reasoning. Reasoning-Stufe: none
- Einordnung
- Die Angabe von 58 bezieht sich auf die verifizierbaren Out-of-Domain-Bedingungstypen, nicht auf die Zahl der Fragen im AA-Testlauf.
MMMU-Pro: Overall (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 44.6242774566474
- Bewertung
- 44.6242774566474
- Messgröße
- pass@1 accuracy
- Einheit
- %
- Benchmark-Version
- AA cohort: 1,730 questions
- Kategorie
- multimodal
- Aufgabe
- overall
- Aufgabenbezeichnung
- Overall
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- Artificial Analysis
- Status
- superseded
- Abrufdatum
- 2026-11-02
- Methodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Der AA-Lauf umfasst 1.730 Fragen mit zehn Antwortoptionen. Die Antwort wird per regulärem Ausdruck extrahiert und als pass@1 bewertet.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Ten-option multiple choice; regex answer extraction. Versuche: pass@1, one run per question. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 44,6 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-02-67d46be20a5b. Prüfsumme der Quelldaten: 67d46be20a5b412db6cfb60ad190441fcaa5513500b8fd47d033168d0e97b6b2. Parserversion: artificial-analysis-rsc-models-v3. Importiert am: 2026-11-02. Quellenkohorte: artificial-analysis-mmmu-pro:AA cohort: 1,730 questions:standalone:non-reasoning:effort=unspecified:suffix=unspecified
- Vergleichsmethodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). AA kennzeichnet diese Modellvariante als non-reasoning und weist 0 Reasoning-Tokens aus. Der AA-Lauf umfasst 1.730 Fragen mit zehn Antwortoptionen. Die Antwort wird per regulärem Ausdruck extrahiert und als pass@1 bewertet.. Werkzeugrichtlinie: Ten-option multiple choice; regex answer extraction. Versuche: pass@1, one run per question. Reasoning: non-reasoning. Reasoning-Stufe: none
- Einordnung
- Die Benchmarkseite nennt 3.460 Fragen für den vollständigen MMMU-Pro-Datensatz; die AA-Methodik beschreibt einen 1.730-Fragen-Lauf.. Dieser Wert wird als historische Evidenz geführt und ist nicht mit aktuellen Ergebnissen gleichzusetzen.
MMMU-Pro: Overall (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 44.6242774566474
- Bewertung
- 44.6242774566474
- Messgröße
- pass@1 accuracy
- Einheit
- %
- Benchmark-Version
- AA cohort: 1,730 questions
- Kategorie
- multimodal
- Aufgabe
- overall
- Aufgabenbezeichnung
- Overall
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- Artificial Analysis
- Status
- active
- Abrufdatum
- 2026-11-07
- Methodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). Diese Quellenfassung enthält keine durchschnittliche Reasoning-Tokenzahl. Der AA-Lauf umfasst 1.730 Fragen mit zehn Antwortoptionen. Die Antwort wird per regulärem Ausdruck extrahiert und als pass@1 bewertet.. Kennung des Quellmodells: artificial-analysis/ce819310-af7c-49d3-9a02-6845111e1788/devstral-small-2/devstral-small-2. Name des Quellmodells: Devstral Small 2. Anbieter laut Quelle: Mistral. Modellstand: Devstral Small 2. Evaluator: Artificial Analysis. Datensatztyp: artificial-analysis-evaluation. Werkzeugrichtlinie: Ten-option multiple choice; regex answer extraction. Versuche: pass@1, one run per question. Reasoning: non-reasoning. Reasoning-Stufe: none. Angezeigter Wert: 44,6 %. Quellenkennung: artificial-analysis. Kennung der Evidenzaufnahme: aa-model-page-2026-11-07-b96e3ffc8c5b. Prüfsumme der Quelldaten: b96e3ffc8c5b052aa56f96d05e89d02b8cc234a75085820fca0ca2a39e498274. Parserversion: artificial-analysis-rsc-models-v4. Importiert am: 2026-11-07. Quellenkohorte: artificial-analysis-mmmu-pro:AA cohort: 1,730 questions:standalone:non-reasoning:effort=unspecified:suffix=unspecified
- Vergleichsmethodik
- Exakte AA-Konfiguration: Devstral Small 2 (Release devstral-small-2, Zeile devstral-small-2, UUID ce819310-af7c-49d3-9a02-6845111e1788, reasoning=false, effort=nicht angegeben, suffix=nicht angegeben). Diese Quellenfassung enthält keine durchschnittliche Reasoning-Tokenzahl. Der AA-Lauf umfasst 1.730 Fragen mit zehn Antwortoptionen. Die Antwort wird per regulärem Ausdruck extrahiert und als pass@1 bewertet.. Werkzeugrichtlinie: Ten-option multiple choice; regex answer extraction. Versuche: pass@1, one run per question. Reasoning: non-reasoning. Reasoning-Stufe: none
- Einordnung
- Die Benchmarkseite nennt 3.460 Fragen für den vollständigen MMMU-Pro-Datensatz; die AA-Methodik beschreibt einen 1.730-Fragen-Lauf.
SWE-Bench Verified (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 68
- Bewertung
- 68
- Messgröße
- score as published
- Einheit
- %
- Kategorie
- coding
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Mistral AI Devstral 2 model card
- Status
- active
- Abrufdatum
- 2026-10-15
- Methodik
- Vom Anbieter veröffentlichter Wert. Exakte Zeile für Devstral Small 2 (24B); die Modellkarte nennt weder das Benchmark-Harness noch Decoding-Einstellungen oder das Datum des Laufs.
SWE-Bench Multilingual (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 55.7
- Bewertung
- 55.7
- Messgröße
- score as published
- Einheit
- %
- Kategorie
- coding
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Mistral AI Devstral 2 model card
- Status
- active
- Abrufdatum
- 2026-10-15
- Methodik
- Vom Anbieter veröffentlichter Wert. Exakte Zeile für Devstral Small 2 (24B); die Modellkarte nennt weder das Benchmark-Harness noch Decoding-Einstellungen oder das Datum des Laufs.
Terminal-Bench 2 (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 22.5
- Bewertung
- 22.5
- Messgröße
- score as published
- Einheit
- %
- Benchmark-Version
- 2
- Kategorie
- coding
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Mistral AI Devstral 2 model card
- Status
- active
- Abrufdatum
- 2026-10-15
- Methodik
- Vom Anbieter veröffentlichter Wert. Exakte Zeile für Devstral Small 2 (24B); die Modellkarte nennt weder das Benchmark-Harness noch Decoding-Einstellungen oder das Datum des Laufs.
SWE-bench Verified (official mini-SWE-agent) (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 56.4
- Bewertung
- 56.4
- Messgröße
- resolved issue rate
- Einheit
- %
- Benchmark-Version
- SWE-bench Verified; mini-SWE-agent 1.17.2; submission 20251209_mini-v1.17.2_devstral-small-2512
- Kategorie
- coding
- Richtung
- Mehr ist besser
- Quellentyp
- official-leaderboard
- Auswertung
- SWE-bench
- Status
- active
- Abrufdatum
- 2026-10-16
- Methodik
- Offizielle Benchmark-Rangliste. Offizielles SWE-bench Verified (500 Benchmarkaufgaben); mini-SWE-agent 1.17.2; Quellenkennung 20251209_mini-v1.17.2_devstral-small-2512; Quelldatum 2025-12-09; Modellbezeichnung Devstral Small (2512); Reasoning-Stufe nicht angegeben. Quellprotokolle: s3://swe-bench-submissions/bash-only/20251209_mini-v1.17.2_devstral-small-2512/logs. Die Rangliste kennzeichnet die unabhängige Prüfung dieses Eintrags als bestätigt.
- Einordnung
- Historischer Eintrag der offiziellen Rangliste, kein neuer Modelllauf und keine Vals-Auswertung. mini-SWE-agent 1.x und 2.x verwenden unterschiedliche Aktionsschnittstellen und sind nicht automatisch vergleichbar. Nicht genannte Sampling-Werte, Wiederholungszahlen und Backend-Revisionen bleiben unbekannt.
AutomationBench-AA (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 3
- Bewertung
- 3
- Messgröße
- Objectives completed without guardrail violations
- Einheit
- %
- Kategorie
- agentic SaaS workflows
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- Artificial Analysis model comparison
- Status
- active
- Abrufdatum
- 2026-10-18
- Methodik
- Unabhängige Evaluation. Eintrag von Mistral Devstral Small 2 im Vergleich von Artificial Analysis (24B laut Quelle; Reasoning: nein). Der Vergleich nennt 13.000 Ausgabetokens pro Aufgabe, 0 Reasoning-Tokens pro Aufgabe und 18 Mio. Ausgabetokens für den Intelligence Index. Exakter Checkpoint und Revision, Bereitstellungs- oder Agentenroute, Prompt, Decoding-Einstellungen und Inferenzkonfiguration je Evaluation werden nicht offengelegt.
- Einordnung
- Artificial Analysis kennzeichnet das Modell als eingestellt und schreibt, dass nur Leistungsmessungen für den Standard-Workload mit 10.000 Eingabetokens fortgeführt werden; Ergebnisse für andere Workloads seien historisch und würden nicht mehr aktualisiert. Der Vergleich nennt weder ein Evaluationsdatum noch Stichprobengröße oder Konfidenzintervall je Zelle. Der Abruf erfolgte am 18.10.2026 und belegt keinen neuen Testlauf.
Terminal-Bench (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 0
- Bewertung
- 0
- Messgröße
- Score
- Einheit
- %
- Benchmark-Version
- 4.0
- Kategorie
- agentic coding and terminal use
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- Artificial Analysis model comparison
- Status
- active
- Abrufdatum
- 2026-10-18
- Methodik
- Unabhängige Evaluation. Eintrag von Mistral Devstral Small 2 im Vergleich von Artificial Analysis (24B laut Quelle; Reasoning: nein). Der Vergleich nennt 13.000 Ausgabetokens pro Aufgabe, 0 Reasoning-Tokens pro Aufgabe und 18 Mio. Ausgabetokens für den Intelligence Index. Exakter Checkpoint und Revision, Bereitstellungs- oder Agentenroute, Prompt, Decoding-Einstellungen und Inferenzkonfiguration je Evaluation werden nicht offengelegt.
- Einordnung
- Artificial Analysis kennzeichnet das Modell als eingestellt und schreibt, dass nur Leistungsmessungen für den Standard-Workload mit 10.000 Eingabetokens fortgeführt werden; Ergebnisse für andere Workloads seien historisch und würden nicht mehr aktualisiert. Der Vergleich nennt weder ein Evaluationsdatum noch Stichprobengröße oder Konfidenzintervall je Zelle. Der Abruf erfolgte am 18.10.2026 und belegt keinen neuen Testlauf.
SciCode (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 32
- Bewertung
- 32
- Messgröße
- SciCode score
- Einheit
- %
- Kategorie
- coding
- Richtung
- Mehr ist besser
- Quellentyp
- independent-evaluator
- Auswertung
- Artificial Analysis model comparison
- Status
- disputed
- Abrufdatum
- 2026-10-18
- Methodik
- Unabhängige Evaluation. Eintrag von Mistral Devstral Small 2 im Vergleich von Artificial Analysis (24B laut Quelle; Reasoning: nein). Der Vergleich nennt 13.000 Ausgabetokens pro Aufgabe, 0 Reasoning-Tokens pro Aufgabe und 18 Mio. Ausgabetokens für den Intelligence Index. Exakter Checkpoint und Revision, Bereitstellungs- oder Agentenroute, Prompt, Decoding-Einstellungen und Inferenzkonfiguration je Evaluation werden nicht offengelegt.
- Einordnung
- Artificial Analysis kennzeichnet die Evaluation SciCode in seiner öffentlichen Evaluationsliste als „Under review“ (erhaltener Quellenmitschnitt source-01, L192). Das Statusfeld ist auf „disputed“ gesetzt, weil das Schema keinen eigenen Wert für diese vom Evaluator als vorläufig markierte Prüfung enthält. Damit wird kein Widerspruch zwischen gemeldeten Punktwerten behauptet. Der angezeigte Wert bleibt vorläufig und ist kein endgültig bestätigtes aktives Ergebnis. Artificial Analysis kennzeichnet das Modell als eingestellt und schreibt, dass nur Leistungsmessungen für den Standard-Workload mit 10.000 Eingabetokens fortgeführt werden; Ergebnisse für andere Workloads seien historisch und würden nicht mehr aktualisiert. Der Vergleich nennt weder ein Evaluationsdatum noch Stichprobengröße oder Konfidenzintervall je Zelle. Der Abruf erfolgte am 18.10.2026 und belegt keinen neuen Testlauf.
Seite 1 von 3
Beliebtheit im Vergleich
Wie oft das Modell gesucht, genutzt und erwähnt wird, im Vergleich mit allen Modellen dieser Kategorie.
Beliebtheitsindex
Die 100 beliebtesten Modelle dieser Kategorie, 0 bis 100, höher ist beliebter
20 von 101 Modellen
Stand November 2026 · Quelle: gradually.ai Beliebtheitsindex
Zeitlicher Verlauf
Wochenwerte vom 18. Oktober 2026 bis 8. November 2026
Devstral Small 2AliceAI Foundation 80B A3B Base 39Command R7B 39Ling 3.0 Flash 39Ornith 1.0 397B 39
Methodenwechsel im Verlauf, ein Sprung an dieser Stelle ist kein Marktereignis:
- 11. November 2026: Wert nur mit Such- oder Nutzungsdaten, 30-Tage-Aufmerksamkeit
- 21. November 2026: Methodenversion 4 (gemeinsame Skala, Schrumpfung)
Was gerade an Beliebtheit gewinnt, steht für Modelle, Anbieter, Harnesses und KI-Abos gesammelt in Alle KI-Trends.
Ähnliche Modelle
Weitere Modelle derselben Art wie Devstral Small 2, ausgewählt nach Modellreihe, Anbieter, Größe, Preis und Erscheinungsdatum.
- Magistral Small 1.2Mistral AI · gleicher Anbieter
- Magistral SmallMistral AI · gleicher Anbieter
- Devstral SmallMistral AI · gleicher Anbieter
- Voxtral Small 24BMistral AI · gleicher Anbieter
- Voxtral Small (latest)Mistral AI · gleicher Anbieter
- Ministral 3 14BMistral AI · gleicher Anbieter
- Ministral 3 8BMistral AI · gleicher Anbieter
- Codestral-22B-v0.1Mistral AI · gleicher Anbieter
Alle technischen Daten
Architektur
Ein- und Ausgabe
Wasserzeichen und Herkunft
KI-Wasserzeichen meint unsichtbare Signale in der Ausgabe. Sichtbare Zeichen und Herkunftsmetadaten sind getrennt aufgeführt. Unbekannt bedeutet, dass für die jeweilige Angabe kein ausreichender Beleg vorliegt.
- KI-Wasserzeichen
- Unbekannt
- ohne Quelle
- Wasserzeichen-Technik
- Nicht bekannt
- ohne Quelle
Lizenz und Zugang
- Abschaltung
- Mistral-API: abgeschaltet am 31. März 2026 (Gewichte bleiben verfügbar)
- Quelle: Abschaltung
Häufige Fragen zu Devstral Small 2
Bis wann reicht das Wissen von Devstral Small 2?
Bis Dezember 2025, laut Mistral AI. Das ist der Monat der Veröffentlichung.
Angabe von Mistral AI
Wie groß ist das Kontextfenster von Devstral Small 2?
262.144 Token. So viel Text liest Devstral Small 2 auf einmal, das sind rund 390 A4-Seiten.
Seitenzahl als Faustregel nach Artificial Analysis
Kann ich Devstral Small 2 lokal nutzen?
Ja, die Gewichte sind offen.
Angaben von Mistral AI
- Offene Gewichte
- ja
- Lizenz
- Apache 2.0
- Parameter
- 24 Mrd.
- davon aktiv je Token
- k. A.
Quellen und Datenstand
Alle 21 Quellen anzeigen
Benchmarkquellen im Überblick
Welche unabhängigen Auswerter dieses Modell getestet haben. Das ist Abdeckung, keine Qualitätsrangliste.
| Auswerter | Testreihen | Gesamtindizes | Erfasste aktive Messwerte |
|---|---|---|---|
| Artificial Analysis | 9 | 1 | 12 |
| SWE-bench | 0 | 0 | 1 |
Ohne Herstellerangaben sowie historische oder strittige Ergebnisse; diese stehen gekennzeichnet bei den Einzelwerten. 2 Messwerte sind noch keiner Testreihe zugeordnet.