Zum Hauptinhalt springen

BigCodeSprachmodell

StarCoder2 15B

Für StarCoder2 15B gibt es noch keinen Wert im Gesamtindex, weil zu wenige unabhängige Benchmark-Ergebnisse vorliegen.

BeliebtheitPlatz 406 von 785

35von 100wie im Vormonat

beruht auf Suche, Nutzung und Aufmerksamkeit

Zusammenfassung

StarCoder2 15B ist BigCodes Code-Completion-Modell, kein allgemeiner Chat-Assistent. Es wurde auf mehr als 600 Programmiersprachen aus The Stack v2 und insgesamt mehr als 4 Billionen Token trainiert. Mit 16.384 Token Kontext, 4.096 Token Sliding Attention und Fill-in-the-Middle eignet es sich für Codevervollständigung, das Ergänzen von Lücken und die Arbeit mit Dateien im Editor.

Die Modellkarte sagt ausdrücklich, dass direkte Anweisungen wegen des fehlenden Instruction-Tunings nicht gut funktionieren. StarCoder2 15B ist damit auf Completion und Fill-in-the-Middle zugeschnitten, nicht auf Chat. BigCode weist außerdem auf mögliche wörtliche Ausgaben aus Trainingsdaten hin; die Open-RAIL-M-Lizenz gehört zur veröffentlichten Modellidentität.

Alle Benchmark-Werte

Jeder veröffentlichte Messwert mit Quelle, Testbedingungen und Vergleichsmodellen.

Alle 100 veröffentlichten Benchmark-Werte anzeigen

Seite 1 von 9

Messungen ohne passende Vergleichswerte

Für diese Messungen fehlen passende Vergleichswerte unter gleichen Testbedingungen. Die Originalwerte und Quellen bleiben hier nachlesbar.

CRUXEval-I pass@1 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
48.1
Bewertung
48.1
Messgröße
pass@1
Einheit
%
Benchmark-Version
CRUXEval Table 15 (StarCoder2 report, 2024)
Richtung
Mehr ist besser
Stichprobe
800
Quellentyp
vendor-reported
Auswertung
BigCode StarCoder2 technical report
Status
active
Abrufdatum
2026-10-15
Methodik
Vom Anbieter veröffentlichter Wert. Exakte Zeile für StarCoder2-15B in CRUXEval-I/O-Tabelle 15. Der Benchmark umfasst 800 Beispiele; Für pass@1 wird temperature 0.2 und für pass@5 temperature 0.8 verwendet; Beide verwenden 10 generierte Stichproben. Der Benchmark-Snapshot des Berichts entspricht der im Bericht von 2024 verwendeten CRUXEval-Veröffentlichung.; Temperature 0.2; 10 Generierungen; Aufgabe mit 800 Beispielen.
Einordnung
Die Quelle meldet die Erfolgsrate auf einer Score-Skala von 0-100.
Quelle BigCode StarCoder2 technical report
CRUXEval-I pass@5 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
66.9
Bewertung
66.9
Messgröße
pass@5
Einheit
%
Benchmark-Version
CRUXEval Table 15 (StarCoder2 report, 2024)
Richtung
Mehr ist besser
Stichprobe
800
Quellentyp
vendor-reported
Auswertung
BigCode StarCoder2 technical report
Status
active
Abrufdatum
2026-10-15
Methodik
Vom Anbieter veröffentlichter Wert. Exakte Zeile für StarCoder2-15B in CRUXEval-I/O-Tabelle 15. Der Benchmark umfasst 800 Beispiele; Für pass@1 wird temperature 0.2 und für pass@5 temperature 0.8 verwendet; Beide verwenden 10 generierte Stichproben. Der Benchmark-Snapshot des Berichts entspricht der im Bericht von 2024 verwendeten CRUXEval-Veröffentlichung.; Temperature 0.8; 10 Generierungen; Aufgabe mit 800 Beispielen.
Einordnung
Die Quelle meldet die Erfolgsrate auf einer Score-Skala von 0-100.
Quelle BigCode StarCoder2 technical report
CRUXEval-O pass@1 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
47.1
Bewertung
47.1
Messgröße
pass@1
Einheit
%
Benchmark-Version
CRUXEval Table 15 (StarCoder2 report, 2024)
Richtung
Mehr ist besser
Stichprobe
800
Quellentyp
vendor-reported
Auswertung
BigCode StarCoder2 technical report
Status
active
Abrufdatum
2026-10-15
Methodik
Vom Anbieter veröffentlichter Wert. Exakte Zeile für StarCoder2-15B in CRUXEval-I/O-Tabelle 15. Der Benchmark umfasst 800 Beispiele; Für pass@1 wird temperature 0.2 und für pass@5 temperature 0.8 verwendet; Beide verwenden 10 generierte Stichproben. Der Benchmark-Snapshot des Berichts entspricht der im Bericht von 2024 verwendeten CRUXEval-Veröffentlichung.; Temperature 0.2; 10 Generierungen; Aufgabe mit 800 Beispielen.
Einordnung
Die Quelle meldet die Erfolgsrate auf einer Score-Skala von 0-100.
Quelle BigCode StarCoder2 technical report
CRUXEval-O pass@5 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
59.5
Bewertung
59.5
Messgröße
pass@5
Einheit
%
Benchmark-Version
CRUXEval Table 15 (StarCoder2 report, 2024)
Richtung
Mehr ist besser
Stichprobe
800
Quellentyp
vendor-reported
Auswertung
BigCode StarCoder2 technical report
Status
active
Abrufdatum
2026-10-15
Methodik
Vom Anbieter veröffentlichter Wert. Exakte Zeile für StarCoder2-15B in CRUXEval-I/O-Tabelle 15. Der Benchmark umfasst 800 Beispiele; Für pass@1 wird temperature 0.2 und für pass@5 temperature 0.8 verwendet; Beide verwenden 10 generierte Stichproben. Der Benchmark-Snapshot des Berichts entspricht der im Bericht von 2024 verwendeten CRUXEval-Veröffentlichung.; Temperature 0.8; 10 Generierungen; Aufgabe mit 800 Beispielen.
Einordnung
Die Quelle meldet die Erfolgsrate auf einer Score-Skala von 0-100.
Quelle BigCode StarCoder2 technical report
HumanEval (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
46.3
Bewertung
46.3
Messgröße
pass@1 (%)
Einheit
%
Benchmark-Version
StarCoder 2 technical report, Table 9
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
StarCoder 2 and The Stack v2: The Next Generation technical report
Status
active
Abrufdatum
2026-10-17
Methodik
Vom Anbieter veröffentlichter Wert. Tabelle 9, exakte StarCoder2-15B-Zeile; pass@1 mit Greedy-Decoding.
Einordnung
Vom Anbieter berichteter Wert aus dem technischen Bericht. Die benannte StarCoder2-15B-Zeile ist nicht an einen unveränderlichen Evaluations-Checkpoint gebunden. Stichprobengröße und Konfidenzintervall werden nur übernommen, wenn sie in der zitierten Tabelle stehen.
Quelle StarCoder 2 and The Stack v2: The Next Generation technical report
HumanEval+ (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
37.8
Bewertung
37.8
Messgröße
pass@1 (%)
Einheit
%
Benchmark-Version
StarCoder 2 technical report, Table 9
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
StarCoder 2 and The Stack v2: The Next Generation technical report
Status
active
Abrufdatum
2026-10-17
Methodik
Vom Anbieter veröffentlichter Wert. Tabelle 9, exakte StarCoder2-15B-Zeile; pass@1 mit Greedy-Decoding.
Einordnung
Vom Anbieter berichteter Wert aus dem technischen Bericht. Die benannte StarCoder2-15B-Zeile ist nicht an einen unveränderlichen Evaluations-Checkpoint gebunden. Stichprobengröße und Konfidenzintervall werden nur übernommen, wenn sie in der zitierten Tabelle stehen.
Quelle StarCoder 2 and The Stack v2: The Next Generation technical report
MBPP (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
66.2
Bewertung
66.2
Messgröße
pass@1 (%)
Einheit
%
Benchmark-Version
StarCoder 2 technical report, Table 9
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
StarCoder 2 and The Stack v2: The Next Generation technical report
Status
active
Abrufdatum
2026-10-17
Methodik
Vom Anbieter veröffentlichter Wert. Tabelle 9, exakte StarCoder2-15B-Zeile; pass@1 mit Greedy-Decoding.
Einordnung
Vom Anbieter berichteter Wert aus dem technischen Bericht. Die benannte StarCoder2-15B-Zeile ist nicht an einen unveränderlichen Evaluations-Checkpoint gebunden. Stichprobengröße und Konfidenzintervall werden nur übernommen, wenn sie in der zitierten Tabelle stehen.
Quelle StarCoder 2 and The Stack v2: The Next Generation technical report
MBPP+ (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
53.1
Bewertung
53.1
Messgröße
pass@1 (%)
Einheit
%
Benchmark-Version
StarCoder 2 technical report, Table 9
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
StarCoder 2 and The Stack v2: The Next Generation technical report
Status
active
Abrufdatum
2026-10-17
Methodik
Vom Anbieter veröffentlichter Wert. Tabelle 9, exakte StarCoder2-15B-Zeile; pass@1 mit Greedy-Decoding.
Einordnung
Vom Anbieter berichteter Wert aus dem technischen Bericht. Die benannte StarCoder2-15B-Zeile ist nicht an einen unveränderlichen Evaluations-Checkpoint gebunden. Stichprobengröße und Konfidenzintervall werden nur übernommen, wenn sie in der zitierten Tabelle stehen.
Quelle StarCoder 2 and The Stack v2: The Next Generation technical report
MultiPL-E C++ pass@1 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
41.4
Bewertung
41.4
Messgröße
pass@1 (%)
Einheit
%
Benchmark-Version
StarCoder 2 technical report, Table 10
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
StarCoder 2 and The Stack v2: The Next Generation technical report
Status
active
Abrufdatum
2026-10-17
Methodik
Vom Anbieter veröffentlichter Wert. Tabelle 10, exakte StarCoder2-15B-Zeile, C++; Temperatur 0,2, top-p 0,95, 50 Stichproben je Aufgabe.
Einordnung
Vom Anbieter berichteter Wert aus dem technischen Bericht. Die benannte StarCoder2-15B-Zeile ist nicht an einen unveränderlichen Evaluations-Checkpoint gebunden. Stichprobengröße und Konfidenzintervall werden nur übernommen, wenn sie in der zitierten Tabelle stehen.
Quelle StarCoder 2 and The Stack v2: The Next Generation technical report
MultiPL-E C# pass@1 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
29.2
Bewertung
29.2
Messgröße
pass@1 (%)
Einheit
%
Benchmark-Version
StarCoder 2 technical report, Table 10
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
StarCoder 2 and The Stack v2: The Next Generation technical report
Status
active
Abrufdatum
2026-10-17
Methodik
Vom Anbieter veröffentlichter Wert. Tabelle 10, exakte StarCoder2-15B-Zeile, C#; Temperatur 0,2, top-p 0,95, 50 Stichproben je Aufgabe.
Einordnung
Vom Anbieter berichteter Wert aus dem technischen Bericht. Die benannte StarCoder2-15B-Zeile ist nicht an einen unveränderlichen Evaluations-Checkpoint gebunden. Stichprobengröße und Konfidenzintervall werden nur übernommen, wenn sie in der zitierten Tabelle stehen.
Quelle StarCoder 2 and The Stack v2: The Next Generation technical report
MultiPL-E D pass@1 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
23.6
Bewertung
23.6
Messgröße
pass@1 (%)
Einheit
%
Benchmark-Version
StarCoder 2 technical report, Table 10
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
StarCoder 2 and The Stack v2: The Next Generation technical report
Status
active
Abrufdatum
2026-10-17
Methodik
Vom Anbieter veröffentlichter Wert. Tabelle 10, exakte StarCoder2-15B-Zeile, D; Temperatur 0,2, top-p 0,95, 50 Stichproben je Aufgabe.
Einordnung
Vom Anbieter berichteter Wert aus dem technischen Bericht. Die benannte StarCoder2-15B-Zeile ist nicht an einen unveränderlichen Evaluations-Checkpoint gebunden. Stichprobengröße und Konfidenzintervall werden nur übernommen, wenn sie in der zitierten Tabelle stehen.
Quelle StarCoder 2 and The Stack v2: The Next Generation technical report
MultiPL-E Go pass@1 (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
26.2
Bewertung
26.2
Messgröße
pass@1 (%)
Einheit
%
Benchmark-Version
StarCoder 2 technical report, Table 10
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
StarCoder 2 and The Stack v2: The Next Generation technical report
Status
active
Abrufdatum
2026-10-17
Methodik
Vom Anbieter veröffentlichter Wert. Tabelle 10, exakte StarCoder2-15B-Zeile, Go; Temperatur 0,2, top-p 0,95, 50 Stichproben je Aufgabe.
Einordnung
Vom Anbieter berichteter Wert aus dem technischen Bericht. Die benannte StarCoder2-15B-Zeile ist nicht an einen unveränderlichen Evaluations-Checkpoint gebunden. Stichprobengröße und Konfidenzintervall werden nur übernommen, wenn sie in der zitierten Tabelle stehen.
Quelle StarCoder 2 and The Stack v2: The Next Generation technical report

Seite 1 von 9

Beliebtheit im Vergleich

Wie oft das Modell gesucht, genutzt und erwähnt wird, im Vergleich mit allen Modellen dieser Kategorie.

Beliebtheitsindex

Die 100 beliebtesten Modelle dieser Kategorie, 0 bis 100, höher ist beliebter

20 von 101 Modellen

Stand November 2026 · Quelle: gradually.ai Beliebtheitsindex

Zeitlicher Verlauf

Wochenwerte vom 18. Oktober 2026 bis 7. November 2026

StarCoder2 15BHermes 4 405B 35Kimi K2 35Kimi K2 0711 35Amazon Nova Micro 35

Methodenwechsel im Verlauf, ein Sprung an dieser Stelle ist kein Marktereignis:

  1. 11. November 2026: Wert nur mit Such- oder Nutzungsdaten, 30-Tage-Aufmerksamkeit

Was gerade an Beliebtheit gewinnt, steht für Modelle, Anbieter, Harnesses und KI-Abos gesammelt in Alle KI-Trends.

Alle technischen Daten

Architektur

Parameter
15 Mrd.
Quelle: Parameter

Ein- und Ausgabe

Kontextfenster
16.384 Token
Quelle: Kontextfenster
Eingaben
Text
Quelle: Eingaben
Ausgaben
Text
Quelle: Ausgaben

Wasserzeichen und Herkunft

KI-Wasserzeichen meint unsichtbare Signale in der Ausgabe. Sichtbare Zeichen und Herkunftsmetadaten sind getrennt aufgeführt. Unbekannt bedeutet, dass für die jeweilige Angabe kein ausreichender Beleg vorliegt.

KI-Wasserzeichen
Unbekannt
ohne Quelle
Wasserzeichen-Technik
Nicht bekannt
ohne Quelle

Lizenz und Zugang

Gewichte
Offene Gewichte
Quelle: Gewichte
Lizenz
BigCode Open RAIL-M v1
Quelle: Lizenz

Häufige Fragen zu StarCoder2 15B

Wie groß ist das Kontextfenster von StarCoder2 15B?

16.384 Token. So viel Text liest StarCoder2 15B auf einmal, das sind rund 20 A4-Seiten.

Seitenzahl als Faustregel nach Artificial Analysis

KontextfensterToken, die das Modell auf einmal liest · höher ist besser
GLM-5.1200 Tsd.
DeepSeek-V3 0324164 Tsd.
GLM-4.5131 Tsd.
GPT OSS 120B131 Tsd.
DeepSeek-V3.2128 Tsd.
DeepSeek-R1128 Tsd.
StarCoder2 15BPlatz 103 von 10316 Tsd.

Kann ich StarCoder2 15B lokal nutzen?

Ja, die Gewichte sind offen.

Angaben von BigCode

Offene Gewichte
ja
Lizenz
BigCode Open RAIL-M v1
Parameter
15 Mrd.
davon aktiv je Token
k. A.

Quellen und Datenstand

Alle 22 Quellen anzeigen

Benchmarkquellen im Überblick

Welche unabhängigen Auswerter dieses Modell getestet haben. Das ist Abdeckung, keine Qualitätsrangliste.

Für dieses Modell ist derzeit kein aktives Ergebnis der geprüften externen Auswerter zugeordnet. Weitere Quellenbelege stehen darunter.

Ohne Herstellerangaben sowie historische oder strittige Ergebnisse; diese stehen gekennzeichnet bei den Einzelwerten.

ArtNachweis und Datenstand
Eingabe

Dokumentierte Modalitäten.

Ausgabe

Dokumentierte Modalitäten.

RecherchestandRecherchestand 15. Oktober 2026. 15 Quellen-URLs geprüft. Das dokumentiert die geprüften Quellen, nicht sämtliche Veröffentlichungen zu diesem Modell.
Ungeklärt

complete-metric-definition

Originalwortlaut

The BigCodeBench viewer gives `complete` = 38.4 for the exact StarCoder2-15B row, but the opened page does not define its unit, denominator or run settings. The raw cell is retained with unknown unit and direction, not compared or ranked.

In den geprüften Quellen nicht gefunden

CRAFT RTL VerilogEval and RTLLM row N, CI, checkpoint revision

Hinweis

Tabellen 10 und 11 nennen exakte Starcoder2-15B-Werte und Temperaturen, aber weder ausgewertetes N noch Konfidenzintervall oder unveränderliche Modellrevision für diese Zeilen.

Weitere QuelleBigCode StarCoder2 technical report (abgerufen 15. Oktober 2026; 17. Oktober 2026; 19. Oktober 2026)
Weitere QuelleCross-Dialect Generalization Without Retraining: Benchmarks and Evaluation of Schema-Derived Constrained Decoding for MLIR (abgerufen 17. Oktober 2026)
Weitere QuelleBigCode, bigcode/bigcodebench-results dataset (abgerufen 19. Oktober 2026)
Weitere QuelleCRAFTRTL: High-Quality Synthetic Data Generation for Verilog Code Models with Correct-by-Construction Non-Textual Representations and Targeted Code Repair (ICLR 2025) (abgerufen 19. Oktober 2026)
Weitere QuelleLiu et al., CraftRTL (NVIDIA) (abgerufen 22. Oktober 2026)
Weitere QuelleLiveCodeBench, Holistic and Contamination Free Evaluation of Large Language Models for Code (abgerufen 23. Oktober 2026)
Weitere QuelleBigCodeBench official leaderboard (abgerufen 28. Oktober 2026)
Weitere QuelleModellmetadaten (abgerufen 17. Oktober 2026)
Weitere QuelleModellmetadaten (abgerufen 19. Oktober 2026)
Weitere QuelleModellmetadaten (abgerufen 28. Oktober 2026)12345
Weitere QuelleStarCoder2 technical paper · Redaktionelle Beschreibung geprüft am 2. Oktober 2026
Weitere QuelleOpenRouter: Beliebtheitsindex (abgeleitet), CC BY 4.0
Weitere QuelleVercel AI Gateway: Beliebtheitsindex (abgeleitet), CC BY 4.0
Weitere QuelleOllama: kumulierte Downloads für den Beliebtheitsindex
Weitere QuelleReplicate: kumulierte Ausführungen für den Beliebtheitsindex
Weitere QuelleGoogle Trending Now: begrenzte Feed-Auswahl für Deutschland und USA
Weitere QuelleCreative Commons Attribution 4.0