Zum Hauptinhalt springen

ByteDance SeedSprachmodellGewichte verfügbar

Cola2

Für Cola2 gibt es noch keinen Wert im Gesamtindex, weil zu wenige unabhängige Benchmark-Ergebnisse vorliegen.

Zusammenfassung

Cola2 ist ein Sprachmodell für Forschung, das Text in Abschnitte aufteilt und diese in kompakte kontinuierliche Repräsentationen umwandelt. Ein Diffusionsmodell verarbeitet diese Repräsentationen, bevor ein Decoder wieder Text erzeugt.

ByteDance Seed hat den Checkpoint am 6. November 2026 veröffentlicht. Die Gewichte und der Code zur lokalen Ausführung sind verfügbar. Apache-2.0 gilt laut Modellkarte für den Repository-Code. Für Gewichte und weitere Bestandteile gelten gesonderte Bedingungen.

Alle Benchmark-Werte

Jeder veröffentlichte Messwert mit Quelle, Testbedingungen und Vergleichsmodellen.

Alle 9 veröffentlichten Benchmark-Werte anzeigen

Messungen ohne passende Vergleichswerte

Für diese Messungen fehlen passende Vergleichswerte unter gleichen Testbedingungen. Die Originalwerte und Quellen bleiben hier nachlesbar.

RACE (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
69.91
Bewertung
69.91
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation
NarrativeQA (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
32.7
Bewertung
32.7
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation
HellaSwag (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
41.75
Bewertung
41.75
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation
StoryCloze (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
80.42
Bewertung
80.42
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation
LAMBADA (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
63
Bewertung
63
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation
ARC-Easy (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
87.62
Bewertung
87.62
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation
TruthfulQA (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
54.1
Bewertung
54.1
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation
MMLU (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
51.32
Bewertung
51.32
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation
Cola2 (8-task average) (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
60.1
Bewertung
60.1
Messgröße
accuracy
Einheit
%
Richtung
Mehr ist besser
Quellentyp
vendor-reported
Auswertung
ByteDance Seed Cola2 post-pretraining evaluation
Status
active
Abrufdatum
2026-11-07
Methodik
Vom Anbieter veröffentlichter Wert. Veröffentlichter Cola2-Checkpoint nach 346,03 Milliarden Quelltoken. Drei Durchläufe je Aufgabe mit unabhängigem Rauschen, acht DiT-Schritte, DiT-Guidance 10, Decoder-Guidance −0,9 und Auswahl des jeweils wahrscheinlichsten Tokens.
Quelle ByteDance Seed Cola2 post-pretraining evaluation

Alle technischen Daten

Architektur

Checkpoint
ByteDance-Seed/Cola2
Quelle: Checkpoint
Parameter
8.768.019.912 laut Safetensors-Metadaten.
Quelle: Parameter
Vortraining
346,03 Milliarden Quelltoken laut ByteDance Seed.
Quelle: Vortraining

Ein- und Ausgabe

Modalitäten
Text als Ein- und Ausgabe
Quelle: Modalitäten

Wasserzeichen und Herkunft

KI-Wasserzeichen meint unsichtbare Signale in der Ausgabe. Sichtbare Zeichen und Herkunftsmetadaten sind getrennt aufgeführt. Unbekannt bedeutet, dass für die jeweilige Angabe kein ausreichender Beleg vorliegt.

KI-Wasserzeichen
Unbekannt
ohne Quelle
Wasserzeichen-Technik
Nicht bekannt
ohne Quelle

Lizenz und Zugang

Lizenz
Apache-2.0 gilt für den Repository-Code. Die Modellkarte weist für die Gewichte auf gesonderte Bedingungen hin und nennt dafür keine Lizenzkennung.
Quelle: Lizenz
Abschaltung
Keine angekündigt
ohne Quelle

Häufige Fragen zu Cola2

Kann ich Cola2 lokal nutzen?

Ja, die Gewichte sind offen.

Angaben von ByteDance Seed

Offene Gewichte
ja
Lizenz
Apache-2.0 gilt für den Repository-Code. Die Modellkarte weist für die Gewichte auf gesonderte Bedingungen hin und nennt dafür keine Lizenzkennung.
Parameter
8,8 Mrd.
davon aktiv je Token
k. A.

Quellen und Datenstand

Benchmarkquellen im Überblick

Welche unabhängigen Auswerter dieses Modell getestet haben. Das ist Abdeckung, keine Qualitätsrangliste.

Für dieses Modell ist derzeit kein aktives Ergebnis der geprüften externen Auswerter zugeordnet. Weitere Quellenbelege stehen darunter.

Ohne Herstellerangaben sowie historische oder strittige Ergebnisse; diese stehen gekennzeichnet bei den Einzelwerten.