Zum Hauptinhalt springen
SprachmodellOffene Gewichte

Spark-X2.5-4B

iFLYTEK (SparkLLM Team)

Veröffentlicht
1. September 2026
Datenstand
7. Oktober 2026
Eingabe
Text
Ausgabe
Text

Das Besondere an Spark-X2.5-4B ist seine hybride Attention. Eine Full-Attention-Schicht wechselt sich mit drei Sliding-Window-Schichten ab. So kombiniert der offene 4B-Edge-Checkpoint lokale Aufmerksamkeit mit einem nativen Kontextfenster von 1.048.576 Token.

Technische Daten und Zugang

AngabeWert und Quelle
Parameter
4 Mrd. ParameterQuelle
Kontextfenster
1.048.576 Token laut ModellkonfigurationQuelle
Eingabemodalitäten
TextQuelle
Ausgabemodalitäten
TextQuelle
Trainingsstand
Nachtrainierter Checkpoint; die Modellkarte nennt umfangreiches Reinforcement Learning und MOPD.Quelle
Lizenz
Apache 2.0Quelle