Zum Hauptinhalt springen
SprachmodellAktiv

Llama 3.1 70B

Meta

Veröffentlicht
Juli 2024
Datenstand
8. September 2026
Nachfolgermodell
Llama 3.3 70B
Geschwindigkeit
62,6 Token/s
Ausgabe-Tempo
Preis
Eingabe · Ausgabe / 1 Mio. Token
Eingabe
Text
Ausgabe
Text

Llama 3.1 70B vergrößert die dichte Architektur von Llama 3.1 8B auf 70 Milliarden Parameter. Beide verwenden Grouped-Query Attention und unterstützen acht Sprachen, darunter Deutsch.

Das 128K-Kontextfenster bleibt über beide Modellgrößen hinweg gleich. Die Gewichte stehen unter der Llama-3.1-Community-Lizenz, der Wissensstand endet im Dezember 2023. Llama 3.3 70B ist die spätere 70B-Generation.

Technische Daten und Zugang

AngabeWert und Quelle
Gewichte
Open WeightsQuelle nicht angegeben
Zugang
API, LokalQuelle
Parameter
70 Mrd.Quelle nicht angegeben
Kontextfenster
131.072 TokenQuelle
Knowledge Cutoff
Dezember 2023Quelle
Lizenz
Llama 3.1 Community LicenseQuelle
Veröffentlichung
2024-07-23Quelle
Parameter
70 Mrd.Quelle
Architektur
dense transformerQuelle
Eingabe
TextQuelle
Ausgabe
Text, codeQuelle
Sprachen
Trainings-Token
15T+Quelle
Wissensstand
2023-12Quelle