Zum Hauptinhalt springen

Direktvergleich

Claude Opus 4.8 vs. GPT-6 Astra

Veröffentlichte Benchmarkwerte aus derselben Version und Vergleichskohorte, API-Preise und technische Eckdaten. Unterschiedliche Testeinstellungen werden sichtbar ausgewiesen.

gemeinsame Messreihen
240
verschiedene Benchmark-Messgrößen
32
jüngster Abruf
19.10.2026

Modellauswahl ändern

Steckbrief

Allgemeine Daten

Erscheinungsdatum, Verfügbarkeit, Kontextfenster, Architektur und veröffentlichte Parameterzahlen auf einen Blick. Nicht veröffentlichte Angaben bleiben als solche markiert.

Allgemeine Daten von Claude Opus 4.8 und GPT-6 Astra
MerkmalClaude Opus 4.8GPT-6 Astra
AnbieterAnthropicOpenAI
ErschienenMai 20263. Sept. 2026
VerfügbarkeitLegacyEingeschränkter Zugang
ModelltypProprietärProprietär
ParameterNicht veröffentlichtNicht veröffentlicht
ArchitekturNicht veröffentlichtNicht veröffentlicht
Kontextfenster1.000.000 Token1.050.000 Token
WissensstandJanuar 202630. April 2026
Technische QuellenModell, WissensstandModell, Kontext

Kosten

API-Preise im Vergleich

Die Tabelle vergleicht die offiziellen Standard-API-Tarife pro 1 Mio. Token einschließlich veröffentlichter Cache-Preise. Batch, Fast, Priority, regionale Aufschläge, Toolaufrufe und Cloudpreise sind nicht eingerechnet.

API-Preise von Claude Opus 4.8 und GPT-6 Astra
PreisartClaude Opus 4.8GPT-6 Astra
API-Eingabe5 $10 $ ≤272K / 20 $ >272K
API-Ausgabe25 $50 $ ≤272K / 75 $ >272K
Cache lesen0,5 $1 $ ≤272K / 2 $ >272K
Cache schreiben (5 Min.)6,25 $12,5 $ ≤272K / 25 $ >272K
Cache schreiben (1 Std.)10 $Nicht ausgewiesen
Preis geprüft22.09.2026 Quelle22.09.2026 Quelle
Claude Opus 4.8GPT-6 Astra
API-EingabeUSD pro 1 Mio. Token, Basistarif
Claude Opus 4.8Günstiger5 $
GPT-6 Astra10 $
API-AusgabeUSD pro 1 Mio. Token, Basistarif
Claude Opus 4.8Günstiger25 $
GPT-6 Astra50 $
Cache lesenUSD pro 1 Mio. Token, Basistarif
Claude Opus 4.8Günstiger0,5 $
GPT-6 Astra1 $

Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand

Preise nach Anbieter

Direkte Entwicklertarife und über OpenRouter geroutete Anbieterpreise sind getrennt gekennzeichnet. Alle Preise gelten in USD pro 1 Mio. Token. Kontextabhängige Direktpreise sowie regionale, Flex-, Priority- und weitere OpenRouter-Tarife bleiben einzeln erkennbar.

Für Claude Opus 4.8 ist im gespeicherten OpenRouter-Stand kein Anbietertarif verfügbar. Der offizielle Direktpreis wird trotzdem angezeigt.

Anbieterpreise von Claude Opus 4.8 und GPT-6 Astra
ModellAnbieterBezugsweg und TarifEingabe pro 1 Mio. TokenAusgabe pro 1 Mio. TokenQuelle
Claude Opus 4.8AnthropicDirekt beim EntwicklerStandard-APIGünstigster erfasster Preis: 5 $Günstigster erfasster Preis: 25 $Quelle22.09.2026
GPT-6 AstraOpenAIDirekt beim EntwicklerBis 272.000 Kontext-Token10 $50 $Quelle22.09.2026
OpenAIDirekt beim EntwicklerÜber 272.000 Kontext-Token20 $75 $Quelle22.09.2026
Amazon BedrockÜber OpenRouteramazon-bedrock/us-west-211 $55 $Quelle26.10.2026
AzureÜber OpenRouterazure10 $50 $Quelle26.10.2026
AzureÜber OpenRouterazure/us11 $55 $Quelle26.10.2026
OpenAIÜber OpenRouteropenai10 $50 $Quelle26.10.2026
OpenAIÜber OpenRouteropenai/fast20 $100 $Quelle26.10.2026
OpenAIÜber OpenRouteropenai/flexGünstigster erfasster Preis: 5 $Günstigster erfasster Preis: 25 $Quelle26.10.2026
OpenAIÜber OpenRouteropenai/ultrafast60 $300 $Quelle26.10.2026

Benchmark-Index

Benchmark-Index im Vergleich

Der Index fasst unabhängige Benchmarks auf einer Skala von 0 bis 100 zusammen. Ein Vorsprung zählt erst, wenn ein Modell in mindestens 95 % von 200 Neuberechnungen mit zufällig neu gezogenen Testfamilien vorn liegt. Sonst gelten beide als gleichauf.

Zur KI-Bestenliste

Gesamtindex

57,0

Gesamtindex

90,0

GPT-6 Astra liegt in 8 von 11 gemeinsamen Bereichen vorn. In 3 Bereichen liegen beide gleichauf.

BereichClaude Opus 4.8GPT-6 Astra
Programmieren55,393,4
Schlussfolgern46,291,3
Wissen65,694,3
Agenten56,783,7
Allgemein45,393,9
Finanzengleichauf65,071,9
Recht57,478,9
Gesundheitgleichauf67,883,8
Multimodal55,091,7
Suche52,191,7
Bildunggleichauf71,188,0

Leistung

Gemeinsame Benchmarks

Nur veröffentlichte Ergebnisse mit derselben Benchmark-Version, Aufgabe, Metrik und Vergleichskohorte werden gegenübergestellt. Wenn Anbieter unterschiedliche Reasoning-Stufen, Agenten oder Ausgabegrenzen verwendet haben, steht das direkt in der Tabelle.

Fähigkeitsprofil aus vergleichbaren Benchmarks

Jede Achse mittelt direkt vergleichbare Benchmarkfamilien. Ein Wert von 100 bedeutet den stärkeren Wert innerhalb dieses Duells, keinen universellen Qualitätswert.

255075100CodingReasoningWissenAgenten-AufgabenGesamt
Claude Opus 4.8
GPT-6 Astra
Coding: 36,8 / 100 (1 Benchmarkfamilie)
Reasoning: 86,3 / 100 (3 Benchmarkfamilien)
Wissen: 81,4 / 92,2 (1 Benchmarkfamilie)
Agenten-Aufgaben: 82,8 / 100 (4 Benchmarkfamilien)
Gesamt: 79,3 / 100 (1 Benchmarkfamilie)

12 passende Messreihen aus 10 Benchmarkfamilien wurden berücksichtigt. Das Radar zeigt 5 von 5 vergleichbaren Kategorien.

Claude Opus 4.8GPT-6 Astra
AA-AnalystAgentOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.845,0 %
GPT-6 AstraGewinner51,2 %
AA-BriefcaseOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.81.321,43 elo
GPT-6 AstraGewinner1.568,99 elo
AA-LCROverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.877,7 %
GPT-6 AstraGewinner80,7 %
AA-OmniscienceOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.828,75 Punkte
GPT-6 AstraGewinner43,4 Punkte
AA-Omniscience AccuracyOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.848,8 %
GPT-6 AstraGewinner62,6 %
AA-Omniscience Hallucination RateOverall. Weniger ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.8Gewinner39,3 %
GPT-6 Astra51,3 %
Artificial Analysis Intelligence IndexOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.841,79 Punkte
GPT-6 AstraGewinner52,674 Punkte
AutomationBench-AAOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.845,6 %
GPT-6 AstraGewinner68,5 %
Code MigrationOverall. Mehr ist besser. Testaufbau nicht identisch dokumentiert
Claude Opus 4.847,25 %
GPT-6 AstraHöherer Messwert67,74 %
EMBOverall. Mehr ist besser. Testaufbau nicht identisch dokumentiert
Claude Opus 4.869,373 %
GPT-6 AstraHöherer Messwert71,7 %
Finance Agent (v2)Overall. Mehr ist besser. Testaufbau nicht identisch dokumentiert
Claude Opus 4.8Höherer Messwert53,918 %
GPT-6 Astra53,54 %
GDP.pdfOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
Claude Opus 4.822,8 %
GPT-6 AstraGewinner31,0 %

Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand

Benchmarkwerte von Claude Opus 4.8 und GPT-6 Astra
Benchmark und AufgabeClaude Opus 4.8GPT-6 AstraQuelle
AA-AnalystAgentOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: AA cohort: 80 questionsMessgröße: pass^5 reliabilityBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max, Agent: Stirrup analyst agent, Harness: Artificial Analysis Stirrup, Versuche: pass^5, 5 independent attempts per question
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max, Agent: Stirrup analyst agent, Harness: Artificial Analysis Stirrup, Versuche: pass^5, 5 independent attempts per question
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. 80 quantitative Fragen aus 14 Domänen werden je fünfmal unabhängig ausgeführt. pass^5 zählt nur Fragen als gelöst, die in allen fünf Versuchen richtig beantwortet werden.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. 80 quantitative Fragen aus 14 Domänen werden je fünfmal unabhängig ausgeführt. pass^5 zählt nur Fragen als gelöst, die in allen fünf Versuchen richtig beantwortet werden.
45,0 %
Fragen, Quelldateien und Referenzantworten sind privat. pass^5 misst Zuverlässigkeit über alle fünf Wiederholungen, nicht pass@1.
Gewinner51,2 %
Fragen, Quelldateien und Referenzantworten sind privat. pass^5 misst Zuverlässigkeit über alle fünf Wiederholungen, nicht pass@1.
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
AA-BriefcaseOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: AA-Briefcase EloBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
1.321,43 elo
Gewinner1.568,99 elo
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
AA-LCROverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: Pass rateBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
77,7 %
Gewinner80,7 %
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
AA-OmniscienceOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: AA-Omniscience IndexBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
28,75 Punkte
Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100.
Gewinner43,4 Punkte
Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100.
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
AA-Omniscience AccuracyOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: AA Omniscience diagnosticMessgröße: AA-Omniscience AccuracyBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max, Versuche: AA-reported aggregate; diagnostic-specific run count is not stated on the leaderboard
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max, Versuche: AA-reported aggregate; diagnostic-specific run count is not stated on the leaderboard
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. Anteil der insgesamt korrekt beantworteten Fragen, unabhängig davon, ob das Modell andere Fragen beantwortet oder sich enthält.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. Anteil der insgesamt korrekt beantworteten Fragen, unabhängig davon, ob das Modell andere Fragen beantwortet oder sich enthält.
48,8 %
Dies ist die separat veröffentlichte Genauigkeitsdiagnostik, nicht der AA-Omniscience-Index. AA bezeichnet höhere Werte als besser.
Gewinner62,6 %
Dies ist die separat veröffentlichte Genauigkeitsdiagnostik, nicht der AA-Omniscience-Index. AA bezeichnet höhere Werte als besser.
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
AA-Omniscience Hallucination RateOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: AA Omniscience diagnosticMessgröße: AA-Omniscience Hallucination RateBewertung: Weniger ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max, Versuche: AA-reported aggregate; diagnostic-specific run count is not stated on the leaderboard
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max, Versuche: AA-reported aggregate; diagnostic-specific run count is not stated on the leaderboard
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. Anteil falscher Antworten an allen nicht korrekten Antworten: falsch / (falsch + teilweise richtig + nicht beantwortet).GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. Anteil falscher Antworten an allen nicht korrekten Antworten: falsch / (falsch + teilweise richtig + nicht beantwortet).
Gewinner39,3 %
Dies ist die separat veröffentlichte Halluzinationsraten-Diagnostik, nicht der AA-Omniscience-Index. AA bezeichnet niedrigere Werte als besser.
51,3 %
Dies ist die separat veröffentlichte Halluzinationsraten-Diagnostik, nicht der AA-Omniscience-Index. AA bezeichnet niedrigere Werte als besser.
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
Artificial Analysis Intelligence IndexOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v4.3.2Messgröße: Artificial Analysis Intelligence IndexBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
41,79 Punkte
Gewinner52,674 Punkte
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
AutomationBench-AAOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Objectives completed without guardrail violationsBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
45,6 %
Gewinner68,5 %
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
Code MigrationOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
47,25 %
Höherer Messwert67,74 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
EMBOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
69,373 %
Höherer Messwert71,7 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Finance Agent (v2)Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert53,918 %
53,54 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
GDP.pdfOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: All-pass rateBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
22,8 %
Gewinner31,0 %
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
GDPval-AAOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v2.1Messgröße: GDPval-AA EloBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
1.453,47 elo
Gewinner1.572,84 elo
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
Harvey's Legal Agent BenchmarkOverall · Task fully resolved
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: task resolution rateBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert9,583 %
5,417 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Humanity's Last ExamOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Text-only pass@1 accuracyBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
48,7 %
Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz.
Gewinner54,7 %
Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz.
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
Legal Research BenchOverall · All-pass
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: all-pass rateBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert43,75 %
39,423 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
LMArena Code Arena WebDevOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: webdevMessgröße: WebDev Arena Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8, Harness: Arena Code Arena WebDev
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Code Arena WebDev
Claude Opus 4.8: Arena-Bewertung aus 17.454 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 5.746 veröffentlichten Paarvergleichen.
1.536,177
95-%-Konfidenzintervall: ±5,702Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.780,244
95-%-Konfidenzintervall: ±10,541Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 13.10.2026
LMArena SearchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: searchMessgröße: Search Arena Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8, Harness: Arena Search
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Search
Claude Opus 4.8: Arena-Bewertung aus 106.304 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 18.483 veröffentlichten Paarvergleichen.
1.204,109
95-%-Konfidenzintervall: ±5,622Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.233,616
95-%-Konfidenzintervall: ±7,842Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 13.10.2026
LMArena Text, Style ControlOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8, Harness: Arena Text, style control
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Text, style control
Claude Opus 4.8: Arena-Bewertung aus 65.172 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 12.163 veröffentlichten Paarvergleichen.
1.474,319
95-%-Konfidenzintervall: ±3,846Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.477,319
95-%-Konfidenzintervall: ±6,3Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 15.10.2026
LMArena Vision, Style ControlOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8, Harness: Arena Vision, style control
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Vision, style control
Claude Opus 4.8: Arena-Bewertung aus 18.852 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 3.590 veröffentlichten Paarvergleichen.
1.278,955
95-%-Konfidenzintervall: ±6,534Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.285,988
95-%-Konfidenzintervall: ±10,782Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 09.10.2026
MedCodeOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 30.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert53,217 %
48,486 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
MedScribeOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 30.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
85,755 %
Höherer Messwert87,908 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
ProgramBenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: fully resolved rateBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
1 %
Höherer Messwert5,5 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
SAGEOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 30.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 30.000 tokens
Höherer Messwert54,788 %
46,367 %
Vals AI
Quellendetails
Datenstand: 08.10.2026
Tax Agent BenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert29,999 %
20,717 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Terminal-BenchOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: 4.0Messgröße: Task successBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: Claude Opus 4.8 (Max), Reasoning: Max
GPT-6 Astra: Snapshot: GPT-6 Astra (Max), Reasoning: Max
Claude Opus 4.8: Exakte AA-Konfiguration: Claude Opus 4.8 (Max) (Release claude-opus-4-8, Zeile claude-opus-4-8, UUID 992b7b84-5069-4c6a-9295-834252553d50, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.GPT-6 Astra: Exakte AA-Konfiguration: GPT-6 Astra (Max) (Release gpt-6-astra, Zeile gpt-6-astra, UUID 2f339a97-9a0d-499a-9cb5-e0db665bfa25, reasoning=true, source reasoning-token configuration budget=0, suffix=Max). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
21,7 %
Gewinner59,1 %
Artificial Analysis
Quellendetails
Datenstand: 19.10.2026
Terminal-Bench 2.1Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
71,91 %
Höherer Messwert87,266 %
Vals AI
Quellendetails
Datenstand: 28.09.2026
Terminal-Bench 4.0Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 4.0Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
23,232 %
Höherer Messwert59,596 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
Terminal-Bench ScienceOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 0.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Harness: Mini-SWE-agent, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Harness: Mini-SWE-agent, Ausgabegrenze: 128.000 tokens
4,286 %
Höherer Messwert62,857 %
Vals AI
Quellendetails
Datenstand: 14.10.2026
Time Horizon Index: KSPOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: progressBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
11,833 %
Höherer Messwert90,5 %
Vals AI
Quellendetails
Datenstand: 07.10.2026
Vals IndexOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: weighted index scoreBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
55,1 %
Höherer Messwert63,125 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
Vibe Code Bench v1.1Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Harness: OpenHands, Ausgabegrenze: 128.000 tokens
82,725 %
Höherer Messwert89,594 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Code MigrationCLI
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
40,143 %
Höherer Messwert67,463 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
EMBComps
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
72,797 %
Höherer Messwert77,953 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Finance Agent (v2)Adjustments
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert48,387 %
48,318 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Harvey's Legal Agent BenchmarkAntitrust Competition · Criteria passed
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: criteria pass rateBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
87,319 %
Höherer Messwert88,768 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Legal Research BenchAdministrative / Regulatory · All-pass
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: all-pass rateBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
43,939 %
Höherer Messwert53,03 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
LMArena Code Arena WebDevOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: webdevMessgröße: WebDev Arena Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8-high, Reasoning: high, Harness: Arena Code Arena WebDev
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Code Arena WebDev
Claude Opus 4.8: Arena-Bewertung aus 18.540 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 5.746 veröffentlichten Paarvergleichen.
1.555,99
95-%-Konfidenzintervall: ±5,768Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.780,244
95-%-Konfidenzintervall: ±10,541Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 13.10.2026
LMArena Text, Style ControlOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8-high, Reasoning: high, Harness: Arena Text, style control
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Text, style control
Claude Opus 4.8: Arena-Bewertung aus 64.100 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 12.163 veröffentlichten Paarvergleichen.
Höherer Messwert1.481,495
95-%-Konfidenzintervall: ±3,868Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
1.477,319
95-%-Konfidenzintervall: ±6,3Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 15.10.2026
LMArena Vision, Style ControlOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8-high, Reasoning: high, Harness: Arena Vision, style control
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Vision, style control
Claude Opus 4.8: Arena-Bewertung aus 18.341 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 3.590 veröffentlichten Paarvergleichen.
1.285,632
95-%-Konfidenzintervall: ±6,5Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.285,988
95-%-Konfidenzintervall: ±10,782Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 09.10.2026
ProgramBenchAlmost Resolved
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: almost-resolved rateBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
15,5 %
Höherer Messwert50 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
SAGEAutomata
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 30.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 30.000 tokens
Höherer Messwert41,666 %
37,302 %
Vals AI
Quellendetails
Datenstand: 08.10.2026
Tax Agent BenchControversy & Precedence Analysis
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
13,133 %
Höherer Messwert13,333 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Terminal-Bench 2.1Easy
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Kein direkter Sieger100 %
Kein direkter Sieger100 %
Vals AI
Quellendetails
Datenstand: 28.09.2026
Terminal-Bench 4.0Hardware
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 4.0Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
26,667 %
Höherer Messwert60 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
Terminal-Bench ScienceEarth Sciences
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 0.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Harness: Mini-SWE-agent, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Harness: Mini-SWE-agent, Ausgabegrenze: 128.000 tokens
0 %
Höherer Messwert62,5 %
Vals AI
Quellendetails
Datenstand: 14.10.2026
Time Horizon Index: KSPProgress efficiency
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: progressBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
7,739 %
Höherer Messwert70,112 %
Vals AI
Quellendetails
Datenstand: 07.10.2026
Vals IndexCode Migration
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: benchmark scoreBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
46,942 %
Höherer Messwert68,462 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
Code MigrationCOBOL
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Kein direkter Sieger68,571 %
Kein direkter Sieger68,571 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
EMBDataroom
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert85,948 %
79,319 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Finance Agent (v2)All-Pass
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert43,517 %
40,252 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Harvey's Legal Agent BenchmarkAntitrust Competition · Task fully resolved
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: task resolution rateBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Kein direkter Sieger0 %
Kein direkter Sieger0 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Legal Research BenchAdministrative / Regulatory · Weighted partial credit
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: weighted partial-credit scoreBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
87,365 %
Höherer Messwert87,482 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
LMArena Code Arena WebDevWebdev
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: webdevMessgröße: WebDev Arena Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8, Harness: Arena Code Arena WebDev
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Code Arena WebDev
Claude Opus 4.8: Arena-Bewertung aus 17.454 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 5.746 veröffentlichten Paarvergleichen.
1.536,177
95-%-Konfidenzintervall: ±5,702Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.780,244
95-%-Konfidenzintervall: ±10,541Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 13.10.2026
LMArena Text, Style ControlBusiness, management and finance
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8, Harness: Arena Text, style control
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Text, style control
Claude Opus 4.8: Arena-Bewertung aus 12.774 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 2.136 veröffentlichten Paarvergleichen.
Höherer Messwert1.486,109
95-%-Konfidenzintervall: ±6,333Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
1.474,428
95-%-Konfidenzintervall: ±13,142Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 15.10.2026
LMArena Vision, Style ControlChinese
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 4.8: Snapshot: claude-opus-4-8, Harness: Arena Vision, style control
GPT-6 Astra: Snapshot: gpt-6-astra-max, Reasoning: max, Harness: Arena Vision, style control
Claude Opus 4.8: Arena-Bewertung aus 1.131 veröffentlichten Paarvergleichen.GPT-6 Astra: Arena-Bewertung aus 230 veröffentlichten Paarvergleichen.
1.334,517
95-%-Konfidenzintervall: ±19,635Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.357,126
95-%-Konfidenzintervall: ±39,572Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 09.10.2026
ProgramBenchFully Resolved
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: fully resolved rateBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
1 %
Höherer Messwert5,5 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
SAGELinear Algebra
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 30.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 30.000 tokens
Höherer Messwert78,253 %
62,117 %
Vals AI
Quellendetails
Datenstand: 08.10.2026
Tax Agent BenchControversy & Precedence Analysis
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert58,743 %
58,616 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Terminal-Bench 2.1Hard
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
60 %
Höherer Messwert87,778 %
Vals AI
Quellendetails
Datenstand: 28.09.2026
Terminal-Bench 4.0Media
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 4.0Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
0 %
Höherer Messwert66,667 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
Terminal-Bench ScienceEngineering Sciences
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 0.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Harness: Mini-SWE-agent, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Harness: Mini-SWE-agent, Ausgabegrenze: 128.000 tokens
0 %
Höherer Messwert33,333 %
Vals AI
Quellendetails
Datenstand: 14.10.2026
Vals IndexEMB
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: benchmark scoreBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
69,373 %
Höherer Messwert71,7 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
Code MigrationCode Quality
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: mean reviewer code-quality ratingBewertung: Mehr ist besserClaude Opus 4.8: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens
GPT-6 Astra: Reasoning: max, Ausgabegrenze: 128.000 tokens
Höherer Messwert4,7 / 5
4,469 / 5
Vals AI
Quellendetails
Datenstand: 12.10.2026

Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand

Eigene Modelltests

Unsere Tests

SVG-Kurztest

Ein SVG-Prompt, feste Ausgabeparameter. Aufnahmen erscheinen nur bei gemeldeten 0 Reasoning-Tokens oder dokumentiert fehlender Reasoning-Steuerung. Gleiche Testbedingungen machen die interne Rechenleistung der Modelle nicht identisch.

Gemeinsame Testrunde: 43b8c5c46830

Claude Opus 4.8

In dieser Runde nicht verfügbar

GPT-6 Astra

In dieser Runde nicht verfügbar

Frühere Tests

Pelikan auf dem Fahrrad

Community-Klassiker für eine freie SVG-Zeichnung.

Claude Opus 4.8

Claude Opus 4.8: Pelikan auf dem Fahrrad
Community-Klassiker für eine freie SVG-Zeichnung.

Reasoning (angefragt): high

Aktueller Versuch
Datum des Testlaufs
01.10.2026
API-Anbieter
openrouter
Angefragtes API-Modell
anthropic/claude-opus-4.8
API-Modell laut Antwort
anthropic/claude-opus-4.8
Reasoning-Einstellung
high
Festgelegter Endpunkt
Anthropic | anthropic/claude-4.8-opus-20260528
Temperatur
Anbieterstandard
Tokenlimit inklusive Reasoning
8.192 Token
Testprotokoll
community-visual-tests-v1
Technische Prüfung
Bestanden, keine Qualitätsbewertung
Antwortzeit
18 s

Visuell geprüft. Aus diesem Einzeltest ergibt sich kein Gesamturteil über das Modell.

GPT-6 Astra

GPT-6 Astra: Pelikan auf dem Fahrrad
Community-Klassiker für eine freie SVG-Zeichnung.

Reasoning (angefragt): high

Aktueller Versuch
Datum des Testlaufs
07.09.2026
API-Anbieter
openrouter
Angefragtes API-Modell
openai/gpt-6-astra
API-Modell laut Antwort
openai/gpt-6-astra
Reasoning-Einstellung
high
Festgelegter Endpunkt
OpenAI | openai/gpt-6-astra-20260903
Temperatur
Anbieterstandard
Tokenlimit inklusive Reasoning
8.192 Token
Testprotokoll
community-visual-tests-v1
Technische Prüfung
Bestanden, keine Qualitätsbewertung
Antwortzeit
141,7 s

Visuell geprüft. Aus diesem Einzeltest ergibt sich kein Gesamturteil über das Modell.

Prompt und Testbedingungen

Generate an SVG of a pelican riding a bicycle

Tokenlimit inklusive Reasoning: 8.192 Token

Ursprung der Aufgabe (Simon Willison)

So liest du den Vergleich

Ein Benchmark-Sieg ist kein Gesamturteil

Entscheidend sind deine Aufgaben, dein Budget und die benötigte Kontextlänge. Ein Coding-Benchmark sagt wenig über Bildverständnis oder Agentenarbeit aus.

Die Standardpreistabelle nutzt direkte Entwicklertarife. Der Anbieter-Vergleich kennzeichnet OpenRouter-Endpoints, Regionen und Sondertarife separat.

Jeder Messwert verlinkt seine Messstelle und zeigt den Abrufstand. Je nach Kennzeichnung handelt es sich um eine Anbieterangabe, ein offizielles Benchmark-Leaderboard oder eine unabhängige Evaluation. Strittige oder archivierte Ergebnisse werden nicht verwendet.

Weitere Duelle

Vergleiche Claude Opus 4.8 und GPT-6 Astra mit weiteren wichtigen Modellen. Alle Duelle nutzen dieselbe Daten- und Benchmarklogik.

Zum vollständigen LLM-Vergleich