Claude Opus 5
In dieser Runde nicht verfügbar
Direktvergleich
Veröffentlichte Benchmarkwerte aus derselben Version und Vergleichskohorte, API-Preise und technische Eckdaten. Unterschiedliche Testeinstellungen werden sichtbar ausgewiesen.
Steckbrief
Erscheinungsdatum, Verfügbarkeit, Kontextfenster, Architektur und veröffentlichte Parameterzahlen auf einen Blick. Nicht veröffentlichte Angaben bleiben als solche markiert.
| Merkmal | Claude Opus 5 | Gemini 3.8 Flash |
|---|---|---|
| Anbieter | Anthropic | |
| Erschienen | 24. Juli 2026 | 2. Sept. 2026 |
| Verfügbarkeit | Aktiv | Aktiv |
| Modelltyp | Proprietär | Proprietär |
| Parameter | Nicht veröffentlicht | Nicht veröffentlicht |
| Architektur | Nicht veröffentlicht | Nicht veröffentlicht |
| Kontextfenster | 1.000.000 Token | 1.048.576 Token |
| Wissensstand | Mai 2026 | März 2026 |
| Technische Quellen | Modell, Wissensstand | Modell, Wissensstand |
Kosten
Die Tabelle vergleicht die offiziellen Standard-API-Tarife pro 1 Mio. Token einschließlich veröffentlichter Cache-Preise. Batch, Fast, Priority, regionale Aufschläge, Toolaufrufe und Cloudpreise sind nicht eingerechnet.
| Preisart | Claude Opus 5 | Gemini 3.8 Flash |
|---|---|---|
| API-Eingabe | 5 $ | 0,75 $ |
| API-Ausgabe | 25 $ | 3,75 $ |
| Cache lesen | 0,5 $ | 0,075 $ |
| Cache schreiben (5 Min.) | 6,25 $ | Nicht ausgewiesen |
| Cache schreiben (1 Std.) | 10 $ | Nicht ausgewiesen |
| Preis geprüft | 22.09.2026 Quelle | 22.09.2026 Quelle |
Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand
Direkte Entwicklertarife und über OpenRouter geroutete Anbieterpreise sind getrennt gekennzeichnet. Alle Preise gelten in USD pro 1 Mio. Token. Kontextabhängige Direktpreise sowie regionale, Flex-, Priority- und weitere OpenRouter-Tarife bleiben einzeln erkennbar.
| Modell | Anbieter | Bezugsweg und Tarif | Eingabe pro 1 Mio. Token | Ausgabe pro 1 Mio. Token | Quelle |
|---|---|---|---|---|---|
| Claude Opus 5 | Anthropic | Direkt beim EntwicklerStandard-API | Günstigster erfasster Preis: 5 $ | Günstigster erfasster Preis: 25 $ | Quelle22.09.2026 |
| Amazon Bedrock | Über OpenRouteramazon-bedrock | Günstigster erfasster Preis: 5 $ | Günstigster erfasster Preis: 25 $ | Quelle17.10.2026 | |
| Amazon Bedrock | Über OpenRouteramazon-bedrock/eu-west-1 | 5,5 $ | 27,5 $ | Quelle17.10.2026 | |
| Amazon Bedrock | Über OpenRouteramazon-bedrock/us-east-1 | 5,5 $ | 27,5 $ | Quelle17.10.2026 | |
| Anthropic | Über OpenRouteranthropic | Günstigster erfasster Preis: 5 $ | Günstigster erfasster Preis: 25 $ | Quelle17.10.2026 | |
| Anthropic | Über OpenRouteranthropic/fast | 10 $ | 50 $ | Quelle17.10.2026 | |
| Azure | Über OpenRouterazure/global | Günstigster erfasster Preis: 5 $ | Günstigster erfasster Preis: 25 $ | Quelle17.10.2026 | |
| Azure | Über OpenRouterazure/us | 5,5 $ | 27,5 $ | Quelle17.10.2026 | |
| Claude Platform on AWS | Über OpenRouterclaude-on-aws | Günstigster erfasster Preis: 5 $ | Günstigster erfasster Preis: 25 $ | Quelle17.10.2026 | |
| Über OpenRoutergoogle-vertex/europe | 5,5 $ | 27,5 $ | Quelle17.10.2026 | ||
| Über OpenRoutergoogle-vertex/global | Günstigster erfasster Preis: 5 $ | Günstigster erfasster Preis: 25 $ | Quelle17.10.2026 | ||
| Über OpenRoutergoogle-vertex/us | 5,5 $ | 27,5 $ | Quelle17.10.2026 | ||
| Gemini 3.8 Flash | Direkt beim EntwicklerStandard-API | 0,75 $ | 3,75 $ | Quelle22.09.2026 | |
| Über OpenRoutergoogle-vertex/us | 0,825 $ | 4,125 $ | Quelle17.10.2026 | ||
| Google AI Studio | Über OpenRoutergoogle-ai-studio | 0,75 $ | 3,75 $ | Quelle17.10.2026 | |
| Google AI Studio | Über OpenRoutergoogle-ai-studio/flex | Günstigster erfasster Preis: 0,375 $ | Günstigster erfasster Preis: 1,875 $ | Quelle17.10.2026 | |
| Google AI Studio | Über OpenRoutergoogle-ai-studio/priority | 1,35 $ | 6,75 $ | Quelle17.10.2026 |
Leistung
Nur veröffentlichte Ergebnisse mit derselben Benchmark-Version, Aufgabe, Metrik und Vergleichskohorte werden gegenübergestellt. Wenn Anbieter unterschiedliche Reasoning-Stufen, Agenten oder Ausgabegrenzen verwendet haben, steht das direkt in der Tabelle.
Jede Achse mittelt direkt vergleichbare Benchmarkfamilien. Ein Wert von 100 bedeutet den stärkeren Wert innerhalb dieses Duells, keinen universellen Qualitätswert.
59 passende Messreihen aus 12 Benchmarkfamilien wurden berücksichtigt. Das Radar zeigt 8 von 11 vergleichbaren Kategorien.
Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand
| Benchmark und Aufgabe | Claude Opus 5 | Gemini 3.8 Flash | Quelle |
|---|---|---|---|
AA-BriefcaseOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: AA-Briefcase EloBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner1.560,7 elo | 1.203,02 elo | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
AA-LCROverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: Pass rateBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | 79,0 % | Gewinner81,3 % | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
AA-OmniscienceOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: AA-Omniscience IndexBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner33,717 Punkte Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100. | 29,55 Punkte Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100. | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
Artificial Analysis Intelligence IndexOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: v4.3.2Messgröße: Artificial Analysis Intelligence IndexBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (Low), Reasoning: Low Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Low), Reasoning: LowClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (Low) (Release claude-opus-5, Zeile claude-opus-5-low, UUID 20928ba9-3a3f-415f-9519-b84ff64ecf34, reasoning=true, source reasoning-token configuration budget=0, suffix=Low). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Low) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-low, UUID f6db039b-0f3b-485c-9d7f-982988e44f26, reasoning=true, source reasoning-token configuration budget=0, suffix=Low). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner39,354 Punkte | 33,455 Punkte | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
AutomationBench-AAOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Objectives completed without guardrail violationsBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | 53,6 % | Gewinner59,9 % | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
BioMysteryBenchOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Harness: Terminus 2, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Harness: Terminus 2, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert79,259 % | 62,222 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
Code MigrationOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert57,473 % | 36,546 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
CyberBench v1.1OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert65,357 % | 43,75 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
EMBOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert73,556 % | 72,196 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
Finance Agent (v2)OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 58,633 % | Höherer Messwert61,435 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
GDP.pdfOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: All-pass rateBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | 19,6 % | Gewinner21,0 % | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
GDPval-AAOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: v2.1Messgröße: GDPval-AA EloBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner1.594,93 elo | 1.436,3 elo | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
GPQA DiamondOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 93,434 % | Höherer Messwert94,444 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
Harvey's Legal Agent BenchmarkOverall · Task fully resolvedTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: task resolution rateBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 6,667 % | Höherer Messwert10 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
Humanity's Last ExamOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Text-only pass@1 accuracyBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner52,8 % Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz. | 47,8 % Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz. | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
IOIOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert84,333 % | 56,944 % | Vals AIQuellendetailsDatenstand: 14.10.2026 |
Legal Research BenchOverall · All-passTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: all-pass rateBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert55,288 % | 38,942 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
LegalBenchOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 86,974 % | Höherer Messwert86,993 % | Vals AIQuellendetailsDatenstand: 13.10.2026 |
LiveCodeBench v6OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 89,033 % | Höherer Messwert89,484 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
LMArena Code Arena WebDevOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: webdevMessgröße: WebDev Arena Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 5: Snapshot: claude-opus-5-high, Reasoning: high, Harness: Arena Code Arena WebDev Gemini 3.8 Flash: Snapshot: gemini-3.8-flash-high, Reasoning: high, Harness: Arena Code Arena WebDevClaude Opus 5: Arena-Bewertung aus 23.519 veröffentlichten Paarvergleichen.Gemini 3.8 Flash: Arena-Bewertung aus 10.077 veröffentlichten Paarvergleichen. | Gewinner1.657,837 95-%-Konfidenzintervall: ±5,533Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis. | 1.584,77 95-%-Konfidenzintervall: ±7,59Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis. | LMArenaQuellendetailsDatenstand: 13.10.2026 |
LMArena Text, Style ControlOverallTestdetailsKein dokumentierter Unterschied im TestaufbauKein klarer VorsprungVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 5: Snapshot: claude-opus-5-high, Reasoning: high, Harness: Arena Text, style control Gemini 3.8 Flash: Snapshot: gemini-3.8-flash-high, Reasoning: high, Harness: Arena Text, style controlClaude Opus 5: Arena-Bewertung aus 65.663 veröffentlichten Paarvergleichen.Gemini 3.8 Flash: Arena-Bewertung aus 35.670 veröffentlichten Paarvergleichen. | 1.489,847 95-%-Konfidenzintervall: ±3,689Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis. | Kein klarer Vorsprung1.496,319 95-%-Konfidenzintervall: ±4,654Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis. | LMArenaQuellendetailsDatenstand: 13.10.2026 |
LMArena Vision, Style ControlOverallTestdetailsKein dokumentierter Unterschied im TestaufbauKein klarer VorsprungVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserClaude Opus 5: Snapshot: claude-opus-5-high, Reasoning: high, Harness: Arena Vision, style control Gemini 3.8 Flash: Snapshot: gemini-3.8-flash-high, Reasoning: high, Harness: Arena Vision, style controlClaude Opus 5: Arena-Bewertung aus 16.665 veröffentlichten Paarvergleichen.Gemini 3.8 Flash: Arena-Bewertung aus 3.792 veröffentlichten Paarvergleichen. | 1.287,417 95-%-Konfidenzintervall: ±6,783Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis. | Kein klarer Vorsprung1.289,129 95-%-Konfidenzintervall: ±10,62Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis. | LMArenaQuellendetailsDatenstand: 09.10.2026 |
MedCodeOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 30.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert63,57 % | 48,135 % | Vals AIQuellendetailsDatenstand: 13.10.2026 |
MedScribeOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 30.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert90,985 % | 84,496 % | Vals AIQuellendetailsDatenstand: 13.10.2026 |
MMLU-ProOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert91,591 % | 90,221 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
MMMU-ProOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert89,884 % | 89,075 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
MortgageTaxOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert72,059 % | 65,342 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
MysteryMechanismOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert37,387 % | 36,486 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
ProgramBenchOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: fully resolved rateBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert3 % | 1 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
ProofBenchOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert99 % | 48 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
Public Benefits Bench v1.1OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert76,928 % | 65,291 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
SAGEOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 30.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 30.000 tokens | Höherer Messwert49,426 % | 35,064 % | Vals AIQuellendetailsDatenstand: 08.10.2026 |
SkillsBenchOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert60,441 % | 57,985 % | Vals AIQuellendetailsDatenstand: 27.09.2026 |
SRE BenchOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: fully solved rateBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert12,214 % | 11,069 % | Vals AIQuellendetailsDatenstand: 14.10.2026 |
SWE-bench VerifiedOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert97 % | 80 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
Tax Agent BenchOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert45,548 % | 32,124 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
TaxEval v2OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserGemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert75,143 % | 74,448 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
Terminal-BenchOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: 4.0Messgröße: Task successBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner46,0 % | 19,7 % | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
Terminal-Bench 2.1OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: high, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert84,644 % | 81,273 % | Vals AIQuellendetailsDatenstand: 28.09.2026 |
Terminal-Bench 4.0OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 4.0Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert53,535 % | 19,697 % | Vals AIQuellendetailsDatenstand: 13.10.2026 |
Terminal-Bench ScienceOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 0.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Harness: Mini-SWE-agent, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Harness: Mini-SWE-agent, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert27,143 % | 8,571 % | Vals AIQuellendetailsDatenstand: 14.10.2026 |
Time Horizon Index: KSPOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: progressBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Kein direkter Sieger18,833 % | Kein direkter Sieger18,833 % | Vals AIQuellendetailsDatenstand: 07.10.2026 |
Vals IndexOverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: weighted index scoreBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert63,674 % | 54,887 % | Vals AIQuellendetailsDatenstand: 13.10.2026 |
Vibe Code Bench 1-100OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.0Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert28,533 % | 18,772 % | Vals AIQuellendetailsDatenstand: 14.10.2026 |
Vibe Code Bench v1.1OverallTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Harness: OpenHands Gemini 3.8 Flash: Reasoning: high, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert88,404 % | 78,651 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
AA-BriefcaseOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: AA-Briefcase EloBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (Medium), Reasoning: Medium Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: MediumClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (Medium) (Release claude-opus-5, Zeile claude-opus-5-medium, UUID ff51be8f-e362-4a7e-9043-687ba15de207, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner1.434,89 elo | 1.181,5 elo | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
AA-LCROverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: Pass rateBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (Medium), Reasoning: Medium Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: MediumClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (Medium) (Release claude-opus-5, Zeile claude-opus-5-medium, UUID ff51be8f-e362-4a7e-9043-687ba15de207, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | 82,0 % | Gewinner84,0 % | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
AA-OmniscienceOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: AA-Omniscience IndexBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (Medium), Reasoning: Medium Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: MediumClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (Medium) (Release claude-opus-5, Zeile claude-opus-5-medium, UUID ff51be8f-e362-4a7e-9043-687ba15de207, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner31,017 Punkte Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100. | 28,583 Punkte Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100. | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
Artificial Analysis Intelligence IndexOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: v4.3.2Messgröße: Artificial Analysis Intelligence IndexBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (High), Reasoning: High Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: HighClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (High) (Release claude-opus-5, Zeile claude-opus-5-high, UUID 712be54a-77ae-41b2-9a58-21181479d6ee, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner48,122 Punkte | 40,926 Punkte | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
AutomationBench-AAOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Objectives completed without guardrail violationsBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (Medium), Reasoning: Medium Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: MediumClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (Medium) (Release claude-opus-5, Zeile claude-opus-5-medium, UUID ff51be8f-e362-4a7e-9043-687ba15de207, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | 54,3 % | Gewinner60,9 % | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
BioMysteryBenchHardTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Harness: Terminus 2, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Harness: Terminus 2, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert43,137 % | 21,569 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
Code MigrationCLITestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert53,297 % | 25,871 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
CyberBench v1.1PatchTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 85,714 % | Höherer Messwert87,5 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
EMBCompsTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 75,171 % | Höherer Messwert76,435 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
Finance Agent (v2)AdjustmentsTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 54,617 % | Höherer Messwert54,828 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
GDP.pdfOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: All-pass rateBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (Medium), Reasoning: Medium Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: MediumClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (Medium) (Release claude-opus-5, Zeile claude-opus-5-medium, UUID ff51be8f-e362-4a7e-9043-687ba15de207, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | 20,0 % | Gewinner22,8 % | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
GDPval-AAOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: v2.1Messgröße: GDPval-AA EloBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (Medium), Reasoning: Medium Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: MediumClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (Medium) (Release claude-opus-5, Zeile claude-opus-5-medium, UUID ff51be8f-e362-4a7e-9043-687ba15de207, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner1.492,08 elo | 1.421,18 elo | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
GPQA DiamondFew-Shot CoTTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 92,424 % | Höherer Messwert94,949 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
Harvey's Legal Agent BenchmarkAntitrust Competition · Criteria passedTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: criteria pass rateBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | 87,319 % | Höherer Messwert87,681 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
Humanity's Last ExamOverallTestdetailsKein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Text-only pass@1 accuracyBewertung: Mehr ist besserClaude Opus 5: Snapshot: Claude Opus 5 (Medium), Reasoning: Medium Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: MediumClaude Opus 5: Exakte AA-Konfiguration: Claude Opus 5 (Medium) (Release claude-opus-5, Zeile claude-opus-5-medium, UUID ff51be8f-e362-4a7e-9043-687ba15de207, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch. | Gewinner51,3 % Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz. | 42,1 % Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz. | Artificial AnalysisQuellendetailsDatenstand: 15.10.2026 |
IOIIOI 2024TestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert100 % | 55,667 % | Vals AIQuellendetailsDatenstand: 14.10.2026 |
Legal Research BenchAdministrative / Regulatory · All-passTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: all-pass rateBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert65,152 % | 46,97 % | Vals AIQuellendetailsDatenstand: 12.10.2026 |
LegalBenchConclusion TasksTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Höherer Messwert91,56 % | 90,691 % | Vals AIQuellendetailsDatenstand: 13.10.2026 |
LiveCodeBench v6EasyTestdetailsTestaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserClaude Opus 5: Compute: max, Temperatur: 1, Ausgabegrenze: 128.000 tokens Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens | Kein direkter Sieger99,068 % | Kein direkter Sieger99,068 % | Vals AIQuellendetailsDatenstand: 01.09.2026 |
Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand | |||
Eigene Modelltests
Ein SVG-Prompt, feste Ausgabeparameter. Aufnahmen erscheinen nur bei gemeldeten 0 Reasoning-Tokens oder dokumentiert fehlender Reasoning-Steuerung. Gleiche Testbedingungen machen die interne Rechenleistung der Modelle nicht identisch.
Gemeinsame Testrunde: 4ae5d8eeb9a9
In dieser Runde nicht verfügbar
In dieser Runde nicht verfügbar
Community-Klassiker für eine freie SVG-Zeichnung.
Claude Opus 5

Reasoning (angefragt): high
Visuell geprüft. Aus diesem Einzeltest ergibt sich kein Gesamturteil über das Modell.
Gemini 3.8 Flash
Die Antwort hat das Tokenlimit erreicht. Es liegt keine vollständige Aufzeichnung vor.
Reasoning (angefragt): high
Visuell noch nicht bewertet. Eine erfolgreiche Aufzeichnung bestätigt weder korrekte Physik noch die vollständige Umsetzung des Prompts.
Generate an SVG of a pelican riding a bicycle
Tokenlimit inklusive Reasoning: 8.192 Token
Ursprung der Aufgabe (Simon Willison)So liest du den Vergleich
Entscheidend sind deine Aufgaben, dein Budget und die benötigte Kontextlänge. Ein Coding-Benchmark sagt wenig über Bildverständnis oder Agentenarbeit aus.
Die Standardpreistabelle nutzt direkte Entwicklertarife. Der Anbieter-Vergleich kennzeichnet OpenRouter-Endpoints, Regionen und Sondertarife separat.
Jeder Messwert verlinkt seine Messstelle und zeigt den Abrufstand. Je nach Kennzeichnung handelt es sich um eine Anbieterangabe, ein offizielles Benchmark-Leaderboard oder eine unabhängige Evaluation. Strittige oder archivierte Ergebnisse werden nicht verwendet.
Weitere Duelle
Vergleiche Claude Opus 5 und Gemini 3.8 Flash mit weiteren wichtigen Modellen. Alle Duelle nutzen dieselbe Daten- und Benchmarklogik.