Zum Hauptinhalt springen

Direktvergleich

GPT-5.6 Sol vs. Gemini 3.8 Flash

Veröffentlichte Benchmarkwerte aus derselben Version und Vergleichskohorte, API-Preise und technische Eckdaten. Unterschiedliche Testeinstellungen werden sichtbar ausgewiesen.

gemeinsame Messreihen
263
verschiedene Benchmarks
44
jüngster Abruf
15.10.2026

Modellauswahl ändern

Steckbrief

Allgemeine Daten

Erscheinungsdatum, Verfügbarkeit, Kontextfenster, Architektur und veröffentlichte Parameterzahlen auf einen Blick. Nicht veröffentlichte Angaben bleiben als solche markiert.

Allgemeine Daten von GPT-5.6 Sol und Gemini 3.8 Flash
MerkmalGPT-5.6 SolGemini 3.8 Flash
AnbieterOpenAIGoogle
Erschienen9. Juli 20262. Sept. 2026
VerfügbarkeitAktivAktiv
ModelltypProprietärProprietär
ParameterNicht veröffentlichtNicht veröffentlicht
ArchitekturNicht veröffentlichtNicht veröffentlicht
Kontextfenster1.050.000 Token1.048.576 Token
Wissensstand16. Februar 2026März 2026
Technische QuellenModell, Kontext, WissensstandModell, Wissensstand

Kosten

API-Preise im Vergleich

Die Tabelle vergleicht die offiziellen Standard-API-Tarife pro 1 Mio. Token einschließlich veröffentlichter Cache-Preise. Batch, Fast, Priority, regionale Aufschläge, Toolaufrufe und Cloudpreise sind nicht eingerechnet.

API-Preise von GPT-5.6 Sol und Gemini 3.8 Flash
PreisartGPT-5.6 SolGemini 3.8 Flash
API-Eingabe4 $ ≤272K / 8 $ >272K0,75 $
API-Ausgabe20 $ ≤272K / 30 $ >272K3,75 $
Cache lesen0,4 $ ≤272K / 0,8 $ >272K0,075 $
Cache schreiben (5 Min.)5 $ ≤272K / 10 $ >272KNicht ausgewiesen
Cache schreiben (1 Std.)Nicht ausgewiesenNicht ausgewiesen
Preis geprüft22.09.2026 Quelle22.09.2026 Quelle
GPT-5.6 SolGemini 3.8 Flash
API-EingabeUSD pro 1 Mio. Token, Basistarif
GPT-5.6 Sol4 $
Gemini 3.8 FlashGünstiger0,75 $
API-AusgabeUSD pro 1 Mio. Token, Basistarif
GPT-5.6 Sol20 $
Gemini 3.8 FlashGünstiger3,75 $
Cache lesenUSD pro 1 Mio. Token, Basistarif
GPT-5.6 Sol0,4 $
Gemini 3.8 FlashGünstiger0,075 $

Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand

Preise nach Anbieter

Direkte Entwicklertarife und über OpenRouter geroutete Anbieterpreise sind getrennt gekennzeichnet. Alle Preise gelten in USD pro 1 Mio. Token. Kontextabhängige Direktpreise sowie regionale, Flex-, Priority- und weitere OpenRouter-Tarife bleiben einzeln erkennbar.

Anbieterpreise von GPT-5.6 Sol und Gemini 3.8 Flash
ModellAnbieterBezugsweg und TarifEingabe pro 1 Mio. TokenAusgabe pro 1 Mio. TokenQuelle
GPT-5.6 SolOpenAIDirekt beim EntwicklerBis 272.000 Kontext-Token4 $20 $Quelle22.09.2026
OpenAIDirekt beim EntwicklerÜber 272.000 Kontext-Token8 $30 $Quelle22.09.2026
Amazon BedrockÜber OpenRouteramazon-bedrock/us-east-14,4 $22 $Quelle17.10.2026
AzureÜber OpenRouterazure4 $20 $Quelle17.10.2026
AzureÜber OpenRouterazure/eu4,4 $22 $Quelle17.10.2026
AzureÜber OpenRouterazure/us4,4 $22 $Quelle17.10.2026
OpenAIÜber OpenRouteropenai4 $20 $Quelle17.10.2026
OpenAIÜber OpenRouteropenai/fast8 $40 $Quelle17.10.2026
OpenAIÜber OpenRouteropenai/flexGünstigster erfasster Preis: 2 $Günstigster erfasster Preis: 10 $Quelle17.10.2026
Gemini 3.8 FlashGoogleDirekt beim EntwicklerStandard-API0,75 $3,75 $Quelle22.09.2026
GoogleÜber OpenRoutergoogle-vertex/us0,825 $4,125 $Quelle17.10.2026
Google AI StudioÜber OpenRoutergoogle-ai-studio0,75 $3,75 $Quelle17.10.2026
Google AI StudioÜber OpenRoutergoogle-ai-studio/flexGünstigster erfasster Preis: 0,375 $Günstigster erfasster Preis: 1,875 $Quelle17.10.2026
Google AI StudioÜber OpenRoutergoogle-ai-studio/priority1,35 $6,75 $Quelle17.10.2026

Leistung

Gemeinsame Benchmarks

Nur veröffentlichte Ergebnisse mit derselben Benchmark-Version, Aufgabe, Metrik und Vergleichskohorte werden gegenübergestellt. Wenn Anbieter unterschiedliche Reasoning-Stufen, Agenten oder Ausgabegrenzen verwendet haben, steht das direkt in der Tabelle.

Fähigkeitsprofil aus vergleichbaren Benchmarks

Jede Achse mittelt direkt vergleichbare Benchmarkfamilien. Ein Wert von 100 bedeutet den stärkeren Wert innerhalb dieses Duells, keinen universellen Qualitätswert.

255075100CodingReasoningWissenAgenten-AufgabenGesamt
GPT-5.6 Sol
Gemini 3.8 Flash
Coding: 87,2 / 97,6 (1 Benchmarkfamilie)
Reasoning: 98,6 / 93,7 (3 Benchmarkfamilien)
Wissen: 68,4 / 100 (1 Benchmarkfamilie)
Agenten-Aufgaben: 96,1 / 96,4 (3 Benchmarkfamilien)
Gesamt: 99,5 / 98,9 (1 Benchmarkfamilie)

19 passende Messreihen aus 9 Benchmarkfamilien wurden berücksichtigt. Das Radar zeigt 5 von 5 vergleichbaren Kategorien.

GPT-5.6 SolGemini 3.8 Flash
AA-BriefcaseOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
GPT-5.6 SolGewinner1.241,93 elo
Gemini 3.8 Flash1.181,5 elo
AA-LCROverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
GPT-5.6 Sol80,3 %
Gemini 3.8 FlashGewinner84,0 %
AA-OmniscienceOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
GPT-5.6 Sol19,4 Punkte
Gemini 3.8 FlashGewinner28,583 Punkte
Artificial Analysis Intelligence IndexOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
GPT-5.6 SolGewinner33,473 Punkte
Gemini 3.8 Flash33,455 Punkte
AutomationBench-AAOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
GPT-5.6 Sol51,3 %
Gemini 3.8 FlashGewinner60,9 %
BioMysteryBenchOverall. Mehr ist besser. Testaufbau nicht identisch dokumentiert
GPT-5.6 SolHöherer Messwert71,111 %
Gemini 3.8 Flash62,222 %
Code MigrationOverall. Mehr ist besser. Testaufbau nicht identisch dokumentiert
GPT-5.6 SolHöherer Messwert52,916 %
Gemini 3.8 Flash36,546 %
CyberBench v1.1Overall. Mehr ist besser. Testaufbau nicht identisch dokumentiert
GPT-5.6 SolHöherer Messwert76,31 %
Gemini 3.8 Flash43,75 %
EMBOverall. Mehr ist besser. Testaufbau nicht identisch dokumentiert
GPT-5.6 SolHöherer Messwert72,339 %
Gemini 3.8 Flash72,196 %
Finance Agent (v2)Overall. Mehr ist besser. Testaufbau nicht identisch dokumentiert
GPT-5.6 Sol53,756 %
Gemini 3.8 FlashHöherer Messwert61,435 %
GDP.pdfOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
GPT-5.6 SolGewinner26,2 %
Gemini 3.8 Flash22,8 %
GDPval-AAOverall. Mehr ist besser. Kein dokumentierter Setup-Unterschied
GPT-5.6 SolGewinner1.421,47 elo
Gemini 3.8 Flash1.421,18 elo

Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand

Benchmarkwerte von GPT-5.6 Sol und Gemini 3.8 Flash
Benchmark und AufgabeGPT-5.6 SolGemini 3.8 FlashQuelle
AA-BriefcaseOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: AA-Briefcase EloBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner1.241,93 elo
1.181,5 elo
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
AA-LCROverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: Pass rateBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
80,3 %
Gewinner84,0 %
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
AA-OmniscienceOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: AA-Omniscience IndexBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
19,4 Punkte
Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100.
Gewinner28,583 Punkte
Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100.
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
Artificial Analysis Intelligence IndexOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v4.3.2Messgröße: Artificial Analysis Intelligence IndexBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Low), Reasoning: Low
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Low), Reasoning: Low
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Low) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-low, UUID 0904b596-8932-43bd-9b21-324f128e1723, reasoning=true, source reasoning-token configuration budget=0, suffix=Low). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Low) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-low, UUID f6db039b-0f3b-485c-9d7f-982988e44f26, reasoning=true, source reasoning-token configuration budget=0, suffix=Low). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner33,473 Punkte
33,455 Punkte
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
AutomationBench-AAOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Objectives completed without guardrail violationsBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
51,3 %
Gewinner60,9 %
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
BioMysteryBenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Harness: Terminus 2, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Harness: Terminus 2, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert71,111 %
62,222 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Code MigrationOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert52,916 %
36,546 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
CyberBench v1.1Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert76,31 %
43,75 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
EMBOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert72,339 %
72,196 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Finance Agent (v2)Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
53,756 %
Höherer Messwert61,435 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
GDP.pdfOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: All-pass rateBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner26,2 %
22,8 %
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
GDPval-AAOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v2.1Messgröße: GDPval-AA EloBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner1.421,47 elo
1.421,18 elo
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
GPQA DiamondOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert95,202 %
94,444 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
Harvey's Legal Agent BenchmarkOverall · Task fully resolved
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: task resolution rateBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
2,5 %
Höherer Messwert10 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Humanity's Last ExamOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Text-only pass@1 accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner42,2 %
Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz.
42,1 %
Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz.
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
IOIOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert91,167 %
56,944 %
Vals AI
Quellendetails
Datenstand: 14.10.2026
Legal Research BenchOverall · All-pass
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: all-pass rateBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert48,077 %
38,942 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
LegalBenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
86,965 %
Höherer Messwert86,993 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
LiveCodeBench v6Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
82,604 %
Höherer Messwert89,484 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
LMArena Text, Style ControlOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: gpt-5.6-sol-xhigh, Reasoning: xhigh, Harness: Arena Text, style control
Gemini 3.8 Flash: Snapshot: gemini-3.8-flash-high, Reasoning: high, Harness: Arena Text, style control
GPT-5.6 Sol: Arena-Bewertung aus 39.832 veröffentlichten Paarvergleichen.Gemini 3.8 Flash: Arena-Bewertung aus 35.670 veröffentlichten Paarvergleichen.
1.484,86
95-%-Konfidenzintervall: ±4,354Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.496,319
95-%-Konfidenzintervall: ±4,654Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 13.10.2026
LMArena Vision, Style ControlOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: gpt-5.6-sol-xhigh, Reasoning: xhigh, Harness: Arena Vision, style control
Gemini 3.8 Flash: Snapshot: gemini-3.8-flash-high, Reasoning: high, Harness: Arena Vision, style control
GPT-5.6 Sol: Arena-Bewertung aus 10.907 veröffentlichten Paarvergleichen.Gemini 3.8 Flash: Arena-Bewertung aus 3.792 veröffentlichten Paarvergleichen.
1.286,962
95-%-Konfidenzintervall: ±7,454Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
Höherer Messwert1.289,129
95-%-Konfidenzintervall: ±10,62Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 09.10.2026
MedCodeOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 30.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
43,974 %
Höherer Messwert48,135 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
MedScribeOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 30.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert85,233 %
84,496 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
MMLU-ProOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
89,1 %
Höherer Messwert90,221 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
MMMU-ProOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
88,844 %
Höherer Messwert89,075 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
MortgageTaxOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert67,289 %
65,342 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
MysteryMechanismOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
33,333 %
Höherer Messwert36,486 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
ProgramBenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: fully resolved rateBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert1,5 %
1 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
ProofBenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert83 %
48 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Public Benefits Bench v1.1Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert66,509 %
65,291 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
SAGEOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 30.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 30.000 tokens
Höherer Messwert52,563 %
35,064 %
Vals AI
Quellendetails
Datenstand: 08.10.2026
SkillsBenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Harness: OpenHands, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 65.536 tokens
54,1 %
Höherer Messwert57,985 %
Vals AI
Quellendetails
Datenstand: 27.09.2026
SRE BenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: fully solved rateBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert30,534 %
11,069 %
Vals AI
Quellendetails
Datenstand: 14.10.2026
SWE-bench VerifiedOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert96,2 %
80 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
Tax Agent BenchOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
31,088 %
Höherer Messwert32,124 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
TaxEval v2Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert74,775 %
74,448 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
Terminal-BenchOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: 4.0Messgröße: Task successBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
14,6 %
Gewinner19,7 %
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
Terminal-Bench 2.1Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert85,768 %
81,273 %
Vals AI
Quellendetails
Datenstand: 28.09.2026
Terminal-Bench 4.0Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 4.0Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert37,879 %
19,697 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
Terminal-Bench ScienceOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 0.1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Harness: Mini-SWE-agent, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Harness: Mini-SWE-agent, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert20 %
8,571 %
Vals AI
Quellendetails
Datenstand: 14.10.2026
Time Horizon Index: KSPOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: progressBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert23,833 %
18,833 %
Vals AI
Quellendetails
Datenstand: 07.10.2026
Vals IndexOverall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2.1Messgröße: weighted index scoreBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert58,005 %
54,887 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
Vibe Code Bench 1-100Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.0Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Harness: OpenHands, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert20,011 %
18,772 %
Vals AI
Quellendetails
Datenstand: 14.10.2026
Vibe Code Bench v1.1Overall
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Harness: OpenHands, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Harness: OpenHands, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert80,495 %
78,651 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
AA-BriefcaseOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: AA-Briefcase EloBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (High), Reasoning: High
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: High
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (High) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-high, UUID 8afc250d-b538-45a2-812a-4605f4ffd87e, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner1.370,36 elo
1.203,02 elo
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
AA-LCROverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v1.1Messgröße: Pass rateBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (High), Reasoning: High
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: High
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (High) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-high, UUID 8afc250d-b538-45a2-812a-4605f4ffd87e, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner81,7 %
81,3 %
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
AA-OmniscienceOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: AA-Omniscience IndexBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (High), Reasoning: High
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: High
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (High) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-high, UUID 8afc250d-b538-45a2-812a-4605f4ffd87e, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
20,367 Punkte
Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100.
Gewinner29,55 Punkte
Der Index kann negative Werte annehmen und reicht laut Anbieter von -100 bis 100.
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
Artificial Analysis Intelligence IndexOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v4.3.2Messgröße: Artificial Analysis Intelligence IndexBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (Medium), Reasoning: Medium
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (Medium), Reasoning: Medium
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (Medium) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-medium, UUID 6f174934-5b7d-4333-86cb-f5ebf4a862e3, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (Medium) (Release gemini-3-8-flash, Zeile gemini-3-8-flash-medium, UUID 744fa3c1-42a7-4995-b138-fb6be11f463c, reasoning=true, source reasoning-token configuration budget=0, suffix=Medium). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
39,236 Punkte
Gewinner39,774 Punkte
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
AutomationBench-AAOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Objectives completed without guardrail violationsBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (High), Reasoning: High
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: High
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (High) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-high, UUID 8afc250d-b538-45a2-812a-4605f4ffd87e, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
55,3 %
Gewinner59,9 %
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
BioMysteryBenchHard
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Harness: Terminus 2, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Harness: Terminus 2, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert29,412 %
21,569 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Code MigrationCLI
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert47,221 %
25,871 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
CyberBench v1.1Patch
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1.1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert89,286 %
87,5 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
EMBComps
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
71,309 %
Höherer Messwert76,435 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Finance Agent (v2)Adjustments
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
49,233 %
Höherer Messwert54,828 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
GDP.pdfOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: All-pass rateBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (High), Reasoning: High
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: High
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (High) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-high, UUID 8afc250d-b538-45a2-812a-4605f4ffd87e, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner27,8 %
21,0 %
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
GDPval-AAOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: v2.1Messgröße: GDPval-AA EloBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (High), Reasoning: High
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: High
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (High) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-high, UUID 8afc250d-b538-45a2-812a-4605f4ffd87e, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
Gewinner1.503,99 elo
1.436,3 elo
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
GPQA DiamondFew-Shot CoT
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Kein direkter Sieger94,949 %
Kein direkter Sieger94,949 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
Harvey's Legal Agent BenchmarkAntitrust Competition · Criteria passed
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: criteria pass rateBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
78,623 %
Höherer Messwert87,681 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
Humanity's Last ExamOverall
Testdetails
Kein dokumentierter Unterschied im TestaufbauVersion: unspecifiedMessgröße: Text-only pass@1 accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: GPT-5.6 Sol (High), Reasoning: High
Gemini 3.8 Flash: Snapshot: Gemini 3.8 Flash (High), Reasoning: High
GPT-5.6 Sol: Exakte AA-Konfiguration: GPT-5.6 Sol (High) (Release gpt-5-6-sol, Zeile gpt-5-6-sol-high, UUID 8afc250d-b538-45a2-812a-4605f4ffd87e, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.Gemini 3.8 Flash: Exakte AA-Konfiguration: Gemini 3.8 Flash (High) (Release gemini-3-8-flash, Zeile gemini-3-8-flash, UUID 8a999846-4c1d-4ce7-a8b7-1310a7166fd7, reasoning=true, source reasoning-token configuration budget=0, suffix=High). Der konfigurierte Wert ist kein gemessener Tokenverbrauch.
46,0 %
Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz.
Gewinner47,8 %
Der Anbieter beschreibt seine Vergleichsauswertung als text-only 2.158 Fragen, nicht als den vollständigen 2.500-Fragen-Datensatz.
Artificial Analysis
Quellendetails
Datenstand: 15.10.2026
IOIIOI 2024
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 2Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert100 %
55,667 %
Vals AI
Quellendetails
Datenstand: 14.10.2026
Legal Research BenchAdministrative / Regulatory · All-pass
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: all-pass rateBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
Höherer Messwert60,606 %
46,97 %
Vals AI
Quellendetails
Datenstand: 12.10.2026
LegalBenchConclusion Tasks
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
90,492 %
Höherer Messwert90,691 %
Vals AI
Quellendetails
Datenstand: 13.10.2026
LiveCodeBench v6Easy
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: 1Messgröße: accuracyBewertung: Mehr ist besserGPT-5.6 Sol: Reasoning: max, Ausgabegrenze: 128.000 tokens
Gemini 3.8 Flash: Reasoning: high, Temperatur: 1, Ausgabegrenze: 65.536 tokens
98,137 %
Höherer Messwert99,068 %
Vals AI
Quellendetails
Datenstand: 01.09.2026
LMArena Text, Style ControlBusiness, management and finance
Testdetails
Testaufbau nicht identisch dokumentiertKein direkter SiegerVersion: style-control-v1Messgröße: style-controlled Bradley-Terry ratingBewertung: Mehr ist besserGPT-5.6 Sol: Snapshot: gpt-5.6-sol-xhigh, Reasoning: xhigh, Harness: Arena Text, style control
Gemini 3.8 Flash: Snapshot: gemini-3.8-flash-high, Reasoning: high, Harness: Arena Text, style control
GPT-5.6 Sol: Arena-Bewertung aus 7.397 veröffentlichten Paarvergleichen.Gemini 3.8 Flash: Arena-Bewertung aus 6.520 veröffentlichten Paarvergleichen.
Höherer Messwert1.486,398
95-%-Konfidenzintervall: ±7,685Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
1.479,887
95-%-Konfidenzintervall: ±8,136Der Arena-Score misst menschliche Präferenzen und ist kein fester Fähigkeitstest. Konfidenzintervall, Arena-Bereich und Modellkonfiguration gehören zum Ergebnis.
LMArena
Quellendetails
Datenstand: 13.10.2026

Zeichenerklärung:besserer Wertbesser, aber nicht eindeutigGleichstand

Eigene Modelltests

Unsere Tests

SVG-Kurztest

Ein SVG-Prompt, feste Ausgabeparameter. Aufnahmen erscheinen nur bei gemeldeten 0 Reasoning-Tokens oder dokumentiert fehlender Reasoning-Steuerung. Gleiche Testbedingungen machen die interne Rechenleistung der Modelle nicht identisch.

Gemeinsame Testrunde: 4ae5d8eeb9a9

GPT-5.6 Sol

In dieser Runde nicht verfügbar

Gemini 3.8 Flash

In dieser Runde nicht verfügbar

Frühere Tests

Pelikan auf dem Fahrrad

Community-Klassiker für eine freie SVG-Zeichnung.

GPT-5.6 Sol

GPT-5.6 Sol: Pelikan auf dem Fahrrad
Community-Klassiker für eine freie SVG-Zeichnung.

Reasoning (angefragt): high

Aktueller Versuch
Datum des Testlaufs
01.10.2026
API-Anbieter
openrouter
Angefragtes API-Modell
openai/gpt-5.6-sol
API-Modell laut Antwort
openai/gpt-5.6-sol
Reasoning-Einstellung
high
Festgelegter Endpunkt
OpenAI | openai/gpt-5.6-sol-20260709
Temperatur
Anbieterstandard
Tokenlimit inklusive Reasoning
8.192 Token
Testprotokoll
community-visual-tests-v1
Technische Prüfung
Bestanden, keine Qualitätsbewertung
Antwortzeit
58,7 s

Visuell geprüft. Aus diesem Einzeltest ergibt sich kein Gesamturteil über das Modell.

Frühere Versuche (1)
  • 07.09.2026API-Anfrage fehlgeschlagenReasoning-Einstellung: high

Gemini 3.8 Flash

Die Antwort hat das Tokenlimit erreicht. Es liegt keine vollständige Aufzeichnung vor.

Reasoning (angefragt): high

Aktueller Versuch
Datum des Testlaufs
05.10.2026
API-Anbieter
openrouter
Angefragtes API-Modell
google/gemini-3.8-flash
API-Modell laut Antwort
google/gemini-3.8-flash
Reasoning-Einstellung
high
Festgelegter Endpunkt
Google AI Studio | google/gemini-3.8-flash-20260902
Temperatur
Anbieterstandard
Tokenlimit inklusive Reasoning
8.192 Token
Testprotokoll
community-visual-tests-v1
Technische Prüfung
Nicht bestanden
Antwortzeit
40,2 s

Visuell noch nicht bewertet. Eine erfolgreiche Aufzeichnung bestätigt weder korrekte Physik noch die vollständige Umsetzung des Prompts.

Frühere Versuche (3)
  • 02.10.2026API-Anfrage fehlgeschlagenReasoning-Einstellung: high
  • 01.10.2026API-Anfrage fehlgeschlagenReasoning-Einstellung: high
  • 07.09.2026API-Anfrage fehlgeschlagenReasoning-Einstellung: high
Prompt und Testbedingungen

Generate an SVG of a pelican riding a bicycle

Tokenlimit inklusive Reasoning: 8.192 Token

Ursprung der Aufgabe (Simon Willison)

So liest du den Vergleich

Ein Benchmark-Sieg ist kein Gesamturteil

Entscheidend sind deine Aufgaben, dein Budget und die benötigte Kontextlänge. Ein Coding-Benchmark sagt wenig über Bildverständnis oder Agentenarbeit aus.

Die Standardpreistabelle nutzt direkte Entwicklertarife. Der Anbieter-Vergleich kennzeichnet OpenRouter-Endpoints, Regionen und Sondertarife separat.

Jeder Messwert verlinkt seine Messstelle und zeigt den Abrufstand. Je nach Kennzeichnung handelt es sich um eine Anbieterangabe, ein offizielles Benchmark-Leaderboard oder eine unabhängige Evaluation. Strittige oder archivierte Ergebnisse werden nicht verwendet.

Weitere Duelle

Vergleiche GPT-5.6 Sol und Gemini 3.8 Flash mit weiteren wichtigen Modellen. Alle Duelle nutzen dieselbe Daten- und Benchmarklogik.

Zum vollständigen LLM-Vergleich