o1
In dieser Runde nicht verfügbar
OpenAI
Mit o1 setzte OpenAI auf ein Modell, das vor der Antwort zusätzliche Denkzeit nutzt. Verstärkendes Lernen trainierte es darauf, verschiedene Lösungswege zu prüfen und Fehler während des Nachdenkens zu erkennen. Das unterschied die o-Serie von GPT-Modellen mit direkten Antworten.
o3 erweiterte diese Reasoning-Linie später um agentische Werkzeugnutzung in ChatGPT, etwa die Kombination von Websuche und Python.
Der Auswahlindex des LLM-Vergleichshubs mittelt Rangperzentile aus 65 dokumentierten Vergleichskohorten. Die Benchmark-Meta-Scores stehen im Benchmarkbereich.
Benchmark-Metaanalyse
Diese Gradually-Indizes ordnen ausgewählte veröffentlichte Messwerte auf einer Skala von 0 bis 100 ein. Sie sind keine Prozentgenauigkeit und keine Garantie für ein Ergebnis in deiner Anwendung.
Abrufstände der verwendeten Quellen 2026-08-05 - 2026-10-19
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index unter 1 / 100
vorläufig
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index 1,8 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Index unter 1 / 100
vorläufig
Die veröffentlichten Konfigurationen unterscheiden sich innerhalb dieser Vergleichskohorte. Den Index daher als vorläufig lesen.
Methodenfassung: benchmark-meta-score-v3
Es zählen aktive Messwerte aus geprüften Primärquellen, wenn mindestens fünf Modelle im selben dokumentierten Vergleichsschnitt aus Datensatz, Harness, Agent, Werkzeugen und Versuchsanzahl verglichen werden. Pro Benchmark-Reihe und Auswerter zählt ein gemeinsamer Setup-Schnitt aus dem neuesten Abruf. Bei mehreren ausdrücklich erfassten Reasoning-Stufen derselben Quelle und Testreihe zählt die höchste dokumentierte Stufe (none bis max), nicht der höchste Ergebniswert. Die ausdrückliche Quellenangabe „Non-reasoning“ entspricht none. Unbekannte oder mehrdeutige Stufen führen zum Ausschluss des Modells aus der betreffenden Reihe. Innerhalb jeder Reihe werden Prozentwerte und Quoten logit-transformiert, andere Einheiten bleiben unverändert, und anschließend werden alle Werte standardisiert. Ein Ein-Faktor-Modell schätzt daraus eine gemeinsame Leistungsstärke je Modell und je Reihe, wie deutlich sie zwischen den Modellen trennt. Bereichswerte weichen davon nur so weit ab, wie die eigenen Ergebnisse im Bereich es belegen. Der Gesamtwert gewichtet die Kernbereiche mit 75 % und Finanzen, Recht und Gesundheit mit 25 %. Er erfordert mindestens acht Testreihen aus zwei Quellen und drei Bereichen. Die Skala von 0 bis 100 bezieht sich auf eine feste Referenzgruppe aus 29 Sprachmodellen, deren Durchschnitt bei 50 liegt.
Veröffentlichte modellabhängige Parameter können abweichen. Das ist kein kontrolliertes Experiment; solche Vergleiche werden als vorläufig gekennzeichnet.
Nicht gemessene Reihen werden nicht als Nullwert eingesetzt. Fehlen einem Modell eigene Werte in einem Kernbereich, steht dort seine Gesamtstärke, und der Hinweis „geschätzt, ohne eigene Werte in …“ nennt den Bereich. Weniger Testreihen führen zu einem größeren Standardfehler.
Das 95-%-Intervall folgt aus dem Standardfehler von 200 Neuberechnungen mit zufällig neu gezogenen Testfamilien. Es beschreibt, wie genau die erfassten Testreihen den Wert festlegen. Es ist keine Prognose für künftige Aufgaben oder spätere Neuberechnungen mit anderen Teilnehmern.
Die Quellenzahl ist keine Anzahl unabhängiger Experimente.
OECD-Handbuch zu zusammengesetzten IndikatorenAlle 12 Testfamilien und 12 von 12 Rohmesswerten sind hier aufgeführt. Die vollständige Rechnung für alle Modelle enthält der JSON-Export.
Gewicht der Familie im festen Testpanel (informativ): 2,14 % · Abdeckung dieser Testfamilie: 100 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 1,53 % · Abdeckung dieser Testfamilie: 50 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 0,89 % · Abdeckung dieser Testfamilie: 100 %
Gewicht der Familie im festen Testpanel (informativ): 0,89 % · Abdeckung dieser Testfamilie: 100 %
Gewicht der Familie im festen Testpanel (informativ): 2,68 % · Abdeckung dieser Testfamilie: 50 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 0,71 % · Abdeckung dieser Testfamilie: 100 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 2,08 % · Abdeckung dieser Testfamilie: 100 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 2,14 % · Abdeckung dieser Testfamilie: 100 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 2,78 % · Abdeckung dieser Testfamilie: 100 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 2,14 % · Abdeckung dieser Testfamilie: 100 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 3,57 % · Abdeckung dieser Testfamilie: 100 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Gewicht der Familie im festen Testpanel (informativ): 1,19 % · Abdeckung dieser Testfamilie: 100 %
Veröffentlichte Konfigurationen unterscheiden sich in dieser Kohorte.
Jeder Auswerter misst andere Fähigkeiten unter eigenen Bedingungen. Testreihen, Gesamtindizes und ihre Komponenten bleiben getrennt. Die Ergebnisse darunter behalten ihre Skalen, Konfigurationen und Quelldaten.
| Auswerter | Testreihen | Gesamtindizes | Erfasste aktive Messwerte |
|---|---|---|---|
| Artificial Analysis | 2 | 0 | 3 |
| Vals AI | 10 | 0 | 55 |
| Princeton HAL | 2 | 0 | 12 |
Die Abdeckung ist keine Qualitätsrangliste. Überschneidende Tests und mehrere Einstellungen zählen nicht als unabhängige Versuche. Herstellerangaben, historische und strittige Ergebnisse bleiben außerhalb dieser Übersicht und sind in den Detailbelegen gekennzeichnet.
Seite 1 von 9
Zuverlässigkeitsauswertung auf 165 GAIA-Aufgaben mit Wiederholungen und Perturbationen. Trefferquote, Zuverlässigkeit, Konsistenz, Vorhersagbarkeit, Robustheit und Sicherheit sind getrennte Kennzahlen.
| Teilaufgabe | o1 (Dieses Modell) | Claude Opus 4.5 | Claude Opus 4.7 | Gemini 3.1 Pro Preview | Gemini 3.5 Flash | GPT-4o mini | Gemini 2.5 Pro | Gemini 2.5 Flash | GPT-5.5 |
|---|---|---|---|---|---|---|---|---|---|
| Consistency | 0,68 | 0,81 (bester Wert dieser Zeile) | 0,81 (bester Wert dieser Zeile) | 0,76 | 0,75 | 0,73 | 0,72 | 0,7 | 0,61 |
| Predictability | 0,68 | 0,84 (bester Wert dieser Zeile) | 0,73 | 0,78 | 0,8 | 0,58 | 0,71 | 0,64 | 0,8 |
| Reliability | 0,79 | 0,85 (bester Wert dieser Zeile) | 0,84 | 0,82 | 0,84 | 0,76 | 0,78 | 0,74 | 0,79 |
| Robustness | 1 (bester Wert dieser Zeile) | 0,91 | 0,99 | 0,94 | 0,96 | 0,97 | 0,91 | 0,87 | 0,95 |
| Safety | 1 (bester Wert dieser Zeile) | 1 (bester Wert dieser Zeile) | 1 (bester Wert dieser Zeile) | 1 (bester Wert dieser Zeile) | 1 (bester Wert dieser Zeile) | 1 (bester Wert dieser Zeile) | 1 (bester Wert dieser Zeile) | 1 (bester Wert dieser Zeile) | 1 (bester Wert dieser Zeile) |
Einheit: Bewertunghöhere Werte sind besserStand 6. August 2026Quelle: Princeton HALBalken je Zeile skaliert, nicht über Zeilen hinweg
Accuracy
Zuverlässigkeitsauswertung auf 165 GAIA-Aufgaben mit Wiederholungen und Perturbationen. Trefferquote, Zuverlässigkeit, Konsistenz, Vorhersagbarkeit, Robustheit und Sicherheit sind getrennte Kennzahlen.
höhere Werte sind besserStand 6. August 2026Skala: 0 % - 100 %
26 bereinigte Kundenservice-Aufgaben mit Dialogen, Richtlinien und mutierenden Backend-Werkzeugen. Der bereinigte Ausschnitt entfernt 24 fehlerhafte oder mehrdeutige Aufgaben. Trefferquote und Zuverlässigkeitsdimensionen messen verschiedene Eigenschaften.
| Teilaufgabe | o1 (Dieses Modell) | Claude Opus 4.7 | Claude Opus 4.5 | GPT-5.5 | Gemini 3.1 Pro Preview | Gemini 3.5 Flash | Gemini 2.5 Flash | Gemini 2.5 Pro | GPT-4o mini |
|---|---|---|---|---|---|---|---|---|---|
| Consistency | 0,71 | 0,88 (bester Wert dieser Zeile) | 0,84 | 0,84 | 0,81 | 0,78 | 0,75 | 0,74 | 0,74 |
| Predictability | 0,74 | 0,87 (bester Wert dieser Zeile) | 0,85 | 0,84 | 0,83 | 0,82 | 0,6 | 0,78 | 0,35 |
| Reliability | 0,81 | 0,89 (bester Wert dieser Zeile) | 0,88 | 0,89 (bester Wert dieser Zeile) | 0,86 | 0,86 | 0,72 | 0,81 | 0,67 |
| Robustness | 0,98 (bester Wert dieser Zeile) | 0,91 | 0,97 | 0,97 | 0,94 | 0,97 | 0,82 | 0,93 | 0,93 |
| Safety | 0,91 | 0,94 | 0,98 | 0,96 | 0,97 | 0,99 (bester Wert dieser Zeile) | 0,9 | 0,92 | 0,85 |
Einheit: Bewertunghöhere Werte sind besserStand 5. August 2026Quelle: Princeton HALBalken je Zeile skaliert, nicht über Zeilen hinweg
Accuracy
26 bereinigte Kundenservice-Aufgaben mit Dialogen, Richtlinien und mutierenden Backend-Werkzeugen. Der bereinigte Ausschnitt entfernt 24 fehlerhafte oder mehrdeutige Aufgaben. Trefferquote und Zuverlässigkeitsdimensionen messen verschiedene Eigenschaften.
höhere Werte sind besserStand 5. August 2026Skala: 0 % - 100 %
Seite 1 von 9
Ein SVG-Prompt, feste Ausgabeparameter. Aufnahmen erscheinen nur bei gemeldeten 0 Reasoning-Tokens oder dokumentiert fehlender Reasoning-Steuerung. Gleiche Testbedingungen machen die interne Rechenleistung der Modelle nicht identisch.
In dieser Runde nicht verfügbar
Community-Klassiker für eine freie SVG-Zeichnung.
o1

Reasoning (angefragt): high
Visuell geprüft. Aus diesem Einzeltest ergibt sich kein Gesamturteil über das Modell.
Generate an SVG of a pelican riding a bicycle
Tokenlimit inklusive Reasoning: 8.192 Token
Ursprung der Aufgabe (Simon Willison)24,9 / 100
| Angabe | Wert und Quelle |
|---|---|
| Gewichte | ProprietärQuelle nicht angegeben |
| Kontextfenster | 200.000 TokenQuelle |
| Knowledge Cutoff | 1. Oktober 2023Quelle |
| Hinweise | Reasoning-Modell, Parameterzahl nicht veröffentlichtQuelle nicht angegeben |
| API-Modellkennung | o1Quelle |
| Maximale Ausgabe | 100.000 TokenQuelle |
| Wissensstand | 2023-10-01Quelle |
| Eingabe | Text, BildQuelle |
| Ausgabe | TextQuelle |
| Reasoning-Modus | highQuelle |
| API-Schnittstellen | Responses API, Chat Completions APIQuelle |
| Werkzeugaufrufe | JaQuelle |
| Strukturierte Ausgabe | JaQuelle |
OpenAI presents o3, released April 16, 2025, as the successor generation to o1, its prior full-size reasoning model (OpenAI skipped the name "o2" for trademark reasons).
OpenAI o3 and o4-mini system card / announcement (2026-09-19)| Art | Nachweis und Datenstand |
|---|---|
| Eingabe | Dokumentierte Modalitäten. Abgerufen am 8. September 2026. |
| Ausgabe | Dokumentierte Modalitäten. Abgerufen am 8. September 2026. |
| Recherchestand | Recherchestand 8. September 2026. 3 Quellen-URLs geprüft. Das dokumentiert die geprüften Quellen, nicht sämtliche Veröffentlichungen zu diesem Modell. |
| In den geprüften Quellen nicht gefunden | parameters-billions Originalwortlaut OpenAI API and release pages do not publish parameter counts. |
| In den geprüften Quellen nicht gefunden | independent-benchmarks Originalwortlaut Only exact OpenAI appendix columns were used in this artifact. |
| Ungeklärt | release-date Originalwortlaut The o1 family launched in September 2024, while the stable API snapshot was released in December 2024; this record does not choose between those distinct dates. |
| In den geprüften Quellen nicht gefunden | AA benchmark rows Originalwortlaut No exact-model row in the selected public JSON-LD datasets (some pages only expose N/A or unknown metric summaries). |
| Weitere Quelle | Kontextfenster-Daten · Introducing OpenAI o1 · Redaktionelle Beschreibung geprüft am 4. Oktober 2026 |
| Weitere Quelle | Artificial Analysis (abgerufen 19. Oktober 2026) |
| Weitere Quelle | Artificial Analysis (abgerufen 19. Oktober 2026) |
| Weitere Quelle | Princeton HAL (abgerufen 6. August 2026) |
| Weitere Quelle | Princeton HAL (abgerufen 5. August 2026) |
| Weitere Quelle | LongBench (abgerufen 2. September 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | Vals AI (abgerufen 15. Oktober 2026) |
| Weitere Quelle | OpenAI (abgerufen 8. September 2026) |
| Weitere Quelle | Learning to reason with LLMs · Redaktionelle Beschreibung geprüft am 4. Oktober 2026 |
| Weitere Quelle | OpenRouter: Beliebtheitsindex (abgeleitet), CC BY 4.0 |
| Weitere Quelle | Vercel AI Gateway: Beliebtheitsindex (abgeleitet), CC BY 4.0 |
| Weitere Quelle | Ollama: kumulierte Downloads für den Beliebtheitsindex |
| Weitere Quelle | Replicate: kumulierte Ausführungen für den Beliebtheitsindex |
| Weitere Quelle | Google Trending Now: begrenzte Feed-Auswahl für Deutschland und USA |
| Weitere Quelle | Creative Commons Attribution 4.0 |
| Weitere Quelle | OpenAI o3 and o4-mini system card / announcement (2026-09-19) |