Zum Hauptinhalt springen

BasetenEntscheidungsmodellOffene Gewichte und API

Groundhog 1

Zusammenfassung

Groundhog 1 ist Basetens Mixture-of-Experts-Entscheidungsmodell für strukturierte Choice- und Score-Ausgaben. Es baut auf Gemma 4 26B A4B IT auf und verarbeitet Text oder Bilder. Von 26 Milliarden Parametern sind 4 Milliarden aktiv.

Alle Benchmark-Werte

Jeder veröffentlichte Messwert mit Quelle, Testbedingungen und Vergleichsmodellen.

Alle 6 veröffentlichten Benchmark-Werte anzeigen

Messungen ohne passende Vergleichswerte

Für diese Messungen fehlen passende Vergleichswerte unter gleichen Testbedingungen. Die Originalwerte und Quellen bleiben hier nachlesbar.

ClaimBench: Direct support (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
100
Messgröße
Genauigkeit
Einheit
%
Benchmark-Version
1
Kategorie
finance
Aufgabe
direct_support
Aufgabenbezeichnung
Direct support
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Vals AI
Status
active
Abrufdatum
2026-11-21
Methodik
Kennung des Quellmodells: decision/groundhog-1. Name des Quellmodells: Groundhog 1. Anbieter laut Quelle: Baseten. Evaluator: Vals AI. Datensatztyp: public. Stand der Rangliste: 2026-11-20. Maximale Ausgabetoken: 0. Latenz in Sekunden: 0.729. Standardfehler: 0. Kosten je Aufgabe in USD: 0.000175. Quellenkennung: vals-ai. Kennung der Evidenzaufnahme: vals-claimbench-2026-11-21-5dc3eba20db7. Prüfsumme der Quelldaten: 5dc3eba20db74e5214c71d077ff3785a5201c2ca4303917a1b122f03665d8562. Parserversion: vals-astro-v4. Importiert am: 2026-11-21. Quellenkohorte: vals-claimbench:1:direct_support
Quelle Vals AI
ClaimBench: Missing evidence (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
100
Messgröße
Genauigkeit
Einheit
%
Benchmark-Version
1
Kategorie
finance
Aufgabe
missing_evidence
Aufgabenbezeichnung
Missing evidence
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Vals AI
Status
active
Abrufdatum
2026-11-21
Methodik
Kennung des Quellmodells: decision/groundhog-1. Name des Quellmodells: Groundhog 1. Anbieter laut Quelle: Baseten. Evaluator: Vals AI. Datensatztyp: public. Stand der Rangliste: 2026-11-20. Maximale Ausgabetoken: 0. Latenz in Sekunden: 0.814. Standardfehler: 0. Kosten je Aufgabe in USD: 0.000185. Quellenkennung: vals-ai. Kennung der Evidenzaufnahme: vals-claimbench-2026-11-21-5dc3eba20db7. Prüfsumme der Quelldaten: 5dc3eba20db74e5214c71d077ff3785a5201c2ca4303917a1b122f03665d8562. Parserversion: vals-astro-v4. Importiert am: 2026-11-21. Quellenkohorte: vals-claimbench:1:missing_evidence
Quelle Vals AI
ClaimBench: Non-supporting citation (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
100
Messgröße
Genauigkeit
Einheit
%
Benchmark-Version
1
Kategorie
finance
Aufgabe
non_supporting_citation
Aufgabenbezeichnung
Non-supporting citation
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Vals AI
Status
active
Abrufdatum
2026-11-21
Methodik
Kennung des Quellmodells: decision/groundhog-1. Name des Quellmodells: Groundhog 1. Anbieter laut Quelle: Baseten. Evaluator: Vals AI. Datensatztyp: public. Stand der Rangliste: 2026-11-20. Maximale Ausgabetoken: 0. Latenz in Sekunden: 0.729. Standardfehler: 0. Kosten je Aufgabe in USD: 0.000184. Quellenkennung: vals-ai. Kennung der Evidenzaufnahme: vals-claimbench-2026-11-21-5dc3eba20db7. Prüfsumme der Quelldaten: 5dc3eba20db74e5214c71d077ff3785a5201c2ca4303917a1b122f03665d8562. Parserversion: vals-astro-v4. Importiert am: 2026-11-21. Quellenkohorte: vals-claimbench:1:non_supporting_citation
Quelle Vals AI
ClaimBench: Numeric discrepancy (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
100
Messgröße
Genauigkeit
Einheit
%
Benchmark-Version
1
Kategorie
finance
Aufgabe
numeric_discrepancy
Aufgabenbezeichnung
Numeric discrepancy
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Vals AI
Status
active
Abrufdatum
2026-11-21
Methodik
Kennung des Quellmodells: decision/groundhog-1. Name des Quellmodells: Groundhog 1. Anbieter laut Quelle: Baseten. Evaluator: Vals AI. Datensatztyp: public. Stand der Rangliste: 2026-11-20. Maximale Ausgabetoken: 0. Latenz in Sekunden: 0.746. Standardfehler: 0. Kosten je Aufgabe in USD: 0.000188. Quellenkennung: vals-ai. Kennung der Evidenzaufnahme: vals-claimbench-2026-11-21-5dc3eba20db7. Prüfsumme der Quelldaten: 5dc3eba20db74e5214c71d077ff3785a5201c2ca4303917a1b122f03665d8562. Parserversion: vals-astro-v4. Importiert am: 2026-11-21. Quellenkohorte: vals-claimbench:1:numeric_discrepancy
Quelle Vals AI
ClaimBench: Overall (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
99,031
Messgröße
Genauigkeit
Einheit
%
Benchmark-Version
1
Kategorie
finance
Aufgabe
overall
Aufgabenbezeichnung
Overall
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Vals AI
Status
active
Abrufdatum
2026-11-21
Methodik
Kennung des Quellmodells: decision/groundhog-1. Name des Quellmodells: Groundhog 1. Anbieter laut Quelle: Baseten. Evaluator: Vals AI. Datensatztyp: public. Stand der Rangliste: 2026-11-20. Maximale Ausgabetoken: 0. Latenz in Sekunden: 0.759. Standardfehler: 0.221. Kosten je Aufgabe in USD: 0.000181. Quellenkennung: vals-ai. Kennung der Evidenzaufnahme: vals-claimbench-2026-11-21-5dc3eba20db7. Prüfsumme der Quelldaten: 5dc3eba20db74e5214c71d077ff3785a5201c2ca4303917a1b122f03665d8562. Parserversion: vals-astro-v4. Importiert am: 2026-11-21. Quellenkohorte: vals-claimbench:1:overall
Quelle Vals AI
ClaimBench: Subtle contradiction (Messwert, Testbedingungen und Quelle anzeigen)
Originalwert
95,153
Messgröße
Genauigkeit
Einheit
%
Benchmark-Version
1
Kategorie
finance
Aufgabe
subtle_contradiction
Aufgabenbezeichnung
Subtle contradiction
Richtung
Mehr ist besser
Quellentyp
independent-evaluator
Auswertung
Vals AI
Status
active
Abrufdatum
2026-11-21
Methodik
Kennung des Quellmodells: decision/groundhog-1. Name des Quellmodells: Groundhog 1. Anbieter laut Quelle: Baseten. Evaluator: Vals AI. Datensatztyp: public. Stand der Rangliste: 2026-11-20. Maximale Ausgabetoken: 0. Latenz in Sekunden: 0.776. Standardfehler: 1.086. Kosten je Aufgabe in USD: 0.000175. Quellenkennung: vals-ai. Kennung der Evidenzaufnahme: vals-claimbench-2026-11-21-5dc3eba20db7. Prüfsumme der Quelldaten: 5dc3eba20db74e5214c71d077ff3785a5201c2ca4303917a1b122f03665d8562. Parserversion: vals-astro-v4. Importiert am: 2026-11-21. Quellenkohorte: vals-claimbench:1:subtle_contradiction
Quelle Vals AI

Alle technischen Daten

Architektur

Modellklasse
Strukturiertes Entscheidungsmodell für Choice- und Score-Ausgaben, kein freier Textgenerator.
Quelle: Modellklasse
Basismodell
Gemma 4 26B A4B IT
Quelle: Basismodell
Architektur
Mixture of Experts mit 26 Milliarden Gesamtparametern und 4 Milliarden aktiven Parametern.
Quelle: Architektur

Ein- und Ausgabe

Ein- und Ausgabe
Text und Bilder als Eingabe. Strukturierte Entscheidungswerte als Ausgabe.
Quelle: Ein- und Ausgabe
Kontextfenster
131.072 Token
Quelle: Kontextfenster

Wasserzeichen und Herkunft

KI-Wasserzeichen meint unsichtbare Signale in der Ausgabe. Sichtbare Zeichen und Herkunftsmetadaten sind getrennt aufgeführt. Unbekannt bedeutet, dass für die jeweilige Angabe kein ausreichender Beleg vorliegt.

KI-Wasserzeichen
Unbekannt
ohne Quelle
Wasserzeichen-Technik
Nicht bekannt
ohne Quelle

Lizenz und Zugang

Lizenz
Basetens Modelländerungen stehen unter MIT. Für die zugrunde liegenden Gemma-Gewichte gelten Googles Apache-2.0-Bedingungen.
Quelle: Lizenz
Abschaltung
Keine angekündigt
ohne Quelle

API

Baseten API-Kennung
decision-models/baseten-groundhog-latest
Quelle: Baseten API-Kennung

Weitere Angaben

Checkpoint
baselabs/groundhog-1 (BF16)
Quelle: Checkpoint

Preise

Baseten API-Preis
0,035 $ je 1 Mio. TokenQuelle

Quellen und Datenstand

Benchmarkquellen im Überblick

Welche unabhängigen Auswerter dieses Modell getestet haben. Das ist Abdeckung, keine Qualitätsrangliste.

AuswerterTestreihenGesamtindizesErfasste aktive Messwerte
Vals AI106

Ohne Herstellerangaben sowie historische oder strittige Ergebnisse; diese stehen gekennzeichnet bei den Einzelwerten.