Koa
Salesforce
- Veröffentlicht
- -
- Datenstand
- 7. Oktober 2026
- Eingabe
- CRM-Aufgaben und synthetische Workflow-Szenarien; Eingabeformat nicht spezifiziert
- Ausgabe
- Schrittweise CRM-Aktionen und Toolaufrufe; Ausgabeformat nicht spezifiziert
Koa ist Salesforces erstes Reasoning-Modell für CRM-Aufgaben. Salesforce hat NVIDIA Nemotron 3 Super mit synthetischen Abläufen aus Vertrieb, Service und weiteren Geschäftsbereichen nachtrainiert. Koa soll mehrstufige Prozesse planen und die passenden Werkzeuge für Aktionen auswählen.
Der Zugang ist auf ausgewählte Agentforce-Pilotkunden begrenzt. Die allgemeine Verfügbarkeit in US-Regionen kündigt Salesforce für Winter 2026 an.
Technische Daten und Zugang
| Angabe | Wert und Quelle |
|---|---|
| Modellklasse | CRM-Reasoning-Modell für mehrstufige Geschäftsabläufe und den Einsatz von WerkzeugenQuelle |
| Eingabemodalitäten | CRM-Aufgaben und synthetische Workflow-Szenarien; Eingabeformat nicht spezifiziertQuelle |
| Ausgabemodalitäten | Schrittweise CRM-Aktionen und Toolaufrufe; Ausgabeformat nicht spezifiziertQuelle |
| Basismodell | Post-Training von NVIDIA Nemotron 3 Super mit synthetischen CRM-SzenarienQuelle |
| Verfügbarkeit | Nur für ausgewählte Agentforce-Pilotkunden; allgemeine Verfügbarkeit in US-Regionen ist für Winter 2026 angekündigtQuelle |
Seite 1 von 3
Messungen ohne passende Vergleichswerte
Für diese Messungen fehlen passende Vergleichswerte unter gleichen Testbedingungen. Die Originalwerte und Quellen bleiben hier nachlesbar.
Tau2Bench · Airline (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 62
- Bewertung
- 62
- Messgröße
- pass@1, four-trial mean
- Einheit
- %
- Benchmark-Version
- Salesforce Koa technical report Table 1
- Kategorie
- agentic-and-enterprise
- Richtung
- Mehr ist besser
- Stichprobe
- 50
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Salesforce Koa ist der RL-trainierte Checkpoint (so im Bericht ausdrücklich benannt). Alle Checkpoints werden in BF16 ausgewertet. Tau2Bench nutzt GPT-4.1 als Nutzersimulator und mittelt pass@1 über vier Durchläufe; die Aufgabenzahlen sind Airline 50, Retail 114 und Telecom 114.
Tau2Bench · Retail (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 81.6
- Bewertung
- 81.6
- Messgröße
- pass@1, four-trial mean
- Einheit
- %
- Benchmark-Version
- Salesforce Koa technical report Table 1
- Kategorie
- agentic-and-enterprise
- Richtung
- Mehr ist besser
- Stichprobe
- 114
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Salesforce Koa ist der RL-trainierte Checkpoint (so im Bericht ausdrücklich benannt). Alle Checkpoints werden in BF16 ausgewertet. Tau2Bench nutzt GPT-4.1 als Nutzersimulator und mittelt pass@1 über vier Durchläufe; die Aufgabenzahlen sind Airline 50, Retail 114 und Telecom 114.
Tau2Bench · Telecom (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 60.5
- Bewertung
- 60.5
- Messgröße
- pass@1, four-trial mean
- Einheit
- %
- Benchmark-Version
- Salesforce Koa technical report Table 1
- Kategorie
- agentic-and-enterprise
- Richtung
- Mehr ist besser
- Stichprobe
- 114
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Salesforce Koa ist der RL-trainierte Checkpoint (so im Bericht ausdrücklich benannt). Alle Checkpoints werden in BF16 ausgewertet. Tau2Bench nutzt GPT-4.1 als Nutzersimulator und mittelt pass@1 über vier Durchläufe; die Aufgabenzahlen sind Airline 50, Retail 114 und Telecom 114.
Tau2Bench · task-weighted average (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 69.41
- Bewertung
- 69.41
- Messgröße
- task-weighted mean of pass@1, four-trial mean
- Einheit
- %
- Benchmark-Version
- Salesforce Koa technical report Table 1
- Kategorie
- agentic-and-enterprise
- Richtung
- Mehr ist besser
- Stichprobe
- 278
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Salesforce Koa ist der RL-trainierte Checkpoint (so im Bericht ausdrücklich benannt). Alle Checkpoints werden in BF16 ausgewertet. Tau2Bench nutzt GPT-4.1 als Nutzersimulator und mittelt pass@1 über vier Durchläufe; die Aufgabenzahlen sind Airline 50, Retail 114 und Telecom 114.
BFCL · overall accuracy (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 66.63
- Bewertung
- 66.63
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- Salesforce Koa technical report Table 1
- Kategorie
- agentic-and-enterprise
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Salesforce Koa ist der RL-trainierte Checkpoint (so im Bericht ausdrücklich benannt). Alle Checkpoints werden in BF16 ausgewertet. Tau2Bench nutzt GPT-4.1 als Nutzersimulator und mittelt pass@1 über vier Durchläufe; die Aufgabenzahlen sind Airline 50, Retail 114 und Telecom 114.
BFCL · Non-Live AST · Average (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 84.85
- Bewertung
- 84.85
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- BFCL Table 3, Salesforce Koa RL-only
- Kategorie
- BFCL-subtask
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Anhang H, Tabelle 3, exakte Spalte Salesforce Koa RL-only für Non-Live AST / Average; alle Werte sind Prozentangaben und alle Checkpoints werden in BF16 ausgewertet. Dies ist der RL-trainierte Checkpoint; Werte für SFT-only und die Nemotron-Basis sind ausgeschlossen.
BFCL · Non-Live AST · Simple (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 69.92
- Bewertung
- 69.92
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- BFCL Table 3, Salesforce Koa RL-only
- Kategorie
- BFCL-subtask
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Anhang H, Tabelle 3, exakte Spalte Salesforce Koa RL-only für Non-Live AST / Simple; alle Werte sind Prozentangaben und alle Checkpoints werden in BF16 ausgewertet. Dies ist der RL-trainierte Checkpoint; Werte für SFT-only und die Nemotron-Basis sind ausgeschlossen.
BFCL · Non-Live AST · Multiple (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 94
- Bewertung
- 94
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- BFCL Table 3, Salesforce Koa RL-only
- Kategorie
- BFCL-subtask
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Anhang H, Tabelle 3, exakte Spalte Salesforce Koa RL-only für Non-Live AST / Multiple; alle Werte sind Prozentangaben und alle Checkpoints werden in BF16 ausgewertet. Dies ist der RL-trainierte Checkpoint; Werte für SFT-only und die Nemotron-Basis sind ausgeschlossen.
BFCL · Non-Live AST · Parallel (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 87.5
- Bewertung
- 87.5
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- BFCL Table 3, Salesforce Koa RL-only
- Kategorie
- BFCL-subtask
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Anhang H, Tabelle 3, exakte Spalte Salesforce Koa RL-only für Non-Live AST / Parallel; alle Werte sind Prozentangaben und alle Checkpoints werden in BF16 ausgewertet. Dies ist der RL-trainierte Checkpoint; Werte für SFT-only und die Nemotron-Basis sind ausgeschlossen.
BFCL · Non-Live AST · Parallel Multiple (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 88
- Bewertung
- 88
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- BFCL Table 3, Salesforce Koa RL-only
- Kategorie
- BFCL-subtask
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Anhang H, Tabelle 3, exakte Spalte Salesforce Koa RL-only für Non-Live AST / Parallel Multiple; alle Werte sind Prozentangaben und alle Checkpoints werden in BF16 ausgewertet. Dies ist der RL-trainierte Checkpoint; Werte für SFT-only und die Nemotron-Basis sind ausgeschlossen.
BFCL · Live AST · Average (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 80.16
- Bewertung
- 80.16
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- BFCL Table 3, Salesforce Koa RL-only
- Kategorie
- BFCL-subtask
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Anhang H, Tabelle 3, exakte Spalte Salesforce Koa RL-only für Live AST / Average; alle Werte sind Prozentangaben und alle Checkpoints werden in BF16 ausgewertet. Dies ist der RL-trainierte Checkpoint; Werte für SFT-only und die Nemotron-Basis sind ausgeschlossen.
BFCL · Live AST · Simple (Messwert, Testbedingungen und Quelle anzeigen)
- Originalwert
- 86.43
- Bewertung
- 86.43
- Messgröße
- accuracy
- Einheit
- %
- Benchmark-Version
- BFCL Table 3, Salesforce Koa RL-only
- Kategorie
- BFCL-subtask
- Richtung
- Mehr ist besser
- Quellentyp
- vendor-reported
- Auswertung
- Salesforce Koa technical report
- Status
- active
- Abrufdatum
- 2026-10-07
- Methodik
- Vom Anbieter veröffentlichter Wert. Anhang H, Tabelle 3, exakte Spalte Salesforce Koa RL-only für Live AST / Simple; alle Werte sind Prozentangaben und alle Checkpoints werden in BF16 ausgewertet. Dies ist der RL-trainierte Checkpoint; Werte für SFT-only und die Nemotron-Basis sind ausgeschlossen.
Seite 1 von 3
Quellen und Datenstand
| Art | Nachweis und Datenstand |
|---|---|
| Eingabe | Dokumentierte Modalitäten. Abgerufen am 7. Oktober 2026. |
| Ausgabe | Dokumentierte Modalitäten. Abgerufen am 7. Oktober 2026. |
| Recherchestand | Recherchestand 7. Oktober 2026. 1 Quellen-URLs geprüft. Das dokumentiert die geprüften Quellen, nicht sämtliche Veröffentlichungen zu diesem Modell. |
| Nicht veröffentlicht | demo-benchmark-scores Originalwortlaut Der Koa-Bericht von Salesforce nennt Benchmarkwerte für den RL-trainierten Koa-Checkpoint. Produktdemos ohne kontrollierten Datensatz, Bewertungsmethode und numerisches Ergebnis für den Checkpoint wurden nicht als zusätzliche Benchmarkbelege gewertet. |
| Weitere Quelle | Salesforce Koa technical report (abgerufen 7. Oktober 2026) |