- Originalwert
- 16,54
- Messgröße
- Diarization error rate (DER), reference-speaker-time weighted with 0.25 s collar, Arabic
- Einheit
- %
- Benchmark-Version
- Soniqo diarization page captured 2026-10-17T22:03:26Z; test version and run date not stated
- Kategorie
- audio
- Richtung
- Weniger ist besser
- Stichprobe
- 12
- Quellentyp
- vendor-reported
- Auswertung
- Soniqo Nemotron 3 speaker diarization benchmark
- Status
- active
- Abrufdatum
- 2026-10-18
- Methodik
- Vom Anbieter veröffentlichter Wert. Soniqo Nemotron 3 INT8-Export mit MLX-Backend, exakte Tabellensprache Arabisch, 12 ausgewertete Dateien in dieser Sprache. Der vollständige interne Satz umfasst 132 Aufnahmen in acht Sprachen und 12,82 Stunden, ohne fehlgeschlagene Dateien. sampleCount übernimmt hier die zellbezogene Spalte Files für diese Sprache, nicht Sprecherwechsel oder Dauer. Es wird keine Referenzsprecherzahl übergeben; automatische Sprecherzählung und die Paket-Standardnachverarbeitung sind aktiv. DER wird je Aufnahme anhand der Referenzsprecherzeit einschließlich Überlappung gepoolt, mit 0,25 Sekunden Collar. Die Quelle ordnet diese Sprache der Stufe echter Gespräche zu, mit Rundfunk-, Telefon- und Meeting-Audio.
- Einordnung
- Soniqo veröffentlicht und betreibt diesen Benchmark für die eigenen ausgelieferten Apple-Silicon-Laufzeiten. Die Ergebnisse sind daher Anbieterangaben und keine neutrale unabhängige Reproduktion. Die Seite nennt als Basis den finalen NVIDIA-Nemotron-3-Diarization-Checkpoint, gibt aber weder eine unveränderliche Checkpoint-Revision noch einen Hash des konvertierten Exports, Apple-Chip, Betriebssystem, Runtime-Version oder Benchmark-Laufdatum an. Die Beobachtungen gelten nur für den jeweils genannten Soniqo-INT8-Export mit MLX oder CoreML und der Paket-Standardnachverarbeitung, nicht für die unquantisierte NVIDIA-Modellleistung. Ein Konfidenzintervall wird nicht angegeben. Soniqo trennt ausdrücklich echte Gesprächsaufnahmen von synthetischen Schienen und warnt davor, die Ergebnisse über diese Stufen hinweg zu vergleichen.