Späť na Benchmarky
Slovak ASR Benchmark
Toto je prvý špecializovaný benchmark rozpoznávania reči (STT) pre slovenčinu: 354 hodín nahrávok a 22 hodnotených modelov. Dostupné zdroje sa zameriavajú na angličtinu alebo na viacjazyčné datasety, kde slovenčina tvorí len zopár percent dát. Tento benchmark prináša priame porovnanie modelov na slovenských dátach naprieč rôznymi doménami.
- Úloha
- Automatické rozpoznávanie reči
- Metrika
- WER, CER, DSER
- Modalita
- Reč
- Aktualizované
- 26. júna 2026
Vysvetlenie metrík
- WER (Word Error Rate)
- Meria presnosť prepisu na úrovni slov. Je to počet chýb na úrovni slov (vloženia, vymazania a zámeny) vydelený počtom slov v referenčnom prepise. Nižšia hodnota je lepšia.
- CER (Character Error Rate)
- Meria presnosť prepisu na úrovni znakov. Je to počet chýb na úrovni znakov (vloženia, vymazania a zámeny) vydelený počtom znakov v referenčnom prepise. Je zhovievavejšia voči drobným rozdielom, ako sú koncovky slov, čo je užitočné pri jazyku s bohatým tvaroslovím, akým je slovenčina. Nižšia hodnota je lepšia.
- DSER (Digit Sequence Error Rate)
- Meria presnosť prepisu celých číselných sekvencií (telefónne čísla, čísla účtov, ceny). Je to počet nesprávne prepísaných číselných sekvencií vydelený počtom číselných sekvencií v referenčnom prepise. Sekvencia sa počíta ako chybná, ak je v nej nesprávna čo i len jedna číslica. Nižšia hodnota je lepšia.
Modely sú hodnotené výlučne na slovenských rečových dátach. Podrobné rozdelenie zdrojov dát nižšie.