Reč a zvuk

prehodnotenie jazykovým modelom

Anglický výraz language model rescoring

pokročiléheslo č. 7795 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená prehodnotenie jazykovým modelom?

Prehodnotenie jazykovým modelom znovu zoradí n-best hypotézy alebo lattice z ASR pomocou presnejšieho modelu pravdepodobnosti textu. Nemení akustický signál a nemôže obnoviť slovo, ktoré v kandidátoch chýba. Výsledok kombinuje jazykové a akustické skóre s kalibrovanými váhami.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Diktovací systém prehodnotí 50 kandidátnych viet modelom prispôsobeným odbornej terminológii. Pôvodné akustické skóre sa zachová a váha sa ladí iba na validačných dátach. Test osobitne sleduje mená a čísla, aby plynulosť neprepísala zvukový dôkaz.

Overiteľnosť

Odborné zdroje

  1. Learning to Rescore Sentence Hypotheses with LSTMsarxiv.org
  2. Jurafsky and Martin - Speech and Language Processingweb.stanford.edu

Praktické odpovede

Často kladené otázky

Ako funguje prehodnotenie jazykovým modelom?

Jazykový model priradí každej kandidátnej sekvencii log-skóre a interpolácia s akustickým a prípadným lexikálnym skóre určí nové poradie.

Kedy má prehodnotenie jazykovým modelom praktický význam?

Diktovací systém prehodnotí 50 kandidátnych viet modelom prispôsobeným odbornej terminológii.

S čím si pojem nezamieňať?

Prvé dekódovanie vytvára kandidátov pod prísnym časom; rescoring nad obmedzeným zoznamom používa silnejší model neskôr.

Ako sa výsledok kontroluje?

Porovnáva sa WER a oracle WER n-best zoznamu, zmeny entít, kalibrácia váh, latencia a prípady regresie.

Na čo si dať pozor?

Silný LM môže preferovať bežnú, ale akusticky nesprávnu vetu a pri slabej diverzite n-best nemá čo opraviť.