Presná definícia
Čo znamená skóre ROUGE?
ROUGE je rodina metrík pre automatické hodnotenie sumarizácie založená na prekrytí jednotiek medzi výstupom a referenciou. ROUGE-N používa n-gramy a ROUGE-L najdlhšiu spoločnú podsekvenciu; výsledok treba uviesť s konkrétnym variantom a nastavením.
Skúsenosť a kontext
Ako sa pojem používa v praxi
Redakčný tím porovná súhrny cez ROUGE-1, ROUGE-2 a ROUGE-L pri pevnej normalizácii. Následne ručne preverí faktickosť a pokrytie dôležitých tvrdení, ktoré samotný lexikálny prekryv nepozná.
Overiteľnosť
Odborné zdroje
Praktické odpovede
Často kladené otázky
Čo presne znamená skóre ROUGE?
ROUGE je rodina metrík pre automatické hodnotenie sumarizácie založená na prekrytí jednotiek medzi výstupom a referenciou.
Kedy sa skóre ROUGE používa?
Redakčný tím porovná súhrny cez ROUGE-1, ROUGE-2 a ROUGE-L pri pevnej normalizácii.
Od čoho treba skóre ROUGE odlíšiť?
ROUGE tradične zvýrazňuje pokrytie referencie; BLEU vzniklo s dôrazom na n-gramovú precíznosť pre preklad.
Ako sa skóre ROUGE kontroluje?
Kontroluje sa stemovanie, tokenizácia, stopslová, počet referencií, variant F/recall a bootstrap intervaly.
Aké obmedzenie má skóre ROUGE?
Model môže kopírovať veľa slov z referencie, no priradiť ich k nesprávnym vzťahom alebo pridať nepodložené tvrdenie.