Presná definícia
Čo znamená presná zhoda?
Presná zhoda je binárna metrika, ktorá priradí úspech iba vtedy, keď sa predikcia po vopred definovanej normalizácii presne rovná referencii. Je prísna a ľahko reprodukovateľná, preto sa hodí pre krátke identifikátory či jednoznačné odpovede.
Skúsenosť a kontext
Ako sa pojem používa v praxi
Pri otázkach s názvom mesta systém odstráni nadbytočné medzery a zjednotí veľkosť písmen, ale nemení diakritiku bez dohody. Tím hlási, koľko chýb tvorili len povolené varianty zápisu.
Overiteľnosť
Odborné zdroje
Praktické odpovede
Často kladené otázky
Čo presne znamená presná zhoda?
Presná zhoda je binárna metrika, ktorá priradí úspech iba vtedy, keď sa predikcia po vopred definovanej normalizácii presne rovná referencii.
Kedy sa presná zhoda používa?
Pri otázkach s názvom mesta systém odstráni nadbytočné medzery a zjednotí veľkosť písmen, ale nemení diakritiku bez dohody.
Od čoho treba presná zhoda odlíšiť?
Sémantická podobnosť pripúšťa významovo blízke formulácie; presná zhoda posudzuje totožnosť normalizovaného reťazca.
Ako sa presná zhoda kontroluje?
Testujú sa pravidlá normalizácie na skratkách, diakritike, jednotkách, poradí položiek a viacerých platných referenciách.
Aké obmedzenie má presná zhoda?
Metrika môže trestať správnu parafrázu alebo prijať rovnaký text bez overenia jeho faktickej správnosti.