Slovník výrazov AI/Hodnotenie a metriky

Hodnotenie a metriky

precíznosť

Anglický výraz precision

základnéheslo č. 10175 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená precíznosť?

Precíznosť je podiel skutočne pozitívnych prípadov medzi všetkými prípadmi, ktoré model označil ako pozitívne: TP/(TP+FP). Odpovedá na otázku, aká časť spustených pozitívnych rozhodnutí bola správna.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Pri alarme podvodu vysoká precíznosť znamená menej zbytočných preverovaní. Tím ju meria pri konkrétnom prahu spolu so záchytom a kapacitou analytikov, nie izolovane.

Overiteľnosť

Odborné zdroje

  1. scikit-learn - Metrics and scoring: quantifying prediction qualityscikit-learn.org
  2. Barocas, Hardt & Narayanan - Fairness and Machine Learningfairmlbook.org

Praktické odpovede

Často kladené otázky

Čo presne znamená precíznosť?

Precíznosť je podiel skutočne pozitívnych prípadov medzi všetkými prípadmi, ktoré model označil ako pozitívne: TP/(TP+FP).

Kedy sa precíznosť používa?

Pri alarme podvodu vysoká precíznosť znamená menej zbytočných preverovaní.

Od čoho treba precíznosť odlíšiť?

Záchyt sa pýta, koľko všetkých reálnych pozitívnych prípadov model našiel; precíznosť hodnotí čistotu pozitívnych predikcií.

Ako sa precíznosť kontroluje?

Z matice zámen sa preverí menovateľ, prah, interval neistoty, prevalencia a výsledky podľa segmentov.

Aké obmedzenie má precíznosť?

Precíznosť sa mení s prevalenciou a môže rásť znížením počtu alarmov za cenu vynechaných prípadov.