Slovník výrazov AI/Hodnotenie a metriky

Hodnotenie a metriky

priemerná precíznosť

Anglický výraz average precision

pokročiléheslo č. 10265 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená priemerná precíznosť?

Priemerná precíznosť sumarizuje krivku precíznosť-záchyt ako vážený priemer precíznosti, kde váhami sú prírastky záchytu medzi prahmi. Hodnota závisí od poradia skóre a prevalencie pozitívnej triedy.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Pri detekcii chýb tím porovná average precision modelov na rovnakom datasete a doplní precíznosť pri pevnom počte alarmov. Tak odlíši globálne poradie od konkrétnej prevádzkovej voľby.

Overiteľnosť

Odborné zdroje

  1. scikit-learn - Metrics and scoring: quantifying prediction qualityscikit-learn.org
  2. Everingham et al. - The PASCAL Visual Object Classes Challengedoi.org

Praktické odpovede

Často kladené otázky

Čo presne znamená priemerná precíznosť?

Priemerná precíznosť sumarizuje krivku precíznosť-záchyt ako vážený priemer precíznosti, kde váhami sú prírastky záchytu medzi prahmi.

Kedy sa priemerná precíznosť používa?

Pri detekcii chýb tím porovná average precision modelov na rovnakom datasete a doplní precíznosť pri pevnom počte alarmov.

Od čoho treba priemerná precíznosť odlíšiť?

Average precision nie je obyčajný priemer precíznosti cez ľubovoľné prahy ani vždy totožný s geometrickou plochou pod interpolovanou PR krivkou.

Ako sa priemerná precíznosť kontroluje?

Skontroluje sa definícia implementácie, poradie príkladov s rovnakým skóre, priemerovanie tried a bootstrap interval.

Aké obmedzenie má priemerná precíznosť?

Skóre môže rásť lepším zoradením, hoci kalibrácia pravdepodobností alebo výkon v dôležitom úseku zostane slabý.