Slovník výrazov AI/Hodnotenie a metriky

Hodnotenie a metriky

vyvážená presnosť

Anglický výraz balanced accuracy

základnéheslo č. 10165 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená vyvážená presnosť?

Vyvážená presnosť je priemer záchytu vypočítaného osobitne pre každú triedu; v binárnom prípade ide o priemer citlivosti a špecificity. Každej triede dáva rovnakú váhu bez ohľadu na jej početnosť.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Pri diagnostike zriedkavej chyby tím porovná balanced accuracy modelov a zároveň uvedie oba triedne záchyty. Tak zabráni tomu, aby početná normálna trieda dominovala výsledku.

Overiteľnosť

Odborné zdroje

  1. scikit-learn - Metrics and scoring: quantifying prediction qualityscikit-learn.org
  2. Barocas, Hardt & Narayanan - Fairness and Machine Learningfairmlbook.org

Praktické odpovede

Často kladené otázky

Čo presne znamená vyvážená presnosť?

Vyvážená presnosť je priemer záchytu vypočítaného osobitne pre každú triedu; v binárnom prípade ide o priemer citlivosti a špecificity.

Kedy sa vyvážená presnosť používa?

Pri diagnostike zriedkavej chyby tím porovná balanced accuracy modelov a zároveň uvedie oba triedne záchyty.

Od čoho treba vyvážená presnosť odlíšiť?

Bežná presnosť váži triedy podľa počtu príkladov; vyvážená presnosť priemeruje triedne úspešnosti.

Ako sa vyvážená presnosť kontroluje?

Overí sa matica zámen, definícia tried, práca s chýbajúcou triedou, intervaly a výsledok pre každý segment.

Aké obmedzenie má vyvážená presnosť?

Rovnaká váha tried nemusí zodpovedať reálnym nákladom chýb ani budúcemu zastúpeniu populácie.