Slovník výrazov AI/Hodnotenie a metriky

Hodnotenie a metriky

skóre F1

Anglický výraz F1 score

pokročiléheslo č. 10215 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená skóre F1?

Skóre F1 je harmonický priemer precíznosti a záchytu: 2PR/(P+R). Vysokú hodnotu dosiahne iba vtedy, keď sú obe zložky vysoké; skutočne negatívne prípady do výpočtu nevstupujú.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Pri detekcii podvodov tím vyberá prah podľa F1 na validačných dátach, ale rozhodnutie preverí aj cez objem alarmov, náklady falošných rozhodnutí a výsledky v jednotlivých segmentoch.

Overiteľnosť

Odborné zdroje

  1. scikit-learn - Metrics and scoring: quantifying prediction qualityscikit-learn.org
  2. Barocas, Hardt & Narayanan - Fairness and Machine Learningfairmlbook.org

Praktické odpovede

Často kladené otázky

Čo presne znamená skóre F1?

Skóre F1 je harmonický priemer precíznosti a záchytu: 2PR/(P+R).

Kedy sa skóre F1 používa?

Pri detekcii podvodov tím vyberá prah podľa F1 na validačných dátach, ale rozhodnutie preverí aj cez objem alarmov, náklady falošných rozhodnutí a výsledky v jednotlivých segmentoch.

Od čoho treba skóre F1 odlíšiť?

Accuracy zahŕňa aj negatívne prípady; F1 sústreďuje hodnotenie na kompromis medzi pozitívnymi predikciami a nájdenými pozitívami.

Ako sa skóre F1 kontroluje?

Prepočíta sa z TP, FP a FN, overí sa prah, spôsob priemerovania pri viacerých triedach a interval neistoty.

Aké obmedzenie má skóre F1?

Rovnaké F1 môžu mať modely s veľmi odlišnou precíznosťou a záchytom, čo môže meniť prevádzkový dopad.