Slovník výrazov AI/Hodnotenie a metriky

Hodnotenie a metriky

plocha pod krivkou ROC

Anglický výraz area under ROC curve

pokročiléheslo č. 10245 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená plocha pod krivkou ROC?

Plocha pod krivkou ROC sumarizuje diskrimináciu modelu naprieč všetkými prahmi. Možno ju interpretovať ako pravdepodobnosť, že náhodne vybraný pozitívny prípad dostane vyššie skóre než náhodne vybraný negatívny prípad.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Pri prioritizácii kontrol AUC ukáže, ako model zoraďuje prípady, ale tím zároveň vyhodnotí precíznosť v kapacitnom pásme prvých 500 zásahov a kalibráciu skóre.

Overiteľnosť

Odborné zdroje

  1. scikit-learn - Metrics and scoring: quantifying prediction qualityscikit-learn.org
  2. scikit-learn - Probability calibrationscikit-learn.org

Praktické odpovede

Často kladené otázky

Čo presne znamená plocha pod krivkou ROC?

Plocha pod krivkou ROC sumarizuje diskrimináciu modelu naprieč všetkými prahmi.

Kedy sa plocha pod krivkou ROC používa?

Pri prioritizácii kontrol AUC ukáže, ako model zoraďuje prípady, ale tím zároveň vyhodnotí precíznosť v kapacitnom pásme prvých 500 zásahov a kalibráciu skóre.

Od čoho treba plocha pod krivkou ROC odlíšiť?

AUC-ROC meria poradie, nie správnosť pravdepodobností ani výkon pri konkrétnom prahu.

Ako sa plocha pod krivkou ROC kontroluje?

Výpočet sa preverí na pároch tried, s intervalom neistoty, pri časovom delení a v prevádzkovo dôležitej oblasti ROC.

Aké obmedzenie má plocha pod krivkou ROC?

Dva modely s rovnakou AUC môžu mať odlišné krivky, kalibráciu aj výkon pri reálne použiteľnom prahu.