Slovník výrazov AI/Hodnotenie a metriky

Hodnotenie a metriky

krivka ROC

Anglický výraz ROC curve

pokročiléheslo č. 10235 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená krivka ROC?

Krivka ROC zobrazuje mieru skutočne pozitívnych prípadov proti miere falošne pozitívnych prípadov pri postupnej zmene klasifikačného prahu. Ukazuje diskriminačnú schopnosť naprieč prahmi, nie kvalitu jedného prevádzkového rozhodnutia.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Tím vykreslí ROC pre dva modely a označí body, ktoré zodpovedajú dostupnej kapacite preverovania. Prah vyberie podľa nákladov chýb, nie podľa vizuálne najvyššieho miesta krivky.

Overiteľnosť

Odborné zdroje

  1. scikit-learn - Metrics and scoring: quantifying prediction qualityscikit-learn.org
  2. NIST/SEMATECH - Statistical significanceitl.nist.gov

Praktické odpovede

Často kladené otázky

Čo presne znamená krivka ROC?

Krivka ROC zobrazuje mieru skutočne pozitívnych prípadov proti miere falošne pozitívnych prípadov pri postupnej zmene klasifikačného prahu.

Kedy sa krivka ROC používa?

Tím vykreslí ROC pre dva modely a označí body, ktoré zodpovedajú dostupnej kapacite preverovania.

Od čoho treba krivka ROC odlíšiť?

Krivka precíznosť-záchyt používa precíznosť a záchyt; ROC používa záchyt a podiel falošných pozitív medzi negatívami.

Ako sa krivka ROC kontroluje?

Kontroluje sa smer skóre, všetky jedinečné prahy, triedy, váhy, segmenty a intervaly pre relevantnú časť krivky.

Aké obmedzenie má krivka ROC?

Pri veľmi zriedkavej pozitívnej triede môže ROC vyzerať priaznivo aj pri neprijateľnom počte falošných alarmov.