Slovník výrazov AI/Hodnotenie a metriky

Hodnotenie a metriky

logaritmická strata

Anglický výraz log loss

pokročiléheslo č. 10275 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená logaritmická strata?

Logaritmická strata je priemer zápornej logaritmickej pravdepodobnosti priradenej skutočnej triede. Silno trestá sebavedomé nesprávne predikcie a hodnotí celé pravdepodobnostné rozdelenie, nie iba víťaznú triedu.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Poisťovňa porovná modely podľa log loss na budúcom období. Príklady s najväčším príspevkom analyzuje osobitne a kontroluje, či extrémne pravdepodobnosti vznikli zle kalibrovaným segmentom.

Overiteľnosť

Odborné zdroje

  1. scikit-learn - Metrics and scoring: quantifying prediction qualityscikit-learn.org
  2. scikit-learn - Probability calibrationscikit-learn.org

Praktické odpovede

Často kladené otázky

Čo presne znamená logaritmická strata?

Logaritmická strata je priemer zápornej logaritmickej pravdepodobnosti priradenej skutočnej triede.

Kedy sa logaritmická strata používa?

Poisťovňa porovná modely podľa log loss na budúcom období.

Od čoho treba logaritmická strata odlíšiť?

Accuracy používa konečnú triedu; log loss rozlišuje, či správnej triede model pridelil 0,51 alebo 0,99.

Ako sa logaritmická strata kontroluje?

Overí sa poradie tried, normalizácia pravdepodobností, orezávanie nulových hodnôt, váhy a výpočet po jednotlivých príkladoch.

Aké obmedzenie má logaritmická strata?

Niekoľko extrémne sebavedomých chýb môže dominovať priemeru a numerické orezanie môže meniť hlásenú hodnotu.