Presná definícia
Čo znamená drift predikcií?
Drift predikcií je zmena rozdelenia modelových výstupov, napríklad skóre, tried alebo generovaných atribútov, medzi referenčným a aktuálnym obdobím. Je skorým signálom zmeny vstupov, pipeline alebo modelu, ale bez cieľov nehovorí, či sú nové predikcie horšie.
Skúsenosť a kontext
Ako sa pojem používa v praxi
Podiel žiadostí s vysokým rizikovým skóre náhle vzrastie. Tím rozloží zmenu podľa verzie modelu, regiónu a zdroja dát a preverí príznaky; obchodné rozhodnutia nemení iba podľa samotného posunu skóre.
Overiteľnosť
Odborné zdroje
Praktické odpovede
Často kladené otázky
Ako funguje drift predikcií?
Monitoring agreguje výstupy do distribúcií a porovnáva ich s baseline v rovnakých segmentoch a oknách.
Kedy má drift predikcií praktický význam?
Podiel žiadostí s vysokým rizikovým skóre náhle vzrastie.
S čím si pojem nezamieňať?
Prediction drift sleduje výstup modelu; data drift sleduje jeho vstupné premenné.
Ako sa výsledok kontroluje?
Kontroluje sa konzistentná verzia, objem, prahy, segmenty, sezónnosť, zmena vstupu a neskoršia väzba na výkon.
Na čo si dať pozor?
Zmena mixu legitímnych prípadov alebo nová politika prahu môže posunúť výstupy bez zhoršenia modelu.