Presná definícia
Čo znamená testovacie dáta?
Testovacie dáta sú vopred oddelená sada určená na nestranný odhad výkonu už uzavretého modelu a postupu. Nesmú ovplyvniť tréning, predspracovanie, výber prahu ani architektúry; po opakovanom ladení podľa testu prestávajú byť nezávislým testom.
Skúsenosť a kontext
Ako sa pojem používa v praxi
Pred nasadením úverového modelu sa testovacie obdobie odomkne až po zmrazení kódu a prahu. Výsledky sa uvedú podľa segmentov a s intervalmi neistoty; ďalšie ladenie vyžaduje novú nedotknutú sadu.
Overiteľnosť
Odborné zdroje
Praktické odpovede
Často kladené otázky
Ako funguje testovacie dáta?
Zmrazený pipeline vytvorí predikcie pre nevidené položky a metriky ich porovnajú s referenčným cieľom.
Kedy má testovacie dáta praktický význam?
Pred nasadením úverového modelu sa testovacie obdobie odomkne až po zmrazení kódu a prahu.
S čím si pojem nezamieňať?
Testovacia sada hodnotí finálny postup; validačná sada sa používa na jeho výber a ladenie.
Ako sa výsledok kontroluje?
Auditujú sa prístupy k sade, kontrolné súčty, časové a skupinové oddelenie, duplikáty a počet vykonaných porovnaní.
Na čo si dať pozor?
Jedno priemerné skóre môže zakryť zlyhania podskupín, časový posun alebo široký interval neistoty.