Dáta pre AI

vzorkovanie dát

Anglický výraz data sampling

pokročiléheslo č. 9385 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená vzorkovanie dát?

Vzorkovanie dát vyberá podmnožinu z definovanej populácie podľa pravdepodobnostného alebo účelového dizajnu. Na korektný odhad treba poznať výberové pravdepodobnosti, jednotku, rámec populácie a prípadné váhy; náhodný výber z dostupných dát nemusí byť reprezentatívny.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Operátor vyberie na audit 5 % predikcií, ale zriedkavé triedy a nové regióny nadvzorkuje. Pri reportovaní celkovej chybovosti použije inverzné váhy, aby účelový výber neskreslil populáciu.

Overiteľnosť

Odborné zdroje

  1. Gebru et al. - Datasheets for Datasetsarxiv.org
  2. Breck et al. - The ML Test Scoreresearch.google

Praktické odpovede

Často kladené otázky

Ako funguje vzorkovanie dát?

Generátor podľa dizajnu priradí jednotkám pravdepodobnosť výberu a uloží semeno, stratu a váhu.

Kedy má vzorkovanie dát praktický význam?

Operátor vyberie na audit 5 % predikcií, ale zriedkavé triedy a nové regióny nadvzorkuje.

S čím si pojem nezamieňať?

Vzorkovanie vyberá pozorovania z populácie; rozdelenie datasetu priraďuje už vybrané pozorovania na rôzne účely.

Ako sa výsledok kontroluje?

Kontroluje sa rámec populácie, pravdepodobnosti, pokrytie podskupín, efektívna veľkosť vzorky a opakovateľnosť.

Na čo si dať pozor?

Pohodlný alebo dostupnostný výber môže systematicky vynechať prípady, ktoré produkcia potrebuje najviac.