Dáta pre AI

automatická anotácia

Anglický výraz automated annotation

základnéheslo č. 9135 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená automatická anotácia?

Automatická anotácia používa pravidlo, existujúci model alebo externý signál na priradenie štítkov bez individuálneho ľudského rozhodnutia. Výstup sa má považovať za odvodený štítok s uvedenou verziou zdroja, skóre istoty a overenou chybovosťou.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Tím predznačí fotografie starším detektorom a ľudia kontrolujú iba neisté a rizikové prípady. Náhodnú vzorku však auditujú zo všetkých skóre, aby vysoká sebadôvera modelu nezakryla opakovanú chybu.

Overiteľnosť

Odborné zdroje

  1. Northcutt et al. - Confident Learning: Estimating Uncertainty in Dataset Labelsarxiv.org
  2. Ratner et al. - Data Programming: Creating Large Training Sets, Quicklyarxiv.org

Praktické odpovede

Často kladené otázky

Ako funguje automatická anotácia?

Model alebo pravidlo vypočíta štítok a istotu; prahy určia prijatie, ľudskú kontrolu alebo zamietnutie.

Kedy má automatická anotácia praktický význam?

Tím predznačí fotografie starším detektorom a ľudia kontrolujú iba neisté a rizikové prípady.

S čím si pojem nezamieňať?

Automatická anotácia vytvára konkrétne štítky; slabé označovanie kombinuje viac nepresných označovacích funkcií.

Ako sa výsledok kontroluje?

Meria sa presnosť podľa tried a podskupín na ručne posúdenej vzorke, kalibrácia istoty a zmena po aktualizácii modelu.

Na čo si dať pozor?

Chyby pôvodného modelu sa môžu preniesť do nového datasetu a následným trénovaním ešte zosilniť.